Ethan Mollick, Mythos급 모델 Claude 5 Fable 사용 후기 공개

Mollick에 따르면 Fable은 여러 페이지 분량의 사양서를 따라 최대 십수 시간 동안 작업을 이어 갔다. 사이버보안 용도는 가드레일 때문에 사실상 쓸 수 없어 다른 분야에서 시험했다. 프롬프트 한 번과 피드백 한 번만으로 학술적 사회과학 논문을 쓰게 했고, 모든 단어가 s로 시작하는 10페이지 분량의 시도 쓰게 했으며, Claude Code로 게임도 만들어 보았다. Claude는 이미지를 생성할 수 없어서 게임의 그림과 3D 오브젝트는 수식만으로 만들어졌다.

등시선 지도 사례에서는 1881년 원본과 비슷한 스타일로 만들자는 제안이 나왔고, Mollick이 동의하면서 작업이 시작되었다. Fable은 주로 저렴한 Claude Sonnet으로 보이는 여러 AI를 실행해 조사하게 했고, 2,200편이 넘는 실제 항공편, TGV에서 신칸센까지의 철도 시각표, 각국의 도로 속도를 수집했다. 동시에 코드를 작성하고, 검증용 에이전트와 테스트도 함께 돌렸다. 그린란드 등 외딴 지역이 추정치로 처리되어 있어 수정을 지시하자, 서로의 결과를 검증하는 적대적 에이전트 집단의 워크플로가 작동했고, 피트케언 섬으로 가는 선박의 빈도나 오타와에서 그리즈피오르로 가는 방법까지 조사했다.

가장 野心적인 사례는 사람의 답변을 분류하고 평가하는 연구용 소프트웨어다. Mollick이 19페이지 설계서를 만들게 하고 실행시키자, Fable은 9시간 30분 동안 작업해 여러 데이터셋을 가져와 사람과 AI의 판단을 보정하고 분석까지 수행하는 Concord를 만들었다. 전문가로서 오류와 누락도 찾아내 수정하게 했으며, 성과의 규모는 기존을 넘어섰다고 한다. 코드는 공개되어 있고, 남은 버그는 소프트웨어 엔지니어가 고쳐야 하므로 앞으로는 오히려 코더가 더 필요할지도 모른다고 말했다.

한계로는 Fable이 Opus의 두 배 가격이며 토큰을 대량으로 소비한다는 점이 있다. 다만 저렴한 모델에 위임하면 실비가 낮아질 가능성도 있다. 보안상 작은 징후에도 가드레일이 작동해 성능이 낮은 Claude 4.8 Opus로 전환되는 빈도가 지나치게 높다고도 지적했다. 문체에는 Claude 특유의 버릇이 남아 있다. Mollick은 예전의 '마법사'라는 비유에 대해 지금의 자신은 발주자에 가깝다고 말하며, 조종이 아니라 위탁으로, 과정이 아니라 성과로 일이 옮겨 갔다고 정리했다. 이 상황이 일시적인 인터페이스 문제인지, 능력이 높아질수록 사람의 역할이 줄어드는 방향인지에 대해서는 후자의 가능성이 높다고 보고 있다.