한눈에
SemiAnalysis가 자체 평가 GDPx에서 Claude Fable 5.2를 돌린 결과를 공개했다. GDPx는 전문가가 직접 만든 실무 과제로 에이전트를 평가한다.
Fable 5.2는 16.4%로 첫 줄에 올랐다.
잘하는 것, 못하는 것
Dylan Patel은 칩 설계, 소프트웨어 개발, 생물학, 재료과학에서 눈에 띄게 좋아졌다고 썼다.
반대로 금융, 법률, 퀀트 트레이딩, 하드웨어 설계에서는 나아지지 않았다고 했다.
AI가 AI 연구를 스스로 하는 과제(RSI)도 그대로였다. 그는 Anthropic이 이 영역 능력을 일부러 낮췄고, 그게 점수에 드러난다고 봤다.
비용 문제
Fable 5.2는 더 끈질기게 일하고 하위 에이전트를 자주 띄운다. 그래서 어떤 과제에서는 토큰을 아주 많이 쓴다.
GDPx 재료과학 과제에서는 GPT-6 Astra와 사실상 같은 점수를 내면서 비용은 89% 더 들었다. 출력 토큰은 4.3배였다.
Gemini 4 Carbon과 비교하면 비용 차이는 7.5배까지 벌어졌다.
왜 중요한가
토큰당 가격은 내려도 한 과제에 쓰는 토큰이 늘면 실제 비용은 오른다.
Latent Space도 같은 지점을 짚었다. 모델을 고를 때 1등 점수보다 과제당 비용을 함께 봐야 하는 이유다.