Claude Fable 5.2, RoboDojo 64.9%… Anthropic 자체 측정에서 GPT-6 Astra의 두 배 넘어

Anthropic은 11월 9일 코딩·금융·과학용으로 내세운 범용 모델 Claude Fable 5.2를 공개하면서 출시 글에 로봇 성적을 실었다. RoboDojo는 모델이 카메라 영상을 보고 시뮬레이션 속 양팔 로봇을 조종하게 하는 공개 벤치마크다. Anthropic에 따르면 Fable 5.2의 평균 성공률은 **64.9%**로, GPT-6 Astra(29.8%)와 Fable 5.1(27.6%)의 두 배가 넘고 Claude Opus 5.5(39.4%)와 Gemini 4 Argon(34.2%)도 앞섰다. 모든 모델은 Anthropic이 직접, 각 모델의 가장 높은 추론 설정으로 돌렸다.

Anthropic의 평가 환경에서 나온 도약은 진짜지만, 그 뒤 경쟁 모델들의 순서는 누가 측정하느냐에 따라 달라진다. Artificial Analysis가 10월 14일 공개한 AA-Robotics v0.1은 실제 6축 로봇팔로 탁상 과제 8개를 수행하게 했다. 여기서 GPT-6 Astra는 100점 만점에 69.4점, Fable 5.1은 46.3점으로 23점 차이가 났다. Anthropic의 RoboDojo 측정에서 두 모델의 차이는 2.2포인트에 불과하다.

7월 기준, 로봇 전용 정책의 성적은 낮았다

RoboDojo 연구진은 7월 ARX X5 양팔 플랫폼 위에 42개 시뮬레이션 과제를 만들어 벤치마크를 공개했다. 일반화, 기억, 정밀도, 장기 과제, 자유 지시 수행을 평가한다. 연구진이 평가한 학습된 로봇 정책 30개 가운데 최고 평균 성공률은 **8.80%**였고, 같은 절차에서 인간 전문가는 **76.03%**를 기록했다. Anthropic은 Fable 5.2가 로봇 제어 전용 AI 시스템 대부분을 앞섰다고 밝혀, 실시간 리더보드에는 이보다 위에 있는 시스템이 몇 개 남아 있을 수 있다. Anthropic의 수치는 자체 평가 환경에서 나온 것이어서 논문 수치와 나란히 놓을 수는 있어도 같은 잣대로 비교할 수는 없다.

벤치마크 밖에서는 퍼즐 큐브와 병뚜껑

Anthropic은 Fable 5.2가 이전 Claude 모델보다 실물 로봇 제어 능력이 크게 나아졌고, 따로 학습하지 않은 과제도 해낸다고 설명했다. 공개 영상에서는 모델이 조종하는 로봇이 퍼즐 큐브를 맞추고, 병뚜껑을 돌려 열고, 로봇 그림을 그린다. 같은 글에서 Anthropic은 회로기판 제조사 Diode와 함께 가정용 음성비서 허브, USB 스피커폰, 휴대용 가상 반려동물 등 전자기기 3종을 설계했고, 세 가지 모두 전기적 수정 없이 작동했다고 밝혔다.

Fable 5.2 가격은 입력 100만 토큰당 8달러, 출력 100만 토큰당 40달러로, Fable 5.1의 10달러·50달러보다 낮아졌다.

RoboDojo는 로봇이 일을 끝냈는지를 채점하지만, 생산라인이 돈을 내는 건 얼마나 빨리 끝내느냐다. Artificial Analysis 측정에서 프런티어 모델은 과제 하나에 약 30분이 걸렸고 사람은 20초였다. Fable 5.1은 첫 동작 전까지 계획에만 약 10분을 썼다.