Claude Fable 5.2 erreicht 64,9 % auf RoboDojo, mehr als doppelt so viel wie GPT-6 Astra in Anthropics eigenem Test

Anthropic hat am 9. November Claude Fable 5.2 veröffentlicht, ein Allzweckmodell für Programmierung, Finanzen und Wissenschaft, und in die Ankündigung ein Robotik-Ergebnis gepackt. Auf RoboDojo, einem öffentlichen Benchmark, bei dem ein Modell einen simulierten Zweiarmroboter anhand von Kamerabildern steuert, kam Fable 5.2 laut Anthropic auf 64,9 % durchschnittliche Erfolgsquote. Das ist mehr als doppelt so viel wie GPT-6 Astra mit 29,8 % und Fable 5.1 mit 27,6 %, und mehr als Claude Opus 5.5 (39,4 %) und Gemini 4 Argon (34,2 %). Anthropic hat alle Modelle selbst laufen lassen, jedes auf der höchsten Effort-Stufe.

Auf Anthropics Testaufbau ist der Sprung echt, doch die Reihenfolge der Rivalen dahinter hängt davon ab, wer die Stoppuhr hält. Bei AA-Robotics v0.1, das Artificial Analysis am 14. Oktober veröffentlichte, steuerten die Modelle einen echten Sechsachsarm durch acht Aufgaben am Tisch. Dort erreichte GPT-6 Astra 69,4 von 100 Punkten und Fable 5.1 46,3, ein Abstand von 23 Punkten. In Anthropics RoboDojo-Lauf liegen dieselben beiden Modelle nur 2,2 Punkte auseinander.

Trainierte Roboter-Policies lagen im Juli weit unten

Die Autoren von RoboDojo haben den Benchmark im Juli mit 42 Simulationsaufgaben auf der Zweiarmplattform ARX X5 veröffentlicht. Er prüft Generalisierung, Gedächtnis, Präzision, lange Aufgabenketten und offene Anweisungen. Von den 30 trainierten Roboter-Policies, die sie bewerteten, kam die beste auf 8,80 % durchschnittliche Erfolgsquote. Menschliche Experten erreichten nach demselben Protokoll 76,03 %. Anthropic sagt, Fable 5.2 habe die meisten eigens für die Robotersteuerung gebauten KI-Systeme übertroffen; auf dem Live-Leaderboard können also noch einige davor liegen. Anthropics Wert stammt aus dem eigenen Testaufbau, du kannst ihn neben die Zahlen des Papers stellen, aber nicht auf dieselbe Skala.

Jenseits des Benchmarks: ein Würfelpuzzle und ein Flaschendeckel

Laut Anthropic steuert Fable 5.2 echte Roboter deutlich besser als frühere Claude-Modelle, auch bei Aufgaben, auf die es nie gezielt trainiert wurde. Im Video lösen vom Modell gesteuerte Roboter ein Würfelpuzzle, schrauben einen Flaschendeckel ab und zeichnen einen Roboter. Im selben Beitrag schreibt Anthropic, das Modell habe mit dem Leiterplattenhersteller Diode drei elektronische Geräte entworfen: einen Sprachassistenten-Hub für zu Hause, eine USB-Freisprecheinrichtung und ein Handheld-Haustier. Alle drei funktionierten ohne elektrische Änderungen.

Fable 5.2 kostet 8 Dollar pro Million Eingabe-Token und 40 Dollar pro Million Ausgabe-Token, nach 10 und 50 Dollar bei Fable 5.1.

RoboDojo bewertet, ob der Roboter fertig wird; eine Fertigungslinie bezahlt dafür, wie schnell. Artificial Analysis maß bei Frontier-Modellen etwa 30 Minuten pro Aufgabe gegenüber 20 Sekunden bei einem Menschen, und Fable 5.1 plante rund zehn Minuten, bevor es sich zum ersten Mal bewegte.