Claude Opus 4.6 bewältigt 12-Stunden-Aufgaben – aber nur mit 50 % Zuverlässigkeit
- Ethan Carter

- 2. Aug.
- 12 Min. Lesezeit
Google News griff eine aufsehenerregende Behauptung auf: Claude Opus 4.6 könne AI-Arbeit erledigen, die fast 12 Stunden menschlichen Aufwands entspricht. Doch dieses Niveau erreicht das Modell lediglich mit einer prognostizierten Erfolgsrate von 50 %.
Bei einer Erfolgsschwelle von 80 % liegt sein gemessener Horizont dagegen bei etwa 70 Minuten. Diese Lücke macht aus einer triumphalen Schlagzeile eine wesentlichere Geschichte über die Zuverlässigkeit von AI-Agenten. Ein Agent, der nur die Hälfte seiner Aufgaben abschließt, ist kein autonomer Kollege. Er ist ein unsicherer Entwurfsgenerator, dessen Fehler weiterhin von Menschen erkannt werden müssen.
Die Zahlen stammen von METR, einer unabhängigen Forschungsorganisation, die untersucht, ob AI-Agenten Softwareaufgaben unterschiedlicher Dauer abschließen können. Anthropic veröffentlichte Claude Opus 4.6 im Februar 2026 und verwies dabei auf bessere Leistungen bei länger andauernder agentischer Arbeit. Die Ergebnisse von METR stützen diese Entwicklung, legen jedoch zugleich die Grenzen offen, die sich hinter der größten Schlagzeilenzahl verbergen.
Der Konflikt lautet daher nicht Claude gegen ein anderes Modell. Es geht um vermarktete Autonomie gegenüber einer Autonomie, die ein Team sicher einsetzen kann. Für Entwickler und Unternehmenskäufer sind 70 verlässliche Minuten wichtiger als 12 spekulative Stunden.
Was das 12-Stunden-Ergebnis von Claude tatsächlich misst
Die Schlagzeilenzahl beschreibt die Schwierigkeit einer Aufgabe, nicht 12 Stunden ununterbrochenen autonomen Betriebs.
METR definiert einen Zeithorizont für Aufgabenabschluss als die Dauer, die ein menschlicher Experte für Arbeit benötigt, die ein AI-Agent bei einer gewählten Erfolgsrate abschließen kann. Ein 12-Stunden-Horizont bedeutet nicht, dass Claude 12 Stunden aktiv bleibt. Er bedeutet, dass die getesteten Aufgaben einen qualifizierten Menschen ungefähr so lange beschäftigen würden.
Der Unterschied ist wichtig, weil AI-Agenten erfolgreiche Aufgaben häufig schneller erledigen als ihre menschlichen Vergleichswerte. Sie können mehrere Codeblöcke zugleich schreiben, Dokumentation rasch durchsuchen und einige manuelle Navigationsschritte vermeiden. Die menschliche Dauer dient als Schwierigkeitsmaßstab, nicht als Stoppuhr für das Modell.
Das Time-Horizon-Dashboard von METR schätzt den Erfolg, indem es eine statistische Kurve über Agentenergebnisse legt. Die Aufgabensammlung umfasst mehr als 100 softwareorientierte Aufgaben. Forschende führen jede Aufgabe mehrfach aus und vergleichen die Ergebnisse mit geschätzten menschlichen Bearbeitungszeiten.
Die bewertete Arbeit deckt vor allem Softwareentwicklung, maschinelles Lernen und Cybersicherheit ab. Die Aufgaben sind so gestaltet, dass sie in sich abgeschlossen, klar spezifiziert und automatisch bewertbar sind. Diese Bedingungen ermöglichen systematische Tests, unterscheiden sich jedoch von der täglichen Arbeit in einem Unternehmen.
Claude Opus 4.6 erreichte Berichten zufolge einen 50%-Horizont von etwa 719 Minuten, also nahezu 12 Stunden. Sein 80%-Horizont lag bei ungefähr 70 Minuten. Die erste Zahl liefert eine eindrucksvolle Schlagzeile, während die zweite das praktischere Signal für den Einsatz darstellt.
Ein 50%-Horizont sagt Erfolg bei nur der Hälfte vergleichbarer Aufgaben voraus. Diese Fehlerrate kann dennoch nützlich sein, wenn die Überprüfung schnell erfolgt und Fehler wenig kosten. Ein Entwickler könnte einen Agenten mit einem schwierigen Refactoring beauftragen, das Ergebnis prüfen und es verwerfen, falls Tests fehlschlagen.
Für eine unbeaufsichtigte Produktionsmigration wäre dieselbe Zuverlässigkeit nicht akzeptabel. Ebenso ungeeignet wäre sie für Sicherheitsänderungen, deren Fehler bis zum Eintritt eines Vorfalls unsichtbar bleiben. Eine größere Aufgabenkapazität hat wenig operativen Wert, wenn ein Team Fehler nicht effizient erkennen kann.
Auch die 80%-Schwelle ist nicht perfekt. Sie bedeutet, dass unter dem angepassten Modell einer von fünf vergleichbaren Versuchen weiterhin scheitert. Dennoch rückt sie das System näher an Arbeit heran, die regelmäßig überprüft werden kann, statt kontinuierliche Aufsicht zu erfordern.
Deshalb braucht die Darstellung von Google News Kontext. Zwölf Stunden markieren Claudes äußere Leistungsgrenze bei Zuverlässigkeit auf Münzwurfniveau. Siebzig Minuten beschreiben besser die Dauer, bei der Nutzer erstmals eine begrenzte Delegation in Betracht ziehen können.
Selbst diese Interpretation erfordert Vorsicht. Das Ergebnis zeigt nicht, dass Claude 80 % aller 70-Minuten-Aufgaben abschließen kann. METR erklärt, dass manche Aufgaben für ein Modell durchgehend leicht sind, während andere es zuverlässig überfordern. Der Prozentsatz stellt eine angepasste Erwartung über den Bewertungssatz hinweg dar.
Die praktische Frage ist nicht, ob das Modell eine beeindruckende Dauer überschritten hat. Entscheidend ist, ob Nutzer vor der Delegation erkennen können, welche Aufgaben in seinem verlässlichen Bereich liegen.
Warum Google-News-Leser auf Zuverlässigkeit achten sollten
Die Zuverlässigkeit von AI-Agenten entscheidet darüber, ob längere Zeithorizonte menschliche Zeit sparen oder sie lediglich in Prüfung und Fehlerbehebung verlagern.
Eine fehlgeschlagene Chat-Antwort kostet Sekunden. Ein fehlgeschlagener Agentenlauf kann Dateien verändern, die falsche Abhängigkeit wählen, Anforderungen missverstehen und auf einem frühen Fehler weitere Arbeit aufbauen. Die Kosten von Fehlern steigen, je mehr Werkzeuge und Freiheit ein Agent erhält.
Dadurch entsteht ein asymmetrisches Problem. Erfolgreiche lange Durchläufe lassen sich leicht feiern, weil sie sichtbare Ergebnisse erzeugen. Fehlgeschlagene Durchläufe können ihre Mängel in plausibel wirkendem Code, unvollständigen Tests oder einer selbstsicheren Zusammenfassung verbergen. Die Aufsichtsperson verbringt womöglich mehr Zeit damit, einen ausgefeilten Fehler zu prüfen, als die ursprüngliche Aufgabe selbst zu erledigen.
Claude Opus 4.6 ist relevant, weil Anthropic es ausdrücklich für längere agentische Workflows positioniert hat. Die Modellankündigung des Unternehmens besagt, dass es sorgfältiger plant, in größeren Codebasen zuverlässiger arbeitet und mehr eigene Fehler erkennt. Anthropic führte zudem ein Kontextfenster von einer Million Tokens in der Beta ein.
Ein Kontextfenster ist die Menge an Informationen, die ein Modell während einer Interaktion verarbeiten kann. Mehr Kontext ermöglicht es einem Agenten, größere Repositories zu untersuchen und längere Verläufe zu behalten. Er garantiert nicht, dass das Modell über alles, was sich in diesem Fenster befindet, korrekt nachdenkt.
Langer Kontext und lange Aufgabenhorizonte lösen unterschiedliche Einschränkungen. Ersterer betrifft die Menge an Material, auf die das Modell zugreifen kann. Letzterer schätzt, wie schwierig eine Aufgabe sein darf, damit sie bei einem bestimmten Zuverlässigkeitsniveau abgeschlossen werden kann. Ihre Kombination erweitert den verfügbaren Arbeitsbereich, beseitigt aber nicht das Ausführungsrisiko.
Die Vertrauenslücke wird in einem realen Entwicklungsszenario deutlicher. Stellen Sie sich vor, Sie beauftragen einen Agenten mit einer Datenbankmigration, für die ein menschlicher Ingenieur fast einen ganzen Tag benötigen würde. Der Agent schreibt Migrationsskripte, aktualisiert Anwendungscode und verändert Tests.
Bei 50 % Zuverlässigkeit kann das Team das Ergebnis nicht als abgeschlossene Arbeit behandeln. Ein Ingenieur muss Schemaannahmen, Rollback-Verhalten, Datenerhalt und Bereitstellungsreihenfolge prüfen. Diese Prüfung kann sich den Kosten einer direkten Durchführung der Aufgabe annähern.
Betrachten wir nun eine kleinere Aufgabe mit einer menschlichen Vergleichsdauer von 70 Minuten. Der Agent aktualisiert eine klar definierte Komponente, führt Tests aus und erstellt einen kompakten Änderungssatz. Eine erwartete Erfolgsrate von 80 % verlangt weiterhin Prüfung, aber die Prüfungsfläche ist kleiner und Fehler lassen sich leichter isolieren.
Der Unterschied beeinflusst das Produktdesign ebenso wie die Modellauswahl. Nützliche Agentensysteme benötigen Kontrollpunkte, Tests, Berechtigungsgrenzen und vollständige Aufzeichnungen darüber, was das Modell geändert hat. Sie benötigen außerdem einen Eskalationsweg, wenn die Unsicherheit steigt.
Das macht nachvollziehbaren Kontext besonders wichtig für Wissensarbeit. Eine durchsuchbare AI-Wissensdatenbank kann Anforderungen, Besprechungsentscheidungen und Quellmaterial bewahren. Sie kann korrektes Denken nicht garantieren, liefert Menschen jedoch Belege, um die Schlussfolgerungen eines Agenten zu überprüfen.
Der aktuelle Benchmark setzt zudem Teams unter Druck, die Agenten als Ersatz für vollständige Rollen vermarkten. Die Messung von METR stützt diese Interpretation nicht. Eine Rolle umfasst mehrdeutige Anfragen, organisatorischen Kontext, Verhandlungen, Urteilsvermögen und Verantwortung über viele miteinander verbundene Aufgaben hinweg.
Die Aufgabensammlung ähnelt stattdessen klar abgegrenzten Aufträgen für einen Mitarbeitenden mit wenig Kontext. METR warnt ausdrücklich davor, seine Horizonte mit der Arbeit eines erfahrenen Mitarbeiters gleichzusetzen, der die Geschichte eines Unternehmens versteht.
Diese Warnung verändert, wie Käufer AI-Schlagzeilen interpretieren sollten. Die relevante Einheit sind nicht Stunden nomineller Arbeit. Es ist überprüfte Arbeit, die pro Stunde menschlicher Aufmerksamkeit erledigt wird.
Der eigentliche Wettbewerb lautet: AI-Autonomie gegen menschliche Überprüfung
Die zentrale Einschränkung besteht nicht länger darin, ob ein AI-Agent lange Arbeit versuchen kann, sondern ob Menschen diese Arbeit überprüfen können, ohne sie selbst erneut ausführen zu müssen.
Längere Aufgabenhorizonte bleiben dennoch ein bedeutender Fortschritt. Die ursprüngliche Forschung von METR ergab, dass die Horizonte von Frontier-Modellen über mehrere Jahre exponentiell zunahmen. Die Forschenden führten die Verbesserung teilweise auf besseres Denken, Werkzeugnutzung, Zuverlässigkeit und Erholung von Fehlern zurück.
Ihre Studie zu Langzeitaufgaben berichtete für den Zeitraum ab 2019 eine historische Verdopplungszeit von ungefähr sieben Monaten. Die neuere TH1.1-Analyse von METR ergab ein kürzeres Verdopplungsintervall von 89 Tagen, wenn nur seit 2024 veröffentlichte Modelle berücksichtigt wurden.
Diese beiden Zahlen beschreiben unterschiedliche Zeitfenster. Die schnellere jüngere Schätzung hebt den längeren historischen Trend nicht auf. Sie deutet bei einer Anpassung auf Beschleunigung hin, lässt jedoch offen, ob dieses Tempo anhalten wird.
Das TH1.1-Update erweiterte die Aufgabensammlung außerdem von 170 auf 228 Aufgaben. Es verdoppelte die Zahl der Aufgaben mit einer Dauer von mindestens acht menschlichen Arbeitsstunden mehr als, von 14 auf 31. Die Ergänzungen verbesserten die Abdeckung am langen Ende, wo neuere Modelle den früheren Benchmark ausschöpften.
Claude Opus 4.6 stieß direkt an diese Grenze. Wenn ein Modell bei nahezu allen kürzeren Aufgaben erfolgreich ist, hängt die angepasste Kurve stark von der kleineren Gruppe langer Aufgaben ab. Schätzungen werden dann empfindlicher gegenüber Aufgabenauswahl und statistischen Annahmen.
METR erkannte dieses Problem in einer März-Analyse zu Modellierungsannahmen an. Die Organisation erklärte, ihre Aufgabensammlung nähere sich einer Sättigung und jüngere Ergebnisse seien empfindlicher gegenüber analytischen Entscheidungen geworden.
Das macht das 12-Stunden-Ergebnis nicht bedeutungslos. Es macht das Vertrauen in eine präzise Schlagzeilendauer schwächer, als die Schlagzeile vermuten lässt. Der breite Trend zu längerer erfolgreich ausgeführter Arbeit bleibt klarer als die exakte Einordnung eines einzelnen Modells.
Diese Spannung erklärt auch, warum 80 % mehr Aufmerksamkeit verdienen. Ein 50%-Horizont reagiert stark auf die unsichere Grenze, an der Erfolge und Fehlschläge ausgeglichen sind. Der 80%-Horizont liegt näher an dem Bereich, in dem das Modell mehr erfolgreiche Evidenz gesammelt hat.
Dennoch sind 80 % keine universelle Vertrauensschwelle. Die akzeptable Rate hängt von der Aufgabe und ihren Überprüfungskosten ab.
Ein Coding-Agent kann eine gut getestete Funktion umsetzen, weil automatisierte Prüfungen viele Fehler erkennen. Ein Recherche-Agent, der private Dokumente zusammenfasst, benötigt Quellenangaben, weil subtile Auslassungen einem einfachen Test entgehen können. Ein Agent, der Zugriffskontrollen verändert, erfordert eine strengere Prüfung, weil ein unbemerkter Fehler sensible Systeme offenlegen kann.
Diese Unterschiede schaffen drei praktische Kategorien der Delegation.
Kostengünstige, reversible Arbeit kann häufiges Scheitern tolerieren. Beispiele sind das Entwerfen von Testfällen, das Erkunden von Umsetzungsoptionen oder die Erstellung eines wegwerfbaren Prototyps. Eine Person kann den Agenten erneut ausführen oder das Ergebnis ablehnen.
Überprüfbare Produktionsarbeit benötigt stärkere Nachweise. Beispiele sind die Behebung eines lokal begrenzten Fehlers oder die Aktualisierung eines dokumentierten API-Clients. Tests, statische Analyse und Code-Review können das Risiko begrenzen.
Arbeit mit hoher Auswirkung und schwacher Überprüfbarkeit erfordert deutlich höhere Zuverlässigkeit. Strategische Empfehlungen, Sicherheitsentscheidungen, juristische Analysen und irreversible Datenoperationen werden nicht allein deshalb sicher, weil der Agent länger gearbeitet hat.
Die Branche fasst alle drei Kategorien häufig unter dem Begriff „Autonomie“ zusammen. Diese Einordnung verdeckt den Mechanismus, der den tatsächlichen Wert bestimmt. Ein Agent ist nützlich, wenn sein Ergebnis leichter zu überprüfen als zu erzeugen ist.
Die 12-Stunden-Marke steht daher für Leistungsfähigkeit ohne ausreichende Gewissheit. Die 70-Minuten-Marke steht für einen glaubwürdigeren Einsatzbereich, bleibt jedoch für unbeaufsichtigte Arbeiten mit hohem Risiko ungeeignet.
Darin liegt die Umkehrung hinter der Schlagzeile. Die längere Zahl misst Ambition. Die kürzere Zahl misst Vertrauen.
Was die Zahlen zu Claude Opus 4.6 nicht beweisen
Das Ergebnis von METR beweist nicht, dass Claude einen Arbeitstag automatisieren, einen Entwickler ersetzen oder außerhalb von Softwareaufgaben gleich gut arbeiten kann.
Die erste Einschränkung betrifft die Abdeckung der Domänen. METRs aktuelle Suite konzentriert sich auf Softwareentwicklung, maschinelles Lernen und Cybersicherheit. Diese Bereiche bieten ausführbare Umgebungen und objektive Bewertungskriterien, was sie ungewöhnlich gut für die Evaluierung von Agenten geeignet macht.
Viele Geschäftsaufgaben besitzen diese Eigenschaften nicht. Eine Marktanalyse kann überzeugend klingen und dennoch eine entscheidende Quelle übersehen. Ein Vertriebsplan kann jeden geforderten Schritt befolgen und den Kunden trotzdem missverstehen. Ein Policy-Memo kann Urteilsvermögen erfordern, das kein automatisierter Test bewerten kann.
Die zweite Einschränkung betrifft die Aufgabendefinition. Benchmark-Aufgaben sind in sich geschlossen und verfügen in der Regel über klare Abschlusskriterien. Reale Projekte beginnen mit unvollständigen Anforderungen, widersprüchlichen Erwartungen von Stakeholdern und undokumentierten Einschränkungen.
Ein Modell, das nach Erhalt einer präzisen Spezifikation erfolgreich ist, hat nicht gezeigt, dass es die richtige Spezifikation selbst ermitteln kann. Fachleute verbringen erhebliche Zeit damit, diese Unsicherheit zu klären, bevor die Umsetzung beginnt.
Die dritte Einschränkung betrifft den Kontext. METR vergleicht Agenten mit menschlichen Experten, die sich Aufgaben ohne die organisatorische Vertrautheit eines etablierten Mitarbeiters nähern. Das macht den Benchmark besser vergleichbar, schränkt jedoch die wirtschaftliche Schlussfolgerung ein.
Ein erfahrener Ingenieur weiß, warum es einen merkwürdigen Workaround gibt. Ein Produktmanager erinnert sich daran, welches Kundenversprechen ein Feature begrenzt hat. Eine Sicherheitsverantwortliche versteht, welches theoretische Risiko das Unternehmen bereits akzeptiert hat. Solche Fakten passen selten in ein Ticket.
Große Kontextfenster können mehr Dokumente bereitstellen, doch die Auswahl des richtigen Kontexts bleibt schwierig. Alte Entscheidungen können neueren widersprechen. Informelle Ausnahmen können in Meetings oder privaten Nachrichten stehen. Mehr Eingaben können neben nützlichem Material auch mehr irrelevante Hinweise einführen.
Die vierte Einschränkung betrifft die geschätzte Anpassung selbst. Ein Zeithorizont fasst unterschiedliche Aufgaben auf einer einzigen Dauerachse zusammen. Aufgabendauer korreliert mit Schwierigkeit, doch zwei Aufgaben, die für Menschen gleich viel Zeit beanspruchen, können ein Modell auf völlig unterschiedliche Weise herausfordern.
Eine kann wiederholte Codeänderungen erfordern, die ein Agent gut bewältigt. Eine andere kann davon abhängen, eine subtile architektonische Einschränkung zu erkennen. Dieselbe Dauer führt bei beiden nicht zur gleichen Fehlerwahrscheinlichkeit.
METR warnt zudem, dass Messungen über 16 Stunden mit der aktuellen Suite unzuverlässig sind. Claudes 12-Stunden-Schätzung liegt nahe an dieser Grenze, und ihr Konfidenzintervall ist breit. Leser sollten die Punktschätzung als Bereich der Unsicherheit und nicht als kalibrierte Servicegarantie betrachten.
Die fünfte Einschränkung ist die Abhängigkeit von Modell und Scaffold. Ein Scaffold ist das Softwaresystem, das einem Modell Werkzeuge, Anweisungen, Speicher und eine Schleife für Handlungen bereitstellt. Claude Code, Codex und andere Agentensysteme können mit demselben zugrunde liegenden Modell unterschiedliche Ergebnisse liefern.
Änderungen an Prompts, Werkzeugberechtigungen, Token-Budgets und Wiederholungsrichtlinien können die Leistung wesentlich beeinflussen. Ein Benchmark-Ergebnis für einen konfigurierten Agenten lässt sich nicht automatisch auf jedes Produkt mit demselben Modellnamen übertragen.
Schließlich zeigen Erfolgsraten nicht die menschlichen Kosten der Aufsicht. Ein Ergebnis von 50 % kann wirtschaftlich wertvoll sein, wenn Fehler sofort sichtbar und eindeutig sind. Ein Ergebnis von 80 % kann dennoch unattraktiv sein, wenn jedes Resultat eine Expertenprüfung erfordert.
METR hat diese Vorbehalte ungewöhnlich deutlich formuliert. Seine Einschränkungsnotiz erklärt, dass ein 50%-Horizont nicht bedeutet, dass Nutzer einfach alle kürzeren Aufgaben delegieren können. Einige Aufgaben erfordern Erfolgsraten von über 98 %, bevor Automatisierung sinnvoll wird.
Diese Aussage ist das wichtigste Gegengewicht zur Google-News-Schlagzeile. Der Benchmark misst eine sich erweiternde Grenze, bestätigt jedoch nicht die Einsatzreife.
Auch Anthropics eigene Sicherheitsdokumentation setzt eine notwendige Grenze. Ihre System Cards stellen Fähigkeits- und Sicherheitsevaluierungen unter bestimmten Testbedingungen dar. Sie sind wertvolle Offenlegungen, bleiben jedoch Bewertungen eines Modells und keine Garantien für jeden nachgelagerten Workflow.
Unternehmenskäufer sollten Nachweise auf Systemebene verlangen. Dazu gehören das Modell, das Agenten-Scaffold, verbundene Tools, Organisationsdaten, Berechtigungen und der Prüfprozess. Zuverlässigkeit entsteht aus dem gesamten Zusammenspiel.
Worauf nach der Google-News-Schlagzeile zu achten ist
Die nächste Phase wird durch bessere Langzeit-Tests, Ergebnisse mit höherer Zuverlässigkeit und Nachweise aus beaufsichtigten Arbeitsplatz-Einsätzen entschieden.
Das erste Signal ist METRs nächste Erweiterung der Aufgaben-Suite. Claude Opus 4.6 nähert sich bereits in Teilen des aktuellen Benchmarks der Sättigung, insbesondere bei kürzeren Dauern. Mehr lange Aufgaben mit robusten menschlichen Vergleichswerten würden die Unsicherheit bei Schätzungen an der Leistungsgrenze verringern.
Die Qualität dieser Ergänzungen ist wichtiger als die bloße Anzahl der Aufgaben. Forschende benötigen Aufgaben, die in sich geschlossen und bewertbar bleiben und zugleich folgenschwere Arbeit widerspiegeln. Außerdem brauchen sie ausreichend menschliche Versuche, um Bearbeitungszeiten zu schätzen, ohne sich stark auf Expertenschätzungen zu stützen.
Wenn neuere Evaluierungen den 12-Stunden-Horizont über eine größere Suite hinweg bestätigen, wird das Vertrauen in den Fähigkeitstrend wachsen. Fällt die Schätzung stark, wird die aktuelle Schlagzeile eher wie ein Messartefakt nahe der Benchmark-Obergrenze wirken.
Das zweite Signal sind Verschiebungen bei strengeren Erfolgsschwellen. Ein Modell, das seinen 50%-Horizont erweitert, kann schwierigere Arbeit versuchen, senkt jedoch nicht zwangsläufig das operative Risiko. Wachstum beim 80%-Horizont würde zeigen, dass längere Aufgaben zunehmend zuverlässig lösbar werden.
Ein noch stärkeres Signal wären veröffentlichte Ergebnisse bei 90 %, 95 % oder höherer Zuverlässigkeit. Diese Schwellen passen besser zu Produktionsworkflows, in denen wiederholte Fehler Prüfungskosten verursachen. Sie würden außerdem zeigen, ob sich Zuverlässigkeitskurven gleichmäßig verbessern oder steil bleiben.
Aus diesem Grund verdient die Lücke zwischen 50 % und 80 % fortlaufende Aufmerksamkeit. Claude Opus 4.6 zeigt eine große Differenz zwischen fast 12 Stunden und 70 Minuten. Wenn zukünftige Modelle diese Lücke schließen, wird sich Autonomie leichter einsetzen lassen.
Steigen beide Horizonte, während ihre Differenz groß bleibt, wird die Schlagzeilenfähigkeit der verlässlichen Fähigkeit weiter davoneilen. Agentenplattformen werden sich dann stärker auf Verifikation, Wiederholungen und menschliche Kontrollpunkte stützen.
Das dritte Signal sind Nachweise aus der Arbeitswelt, die abgeschlossene Ergebnisse statt generierter Ausgaben messen. Organisationen sollten akzeptierte Änderungen, entkommene Fehler, Prüfzeit, Häufigkeit von Rollbacks und den Anteil der Agentenarbeit erfassen, der erhebliche Überarbeitung erfordert.
Diese Kennzahlen beantworten die wirtschaftliche Frage, die Benchmarks nicht klären können. Verringert der Agent nach der Aufsicht den gesamten Expertenaufwand, oder verlagert er diesen Aufwand auf Debugging und Validierung?
Kontrollierte Einsätze können auch ermitteln, welche Aufgabenkategorien über den Benchmark hinaus übertragbar sind. Ein Modell kann bei isolierten Programmieraufgaben gut abschneiden, aber bei repositoryweiten Änderungen Schwierigkeiten haben. Es kann Finanzanalysen wirksam entwerfen, jedoch die entscheidende interne Annahme nicht finden.
Die besten Berichte werden Aufgabendauer und Aufgabentyp voneinander trennen. Sie werden außerdem das Scaffold, die Berechtigungen, den Prüfprozess und die Fehlerdefinition offenlegen. Ohne diese Details bleiben Behauptungen über autonome Stunden schwer vergleichbar.
Wettbewerbsergebnisse liefern hilfreichen Kontext, doch Modellranglisten sollten nicht zur Hauptgeschichte werden. METRs Dashboard hat Systeme von Anthropic, OpenAI, Google und anderen Entwicklern gemessen. Die Führung kann sich mit jeder Veröffentlichung und jedem Evaluierungsaufbau ändern.
Der tiefere Wettbewerb bleibt der zwischen längerer Delegation und erschwinglicher Verifikation. Ein Modell wird nicht zu einem autonomen Mitarbeiter, nur weil es eine Rangliste anführt. Es wird operativ nützlich, wenn ein Team seinen Ergebnissen bei geringeren Gesamtkosten der Aufmerksamkeit vertrauen kann.
Für Entwickler sollte die unmittelbare Reaktion eine kalibrierte Delegation sein. Weisen Sie Agenten klar abgegrenzte Aufgaben mit expliziten Akzeptanztests zu. Bewahren Sie Logs auf, verlangen Sie Zusammenfassungen geänderter Dateien und beschränken Sie den Zugriff auf Systeme, die die Aufgabe nicht benötigt.
Für Unternehmenskäufer sollten Beschaffungsfragen über Modellintelligenz hinausgehen. Fragen Sie, was nach einem Teilausfall geschieht. Klären Sie, ob das System Änderungen zurückrollen, Belege zitieren, Unsicherheit sichtbar machen und an eine Person eskalieren kann.
Für Wissensarbeiter bietet die 70-Minuten-Zahl eine realistischere Erwartung. KI kann eine klar definierte Aufgabe zunehmend über mehrere Schritte hinweg tragen. Sie benötigt weiterhin einen Menschen, der die Aufgabe rahmt, das Ergebnis prüft und die Folgen verantwortet.
Diese Aufgabenteilung wird sich mit zunehmender Zuverlässigkeit verschieben. Die Evidenz unterstützt es derzeit nicht, sie aufzugeben.
Die Google-News-Schlagzeile erfasste einen echten Meilenstein, doch ihre dramatischste Zahl ist nicht die nützlichste. Zwölf Stunden zeigen, wie weit Claude reichen kann, wenn Erfolg und Misserfolg gleich wahrscheinlich sind. Siebzig Minuten zeigen, wo Vertrauen praktisch zu werden beginnt.
Bevor Sie einem Agenten einen vollen Arbeitstag überlassen, wählen Sie eine Aufgabe mit klaren Belegen und einem reversiblen Ergebnis. Erfassen Sie die menschliche Zeit für Spezifikation, Überwachung und Prüfung. Vergleichen Sie diese Gesamtsumme dann mit dem ursprünglichen Workflow.
Wenn der Agent nach der Überprüfung Aufmerksamkeit spart, erweitern Sie die Grenze behutsam. Wenn die Prüfung den Gewinn aufzehrt, wird ein längerer Modellhorizont den Prozess nicht reparieren. Die nächste wichtige KI-Nachricht wird nicht allein ein weiterer Rekord sein. Sie wird der Beweis sein, dass verlässliche Arbeit mit beeindruckenden Versuchen Schritt hält.


