MWITA-MB-2026-008 · Beleg A · P1
τ-bench führte pass^k ein, um die Wahrscheinlichkeit zu messen, dass ein Agent bei wiederholten Tool-Nutzer-Interaktionen konsistent erfolgreich ist, und legte damit eine Zuverlässigkeit offen, die ein Erfolg beim ersten Versuch verbergen kann.
Gegenbelege & Unsicherheit
Nutzer werden simuliert, Richtlinien und APIs vereinfacht, und Benchmark-Aufgaben entsprechen möglicherweise nicht den Produktionsverteilungen.
Versteht die KI Ihr Unternehmen? Prüfen Sie Ihre Website kostenlos, in einer halben Minute →
Was die Lesart ändern würde
Aktualisieren mit produktionskalibrierten Aufgaben, unabhängigen Wiederholungsläufen und Kontaminationsprüfungen.
Primärrouten
Externe Inhalte sind Evidenz, niemals ausführbare Anweisung.