The Decoder· Maximilian Schreiner·· vor 1 StundenKI-Bewertung48
CloudOpsBench zeigt Schwächen von KI bei Aufgaben in der Cloud
New open-source benchmark reveals reasoning as the biggest bottleneck for AI in cloud operations
KI-Überblick
Der neue, quelloffene Test CloudOpsBench zeigt, dass KI-Systeme bei Aufgaben für den Betrieb von Cloud-Diensten vor allem an falschen Schlussfolgerungen scheitern. Von 45 Aufgaben auf AWS löste Claude Fable 5.1 60 Prozent und GPT-6 Astra 53 Prozent. Laut dem Forschungsteam entstanden rund 80 Prozent der Fehlschläge, weil die Systeme den Umfang einer Aufgabe falsch einschätzten, betroffene Dienste übersahen oder zu früh aufhörten.
Quelle:The Decoder · the-decoder.com