Amazons KI-Chef sagt: Benchmarks sind kaputt - die reale Welt zählt mehr

Amazon-Chef überdenkt den Wettbewerb im Bereich der künstlichen Intelligenz

Während sich der Wettlauf um die Vorherrschaft im Bereich der künstlichen Intelligenz (KI) verschärft, hat Rohit Prasad, Amazons führender KI-Manager, eine klare Botschaft an all jene, die von Modell-Benchmarks geblendet sind: Es ist höchste Zeit, dass wir unseren Blickwinkel ändern. Als Senior Vice President für Allgemeine Künstliche Intelligenz (AGI) bei Amazon äußert Prasad seine Besorgnis darüber, dass die derzeitige Fixierung auf Ranglisten den Blick auf den entscheidenden Aspekt ablenkt – die praktische Anwendung in der realen Welt.

Amazons Fokus auf praktische KI-Anwendungen

Im Rahmen eines Interviews mit … kritisierte Prasad offen die Abhängigkeit der KI-Community von Standardtests zur Messung der Modellleistung. Quellen: Alex Heath im Vorfeld der re:Invent-Konferenz von Amazon Web Services in Las Vegas. Er wies auf die mangelnde Konsistenz und Transparenz bei den Bewertungen hin, was es schwierig mache, fundierte Schlussfolgerungen über die tatsächlichen Fähigkeiten eines Modells zu ziehen. Darüber hinaus wies er die meisten Benchmarks als unecht zurück, bezeichnete sie als ’verzerrt“ und betonte die Notwendigkeit einer Anwendung unter realen Bedingungen.

Entsprechend seiner Ansichten legt Amazon unter Prasads Führung den Schwerpunkt eher auf den praktischen Einsatz von KI als auf theoretische Vorherrschaft. Das Unternehmen investiert in kundenorientierte KI-Tools und -Dienste, die darauf ausgelegt sind, konkrete Probleme zu lösen, und steigert so den geschäftlichen und verbraucherbezogenen Nutzen seiner KI-Technologien.

Der vollständige Artikel von „The Verge“ über den neuen KI-Ansatz

Prasad fordert die KI-Branche dazu auf, ihren Fokus von Ranglisten auf die Entwicklung von Modellen zu verlagern, die sich nahtlos in alltägliche Abläufe integrieren lassen, die Produktivität steigern und in verschiedenen Branchen Innovationen anstoßen. Er ist der Ansicht, dass der wahre Test für KI nicht darin besteht, Punkte in einer Rangliste zu sammeln, sondern in ihrer Leistung, wenn es wirklich darauf ankommt.

Die Haltung von Amazon stellt eine klare Herausforderung für die gängige Sichtweise in der KI-Community dar. Da sich dieses Gebiet ständig weiterentwickelt, wird der Bedarf an aussagekräftigen Kennzahlen, die die Leistung in der Praxis widerspiegeln, immer deutlicher. Prasads Ratschlag erscheint daher nicht nur treffend, sondern auch zeitgemäß – ein Weckruf für eine dringend notwendige Neuausrichtung unseres Ansatzes in Bezug auf KI.

Den vollständigen Artikel finden Sie bei The Verge.

Max Krawiec

Teilen Sie
Herausgegeben von
Max Krawiec

Diese Website verwendet Cookies.