Basierend auf einem Transkriptauszug
Sam Witteveen erklärt, dass der neue Intelligence Index Benchmark 5.0 von Artificial Analysis zeigt, dass Open-Modelle jetzt um 12 Punkte hinter geschlossenen Modellen liegen, gegenüber zuvor 3 Punkten. Die neuen Tests verwenden zu 60 % private Held-out-Sets und mehr agentic Tasks, daher könnten ältere Leaderboards lokale Modelle überbewertet haben—Zuschauern wird geraten, eigene Bewertungen durchzuführen.
KI-generiert: Die Zusammenfassungen schreibt eine KI auf Grundlage der verlinkten Quellen. So nutzen wir KI
Source Brief
Basierend auf einem Transkriptauszug: Sam Witteveen erklärt, dass der neue Intelligence Index Benchmark 5.0 von Artificial Analysis zeigt, dass Open-Modelle jetzt um 12 Punkte hinter geschlossenen Modellen liegen, gegenüber zuvor 3 Punkten. Die neuen Tests verwenden zu 60 % private Held-out-Sets und mehr agentic Tasks, daher könnten ältere Leaderboards lokale Modelle überbewertet haben—Zuschauern wird geraten, eigene Bewertungen durchzuführen.