Skip to content

model benchmarks

4 Artikel · Aktualisiert

  1. KI-Agenten ·

    Offene KI-Modelle stoßen beim Coding an eine harte Grenze

    Vielversprechende Benchmark-Ergebnisse lassen offene Modelle so erscheinen, als könnten sie Frontier-KI ersetzen. Doch die verborgenen Kosten eines Coding-Agenten liegen nicht im Token-Preis, sondern darin, was passiert, wenn die Arbeit weitergeht.

  2. KI-Forschung ·

    Dieser 164 MB große KI-Transkribierer hat einen Haken

    Ein winziger Download lässt schwergewichtige Spracherkennungsmodelle verschwenderisch aussehen – und verspricht, Aufnahmen nicht in die Cloud hochzuladen. Doch der Benchmark, der Phonon-2 so unwiderstehlich macht, lässt einige Fragen aus der Praxis offen.

  3. KI-Forschung ·

    Phonon-2 ist winzig. Sind die Whisper-Versprechen echt?

    Ein neues Sprachmodell verspricht einstündige Transkriptionen in Sekunden, komplett auf Ihrem Mac. Doch der auffälligste Vergleich basiert auf Benchmarks, die möglicherweise nicht das messen, was sie zu messen scheinen.

  4. KI-Forschung ·

    Das 178 MB Sprachmodell mit einem versteckten Haken

    Das Geschwindigkeitsversprechen in der Schlagzeile ist an eine Hardware-Bedingung geknüpft, und die Genauigkeit kehrt sich um, sobald Hintergrundgeräusche hinzukommen. Die folgenreichere Wendung verbirgt sich im Installationsbefehl: Die Gewichte sind zwar offen, aber die Engine nicht.