Ce que fait Arena
Arena a débuté sous le nom de Chatbot Arena, un projet de recherche de l'UC Berkeley, a été rebaptisé LMArena et fonctionne désormais à l'adresse arena.ai sous Arena Intelligence Inc. Vous saisissez un prompt, le mode Battle affiche les réponses de deux modèles anonymes, et vous votez pour celle que vous préférez. Les noms des modèles ne sont révélés qu'après le vote, et seuls les votes exprimés tant que les modèles sont anonymes comptent pour les classements. Arena transforme ces votes en scores à l'aide du modèle Bradley-Terry, une méthode de comparaison par paires proche d'Elo, avec contrôle du style.
Outre le mode Battle, il existe le mode Side by Side (vous choisissez les deux modèles ; les votes ne comptent pas pour le classement) et le mode Direct (discussion avec un seul modèle, sans vote). Le site couvre le chat, la recherche web, la génération d'images et de vidéos, ainsi que la création d'applications et de sites web. Des classements sont publiés pour Text, WebDev, Image-to-WebDev, Vision, Document, Search, Text to Image, Image Edit, Text to Video, Image to Video, Video Edit et une catégorie Agent. Les laboratoires de modèles testent également des modèles pré-commercialisation sur Arena sous des noms de code.
