O que o Arena faz
O Arena começou como Chatbot Arena, um projeto de pesquisa da UC Berkeley, foi renomeado como LMArena e agora funciona em arena.ai, sob a Arena Intelligence Inc. Você digita um prompt, o modo Battle apresenta respostas de dois modelos anônimos e você vota na que preferir. Os nomes dos modelos só são revelados após o voto, e apenas os votos dados enquanto os modelos estão anônimos contam para os rankings. O Arena transforma esses votos em pontuações com o modelo Bradley-Terry, um método de comparação em pares semelhante ao Elo, com controle de estilo aplicado.
Além do modo Battle, há o Side by Side (você escolhe os dois modelos; os votos não contam para o ranking) e o modo Direct (conversa com um único modelo, sem votação). O site abrange chat, busca na web, geração de imagens e vídeos, e criação de aplicativos e sites. Há rankings publicados para Text, WebDev, Image-to-WebDev, Vision, Document, Search, Text to Image, Image Edit, Text to Video, Image to Video, Video Edit e uma categoria Agent. Os laboratórios de modelos também testam modelos pré-lançamento no Arena sob nomes de código.
