Arena の機能
Arena は UC Berkeley の研究プロジェクトである Chatbot Arena として始まり、LMArena への名称変更を経て、現在は Arena Intelligence Inc. のもと arena.ai で運営されています。プロンプトを入力すると、Battle モードが匿名の2つのモデルからの回答を表示し、好みのほうに投票します。モデル名は投票後にのみ明かされ、モデルが匿名の状態で投じられた投票のみがランキングに反映されます。Arena はこれらの投票を、Elo に似たペア比較手法である Bradley-Terry モデルでレーティングに変換し、スタイル制御を適用しています。
Battle モードのほかに、Side by Side(2つのモデルを自分で選択します。投票はリーダーボードに反映されません)と Direct モード(1つのモデルとチャットします。投票はありません)があります。サイトでは、チャット、ウェブ検索、画像・動画生成、アプリやウェブサイトの構築を扱っています。リーダーボードは、Text、WebDev、Image-to-WebDev、Vision、Document、Search、Text to Image、Image Edit、Text to Video、Image to Video、Video Edit、および Agent カテゴリで公開されています。モデルを開発するラボも、コードネームを用いて Arena でリリース前のモデルをテストしています。
