Skip to content

Обзор LMSys Chatbot Arena

Arena (ранее LMArena и LMSYS Chatbot Arena) — бесплатный сайт, где вы общаетесь с двумя анонимными ИИ-моделями и голосуете за лучший ответ, а голоса формируют публичные таблицы лидеров.

Freemium

Вердикт Stork: LMSys Chatbot Arena

Arena — место, где можно бесплатно и вслепую сравнивать ИИ-модели и читать рейтинги, составленные сообществом; не вводите конфиденциальные данные и дополняйте её фиксированными бенчмарками, прежде чем выбирать модель.

LMSys Chatbot Arena reviewed by Stork AI · stork.ai/ru/chat-lmsys-org

stork
Я одно неподвижное изображение.
Одна напечатанная фраза. Ролик стоил $0.05: это минимум за видео.
Фото заговорит за $0.20 в минуту.
Загрузите одно фото и напечатайте текст. Без подписки. Одно бесплатное видео в день.
Сделать бесплатноРазработчикам: есть API

Что делает Arena

Arena начиналась как Chatbot Arena, исследовательский проект UC Berkeley, затем была переименована в LMArena, а сейчас работает на arena.ai под управлением Arena Intelligence Inc. Вы вводите запрос, режим Battle выдаёт ответы двух анонимных моделей, и вы голосуете за ту, которая нравится больше. Названия моделей раскрываются только после голосования, а в рейтинги засчитываются лишь голоса, поданные, пока модели анонимны. Arena превращает эти голоса в рейтинги с помощью модели Брэдли — Терри, метода парных сравнений, похожего на Elo, с применением контроля стиля.

Помимо режима Battle есть Side by Side (вы сами выбираете две модели; голоса не учитываются в таблице лидеров) и режим Direct (чат с одной моделью, без голосования). Сайт охватывает чат, веб-поиск, генерацию изображений и видео, а также создание приложений и сайтов. Таблицы лидеров публикуются для категорий Text, WebDev, Image-to-WebDev, Vision, Document, Search, Text to Image, Image Edit, Text to Video, Image to Video, Video Edit и Agent. Лаборатории также тестируют на Arena модели до выпуска под кодовыми названиями.

Цены Arena

ПланЦенаЧто включено
Веб-приложение Arena$0Ежедневный баланс бесплатных кредитов; 24-часовой период начинается с вашего первого запроса; режим Battle в Text Arena и Code Arena кредиты не расходует
Платный тариф для снятия лимитовНе предлагаетсяВ справочном центре Arena сказано, что платной услуги для снятия ограничений по частоте запросов нет
Arena API (предварительная версия для разработчиков)Только по приглашениям; оплата за токен по цене самой лаборатории, надбавка не указанаДоступ к передовым моделям Anthropic, Google, OpenAI, Kimi, DeepSeek и других; список ожидания для тех, у кого нет приглашения
AI Evaluations (для лабораторий моделей и предприятий)Цены не публикуются; обращайтесь в отдел продажОценки на основе реальной обратной связи от людей; по словам Arena, так она финансирует себя

Подписки на использование сайта нет. Лимиты действуют по моделям и по частоте чатов; при достижении лимита остаётся только дождаться сброса по обратному отсчёту. Сам размер кредитов не публикуется.

У Arena нет страницы с ценами; условия проверены в справочном центре и FAQ поставщика 2 ноября 2026 года. См. Arena's credit system.

Ключевые возможности

Что Arena указывает в своём FAQ, на странице How It Works и в справочном центре:

  • Режим Battle: две анонимные модели отвечают, вы голосуете, названия раскрываются после голосования
  • Режим Side by Side для сравнения двух выбранных вами моделей вне официальных рейтингов
  • Режим Direct для чата с одной выбранной моделью
  • Таблицы лидеров по тексту, программированию (WebDev), зрению, документам, поиску, изображениям и видео
  • Модели лабораторий до выпуска появляются под кодовыми названиями перед запуском
  • Открытые наборы данных с запросами, голосами и парами моделей на Hugging Face и в Arena Explorer
  • Опубликованные исследования, включая оригинальную статью о Chatbot Arena (ICML 2024)

Кому Arena подходит больше всего

Arena подойдёт тем, кто выбирает между ИИ-моделями и хочет быстро увидеть, как люди оценивают их на реальных запросах, а также тем, кто любит бесплатно пробовать в одном месте множество передовых моделей и моделей до выпуска. Исследователи получают открытые данные о предпочтениях и документированную методологию.

Ищите другие варианты, если вам нужны приватные диалоги: Arena сообщает, что ваши запросы могут передаваться в публичные исследовательские наборы данных и поставщикам моделей после обезличивания, поэтому не вводите конфиденциальные данные. Если вам нужны результаты бенчмарков на фиксированных тестах, а также данные о скорости и цене, ближе подойдёт Artificial Analysis. Для платного приватного чата с несколькими моделями используйте Poe, а для доступа к множеству моделей через API в продакшене — OpenRouter.

Что говорят пользователи

Таблицу лидеров Arena широко цитируют лаборатории и пресса, а на странице About перечислены упоминания в Wall Street Journal, Reuters и TechCrunch. Самая известная критика — статья 2025 года The Leaderboard Illusion, авторы которой проанализировали около 2 миллионов баттлов и утверждали, что некоторые крупные поставщики выигрывали от закрытого тестирования множества вариантов и от получения большей доли данных Arena, что может искажать рейтинги. На подобные опасения Arena отвечает опубликованной политикой таблицы лидеров и открытыми наборами данных. Рассматривайте таблицу лидеров как показатель предпочтений людей на запросах Arena, а не как полноценный бенчмарк.

Плюсы

  • Бесплатное использование: чтобы попробовать передовые модели, платный тариф не нужен
  • Слепое голосование снижает влияние предвзятости к брендам на рейтинги
  • Таблицы лидеров для текста, кода, зрения, поиска, изображений и видео
  • Ранний доступ к моделям до выпуска под кодовыми названиями
  • Открытые наборы данных и опубликованная методология

Минусы

  • Запросы могут передаваться исследователям и поставщикам моделей в обезличенном виде
  • Ежедневные кредиты и лимиты по моделям, снять которые за плату нельзя
  • Рейтинги отражают предпочтения на запросах Arena, а не точность на фиксированных тестах
  • Исследователи ставили под сомнение справедливость закрытого тестирования крупными лабораториями

Частые вопросы

LMArena — это то же самое, что Chatbot Arena и Arena?

Да. На странице About сказано, что платформа ранее называлась Chatbot Arena, затем LMArena, а сейчас это Arena на arena.ai, которой управляет Arena Intelligence Inc. Старый адрес lmarena.ai перенаправляет на arena.ai.

Arena бесплатна?

Да. Вы получаете ежедневный баланс бесплатных кредитов, который обновляется через 24 часа после вашего первого запроса, а режим Battle в Text Arena и Code Arena кредиты не расходует. По словам Arena, платной услуги для снятия лимитов нет.

Как рассчитываются рейтинги Arena?

По голосам сообщества в режиме Battle с использованием рейтинговой модели Брэдли — Терри с контролем стиля. Учитываются только голоса, поданные, пока обе модели ещё анонимны; голоса в режимах Side by Side и Direct на таблицу лидеров не влияют.

Приватны ли мои чаты в Arena?

Не полностью. В FAQ Arena сказано, что после обезличивания диалоги могут передаваться в публичные исследовательские наборы данных и в закрытые оценки с поставщиками моделей. Arena рекомендует не вводить конфиденциальную информацию.

Что за модели с кодовыми названиями в Arena?

Это модели до выпуска, которые лаборатории тестируют вместе с сообществом перед запуском. Если протестированная версия выпускается и соответствует политике Arena, её результат добавляется в публичную таблицу лидеров под официальным названием.

Есть ли у Arena API?

API Arena находится в предварительной версии для разработчиков, доступной только по приглашениям, и предлагает передовые модели по цене за токен, которую устанавливает сама лаборатория. Без приглашения можно записаться в список ожидания.

Сравнить альтернативы

LMSys Chatbot Arena

Freemium

Нравится статья? Получайте такие каждое утро на почту.

одно письмо в день · отписка в два клика · без сторонних трекеров