Как сообщает «Российская газета», новая модель нейросети Яндекса попала на независимый портал энтузиастов в сфере больших языковых моделей LLM Arena. Пользователи этого ресурса в слепом тесте сравнивают качество ответов нейросетей на свои вопросы.
В компании «Яндекс» уже подтвердили, что это лишь один из шагов на пути запуска принципиально нового по своим качествам продукта.
Первые результаты тестирования YandexGPT Experimental вывели ее в лидеры рейтинга наряду с GPT-4o, GPT-4 Turbo и Claude 3,5 Sonnet. Оценка моделей проводится пользователями. Каждый из них может задать свой вопрос и выбрать самый качественный ответ на него.
Итоговая оценка LLM Arena является наиболее объективной среди подобных сервисов, так как вердикт здесь выдают обычные люди. При этом на сервисе присутствуют и другие российские нейросети - GigaChat, Сайга и Вихрь.
В будущем проект планирую разнообразить добавлением моделей по мультимодальным задачам – когда пользователь задает вопрос картинкой или текстом. Это нововведение сделает оценку еще более разнообразной.
