GPT-4 очолив рейтинг ШІ для чат-ботів

GPT-4 очолив рейтинг ШІ для чат-ботів

У сервісі LMSYS Chatbot Arena оновився рейтинг великих мовних моделей штучного інтелекту. Він дозволяє оцінити, які моделі нині найкраще справляються зі своїми задачами.

LMSYS Chatbot Arena – це краудсорсингова відкрита платформа для оцінювання великих мовних моделей (LLM). Для складання рейтингу оцінюються понад 300 тис. людських відгуків про роботу моделей за системою рейтингу Ело, пише sundries.

Як працює тест — люди вводять запит та обирають кращу відповідь з кількох варіантів від різних моделей. На основі тисяч користувацьких тестів формується і ранжирується топ.

Як свідчить новий рейтинг чатбот-арени, лідером серед LLM наразі є GPT4. Нещодавні твердження Claude, що їхня модель краще не підтвердилися. Вона зайняла третє місце. Відразу за нею розташувалася модель Bard (Gemini Pro) від Google. Всі ці моделі отримали рейтинг Ело понад 1200.

Ознайомитися з докладними актуальними результатами ранжування наявних великих мовних моделей можна за наступною адресою.

Нагадаємо, Канада вже прийняла майже 250 тисяч українських біженців

Андрій Самойленко - pravdatutnews.com

Теги: 
Читайте також
Google тестує рекламу в ШІ-відповідях Google тестує рекламу в ШІ-відповідях
Чат-боти наразі вважаються персональними помічниками, а поява реклами в їхніх відповідях може змінити сприйняття користувачами цього інструменту в гірший бік
Навіть найновіші моделі ШІ «ступорять» і «тупіють» у діалозі з людиною – Microsoft  Research Навіть найновіші моделі ШІ «ступорять» і «тупіють» у діалозі з людиною – Microsoft Research
Дослідження підтвердило скарги користувачів, мовляв, чат-боти на основі штучного інтелекту дають все гірші відповіді при тривалій роботі.
Alibaba і Tencent вимкнули ШІ-ботів на час вступних іспитів у Китаї Alibaba і Tencent вимкнули ШІ-ботів на час вступних іспитів у Китаї
Китайські техногіганти тимчасово обмежили функції своїх чат-ботів зі штучним інтелектом, щоб запобігти шпаргалкам під час національного іспиту «гаокао».
Loading...
Load next