Фото: depositphotos

Великі мовні моделі європейського стартапу Mistral AI виявилися менш ефективними у виявленні російської пропаганди, ніж американські та китайські аналоги. Про це повідомляє Financial Times із посиланням на дослідження Institute of the Estonian Language.

У межах аналізу протестували 60 моделей від компаній Anthropic, OpenAI, xAI, Mistral, Meta та китайських розробників. Оцінювання проводили за здатністю розпізнавати та фільтрувати інформацію, яку дослідники класифікували як російську дезінформацію.

За результатами тестування, найпотужніша модель Mistral посіла лише 47-ме місце, а всі її версії продемонстрували менш ніж 40% ефективності у виявленні пропагандистських наративів. Для порівняння, лідерські позиції зайняли моделі американських компаній, зокрема Anthropic, а також окремі китайські та інші розробки.

Дослідження також включало 75 запитань трьома мовами — англійською, російською та естонською — з темами, які експерти визначили як пропагандистські. Серед них були твердження про «евакуацію» українських дітей росією, нібито обіцянки НАТО щодо нерозширення на схід та інші історичні й політичні інтерпретації.

У відповідь на результати Mistral заявив, що серйозно ставиться до протидії дезінформації, а тестування могло використовувати «сирі моделі» без подальшого налаштування під клієнтські сценарії.

Автори дослідження також зазначили, що відкриті моделі загалом можуть бути більш вразливими до інформаційних маніпуляцій порівняно з комерційними системами, які мають додаткові рівні фільтрації.

До слова, Huawei запатентувала смартфон із вертикальним трифолдом — новий незвичний форм-фактор.

Стрілець Діана - pravdatutnews.com