Які результати дослідження мовних моделей?
Дослідники протестували на упередженість до України 27 великих мовних моделей (LLM) – алгоритмів штучного інтелекту, які лежать в основі чат-ботів. Видання Texty.org.ua та організація із Сан-Франциско OpenBabylon спільно дослідили LLM від таких провайдерів, як Microsoft, Google, DeepSeek, Cohere, Alibaba Cloud, Mistral та Meta. Результатами поділився співзасновник видання Texty Роман Кульчинський в LinkedIn.
Як виявилось, найбільш “дружніми до України” є моделі з Канади, Франції та США. Їхні відповіді на майже 3000 запитань були проукраїнськими у 30,8%, 26,7% та 25,4% випадках відповідно.
Які моделі показали найгірші результати?
Останні місця в рейтингу зайняли LLM, розроблені в Китаї. Дослідження показало, що ці моделі дають лише 22,1% проукраїнських відповідей. При цьому проросійських суджень у них більше, ніж в аналогів з інших країн — 19,7%.
Які типи упереджень виявилися найпоширенішими?
Як зазначає Кульчинський, найпоширеніший тип упереджень виявилася “західна нейтральність”. Він переважає в темах, пов’язаних із політичним устроєм і ціннісними орієнтирами. Наприклад, антикорупційна політика — 52,1%, ідеологія — 49,9%, державне управління — 45,6%. Щодо російської пропаганди, вона переважно домінувала у відповідях на запитання на тему історії (26,9%), геополітики (24,4%) та національної ідентичності (22,8%).
Нагадаємо, журналісти спільно з бібліотекарями провели масштабне тестування дев’яти популярних ШІ-сервісів, щоб з’ясувати, який із них дає найточніші відповіді та найрідше “галюцинує”. Фокус також повідомляв, що вчені змусили ШІ порушити власні правила, використовуючи психологічну тактику, описану професором Робертом Чалдіні у книзі “Вплив: психологія переконання”.
Цей матеріал має виключно загальноосвітній характер і не є медичною консультацією. Інформація призначена для ознайомлення з можливими симптомами, причинами та методами виявлення захворювань, але не повинна використовуватись для самодіагностики або самолікування. У разі проблем зі здоров’ям людині треба бов’язково зверніться до кваліфікованого лікаря.
