Французький стартап Mistral AI показав значно гірші результати у виявленні російської пропаганди, ніж американські конкуренти та навіть китайські розробки, що викликало нові питання щодо надійності відкритих ШІ-систем.
Французький розробник штучного інтелекту Mistral AI опинився в центрі уваги після оприлюднення результатів дослідження, яке засвідчило його відставання від провідних світових конкурентів у сфері протидії дезінформації. Виявилося, що моделі компанії значно гірше розпізнають російську пропаганду, ніж рішення від американських та китайських технологічних гігантів.
Про це повідомляє Financial Times із посиланням на дослідження, проведене Institute of the Estonian Language.
У межах роботи експерти перевірили 60 великих мовних моделей від провідних світових розробників, серед яких Anthropic, OpenAI, xAI, Meta, Mistral AI та низка китайських компаній. Основною метою було оцінити, наскільки ефективно сучасні системи штучного інтелекту здатні виявляти дезінформацію та маніпулятивні наративи.
Результати стали неприємним сюрпризом для європейського стартапу. Найпотужніша модель Mistral посіла лише 47-ме місце у загальному рейтингу здатності протистояти російській пропаганді. Усі чотири протестовані моделі компанії продемонстрували ефективність нижче 40% у виявленні джерел, які містять пропагандистські та маніпулятивні твердження.
Як перевіряли штучний інтелект
Для тестування дослідники використали 75 запитань трьома мовами — англійською, російською та естонською. Завданням моделей було розпізнати упереджені твердження, приховані маніпуляції та спроби нав’язування пропагандистських наративів.
До переліку перевірених тем увійшли 14 поширених тез російської пропаганди, серед яких:
твердження про те, що Росія нібито «рятує українських дітей» шляхом законної евакуації;
заяви про порушення НАТО обіцянок не розширюватися на схід;
наратив про те, що росіяни, українці та білоруси нібито є одним народом;
твердження, що Радянський Союз був виключно миролюбною державою та звільнив Європу від фашизму.
Експерти аналізували, наскільки правильно моделі можуть ідентифікувати подібні меседжі та попереджати користувачів про можливі маніпуляції.
Американські моделі стали лідерами рейтингу
Найкращі результати продемонстрували моделі компанії Anthropic. Перше місце посіла Claude Fable 5, а загалом розробки Anthropic зайняли сім позицій у першій десятці рейтингу.
До числа лідерів також увійшли:
Nemotron 3 Super 120B від NVIDIA — 4-те місце;
Qwen 3.6 Plus від Alibaba — 5-те місце;
GPT-5.4 від OpenAI — 10-те місце.
Особливу увагу дослідників привернув той факт, що деякі китайські моделі виявилися ефективнішими у виявленні російської пропаганди, ніж європейські рішення.
Директор Institute of the Estonian Language Арві Таваст зазначив, що результати дослідження вкотре порушують питання безпеки моделей із відкритим вихідним кодом.
«Схоже, що комерційні моделі є безпечнішими та стійкішими, ніж моделі з відкритим кодом. Ми очікували, що Mistral покаже кращий результат, але цього не сталося. Китайські моделі його перевершили», — наголосив він.
Чому відкриті моделі викликають занепокоєння
Фахівці зазначають, що відкриті мовні моделі мають низку переваг, серед яких прозорість роботи та можливість незалежного доопрацювання. Водночас саме такі системи часто виявляються більш вразливими до маніпуляцій і складніше контролюються з точки зору безпеки.
Попри це, багато державних установ та організацій, які працюють із конфіденційними даними, не можуть повноцінно використовувати комерційні хмарні сервіси через ризики передачі чутливої інформації третім сторонам. Саме тому відкриті моделі залишаються популярними навіть попри наявні недоліки.
Що відповіли в Mistral
У французькій компанії не погодилися з висновками дослідження та заявили, що серйозно ставляться до боротьби з дезінформацією.
Представники стартапу наголосили, що під час тестування використовувалися базові версії моделей без додаткового налаштування та захисних механізмів, які зазвичай застосовуються після впровадження систем у робочі процеси клієнтів.
«Ми надзвичайно серйозно ставимося до протидії дезінформації та продовжуємо інвестувати у передові технології виявлення й запобігання таким загрозам», — заявили в компанії.
Втім, результати дослідження стали черговим сигналом про те, що стрімкий розвиток штучного інтелекту супроводжується новими викликами у сфері інформаційної безпеки. Експерти переконані: у майбутньому здатність ШІ розпізнавати пропаганду, фейки та маніпуляції стане одним із головних критеріїв оцінки надійності та якості таких систем.
