Дослідження показало, що провідні асистенти штучного інтелекту генерують спотворення, фактичні неточності та оманливу інформацію у відповідь на запити про новини та актуальні події. Згідно з дослідженням, проведеним BBC, більше половини відповідей, згенерованих штучним інтелектом ChatGPT, Copilot, Gemini та Perplexity, були оцінені як такі, що мають "значні проблеми". Прикладами помилок були невірні твердження про те, що Ріші Сунак і Нікола Стерджен все ще займають свої посади прем’єр-міністра та першої міністерки Шотландії, неправильне подання рекомендацій NHS щодо вейпінгу, а також плутанина між думками та історичним контентом і сучасними фактами. У дослідженні дослідники поставили 100 запитань цим чотирьом інструментам ШІ, використовуючи статті BBC як посилання. Журналісти BBC, які мають відповідну експертизу, потім оцінили відповіді. Приблизно 20% відповідей містили фактичні помилки щодо цифр, дат або висловлювань, а 13% процитованих матеріалів, приписаних BBC, були зміненими або насправді не існували в оригінальних статтях. Наприклад, коли запитали про невинність засудженої медсестри Луїзи Летбі, Gemini відповіло, що "кожен повинен вирішити, вважає він Луїзу Летбі невинною чи винуватою", пропустивши важливий контекст щодо її засудження за вбивство та намагання вбивства. Інші неточності, які були підкреслені в звіті на основі надійних джерел BBC, включали: - Copilot від Microsoft помилково стверджував, що французька жертва зґвалтування Жізель Пеліко виявила злочини щодо себе через затемнення й втрату пам’яті, тоді як вона насправді виявила їх через поліцейські матеріали, вилучені з пристроїв її чоловіка. - ChatGPT помилково повідомив, що Ісмаїл Ханія все ще є частиною керівництва ХАМАСу через кілька місяців після його вбивства в Ірані, і неправдиво стверджував, що Сунак і Стерджен зараз перебувають на своїх посадах. - Gemini помилково зазначив: "NHS радить людям не починати вейпінг і рекомендує курцям, які хочуть кинути, використовувати інші методи. " - Perplexity неправильно повідомив дату смерті телеведучого Майкла Мослі та неправильно процитував заяву від родини співака One Direction Ліама Пейна після його смерті. Ці знахідки спонукали Дебору Тюрнесс, генеральну директорку новин BBC, зауважити, що "інструменти штучного інтелекту грають з вогнем" і ризикують підірвати "крихку віру громадськості в факти". У блозі про дослідження Тюрнесс поставила під сумнів готовність ШІ точно "збирати та подавати новини без спотворення та викривлення фактів". Вона також закликала компанії ШІ співпрацювати з BBC для створення більш надійних відповідей, а не сприяння плутанині. Це дослідження слідує за інцидентом, коли Apple змушена була призупинити новини з брендом BBC після того, як кілька некоректних резюме статей були надіслані користувачам iPhone. Серед помилок Apple була заява, що Луїджі Манйоне, якого звинуватили у вбивстві Брайана Томпсона, генерального директора страхової компанії UnitedHealthcare, застрелив себе. Дослідження вказує на те, що неточності щодо актуальних подій є поширеними серед популярних інструментів ШІ. У передмові до дослідження Пітер Арчер, директор програми BBC з генеративного ШІ, зазначив: "Наше дослідження може лише злегка торкнутися поверхні проблеми.

Масштаб помилок і викривлення достовірного контенту залишається невідомим. " Він further підкреслив, що видавці, такі як BBC, повинні зберегти контроль над тим, як використовують їхній контент, і компанії ШІ повинні роз'яснити, як їх інструменти інтерпретують новини, разом з вивченням природи та частоти помилок, які вони генерують. "Це вимагатиме тісної співпраці між ШІ та медіа-організаціями, а також нових оперативних підходів, які надають пріоритет аудиторії, максимізуючи цінність для всіх. BBC готова та бажає тісно співпрацювати з партнерами для досягнення цього. " Компанії, відповідальні за оцінювані в дослідженні асистенти ШІ, були зв’язані для коментарів.