Nýleg rannsókn frá Columbia Journalism Review's Tow Center for Digital Journalism leifar veruleg vandamál í nákvæmni sem tengjast generatífu AI módulunum sem notuð eru við fréttaleit. Í tilraun með átta AI-drifu leitarverkfæri kom í ljós að yfir 60% fyrirspurna leiddi til rangra upplýsinga um fréttagjafa. Um það bil 25% Bandaríkjamanna nota nú þessi AI módul í stað hefðbundinna leitarvéla, sem vekur áhyggjur um áreiðanleika þeirra. Villuhraðinn var mismunandi milli mismunandi verkfæra. Til dæmis gerði Perplexity mistök í 37% fyrirspurna, á meðan ChatGPT Search sýndi 67% villuhlutfall (134 af 200 fyrirspurnum). Grok 3 hafði hæsta villuhlutfallið, 94%. Til að framkvæma prófanirnar veittu rannsakendur beinar brot úr raunverulegum fréttagrein og báðu AI verkfærin um að greina samsvarandi upplýsingar eins og fyrirsagnir, útgefendur, dagsetningar og URL, samtals 1, 600 fyrirspurnir. Áhyggjufull þróun sem var athuguð var sú að í stað þess að neita að svara þegar ekki var víst, buðu módulurnar oft trúverðug en rangar svör, mynstrið var samræmt um öll verkfæri sem voru prófuð. Fjárhagslegar útgáfur þessa AI verkfæra, eins og Perplexity Pro ($20/mánuði) og premium þjónusta Grok 3 ($40/mánuði), sýndu stundum verra frammistöðu, þar sem þær veittu oft rangar svör þrátt fyrir að þú hönnuðust rétt við fleiri beiðnir. Tilhneiging þeirra til að bjóða óviss svör stuðlaði að hærri villuhlutfalli. Rannsóknin vakti einnig málefni varðandi stjórn útgefenda yfir efni þeirra.

Sum AI verkfæri höfðu enga aðgát fyrir Robot Exclusion Protocols sem áttu að fyrir byggja óheimil aðgengi að ákveðnu efni. Til dæmis greindi ókeypis útgáfan af Perplexity niðurstöður frá greinum í National Geographic þar sem aðgangur var sögð vera sérstaklega bönnuð. Auk þess, þegar AI verkfæri sögðu frá heimildum, tengdu þau oft við samkeyrð efni á vefum eins og Yahoo News í stað þess að vísa til upprunalegu útgefenda. Verulegt vandamál kom upp við sköpun URL – yfir helmingur tilvísana frá Google's Gemini og Grok 3 leiddi að brotnum eða óhentugum síðum, þar sem Grok 3 hafði 154 af 200 tilvísunum sem enduðu í villusíðum. Þessi staða setur útgefendur í erfiða stöðu: að loka fyrir AI krölum gæti eytt tilvísun, á meðan leyfa aðgang myndi auðvelda endurnotkun efnis án þess að upprunalegu síðurnar hagnist. Mark Howard, COO Tíma tímaritsins, tjáði áhyggjur sínar varðandi gegnsæi og stjórn, en lagði einnig til möguleika á umbótum, að núverandi AI verkfæri munu þróast jákvætt. Howard gagnrýndi beint notendur sem búast við fullkominni nákvæmni frá ókeypis AI þjónustu, þar sem hann lagði til að efasemdir séu nauðsynlegar. OpenAI og Microsoft viðurkenndu niðurstöður rannsóknarinnar en svöruðu ekki beint þeim málefnum sem reistu voru. OpenAI lagði áherslu á skuldbindingu sína við að styðja útgefendur, á meðan Microsoft fullyrti að frama væri öllum Robot Exclusion Protocols. Þetta skýrslugerð byggir á fyrri niðurstöðum frá nóvember 2024, sem þótti einnig undirstrika nákvæmnivandamál við meðhöndlun ChatGPT á fréttaefni. Fyrir frekari upplýsingar er full skýrsla aðgengileg á vefsíðu Columbia Journalism Review.