A BBC által végzett kutatás szerint négy nagy mesterséges intelligencia (AI) chatbot pontatlanul foglalja össze a híreket.

A BBC az OpenAI ChatGPT, a Microsoft Copilot, a Google Gemini és a Perplexity AI-nak adott tartalmat a BBC weboldaláról, majd kérdéseket tett fel nekik a hírekkel kapcsolatban.

Azt mondta, hogy az így kapott válaszok “jelentős pontatlanságokat” és torzításokat tartalmaztak.

Egy blogbanDeborah Turness, a BBC News and Current Affairs vezérigazgatója szerint a mesterséges intelligencia “végtelen lehetőségeket” rejt magában, de az eszközöket fejlesztő cégek “a tűzzel játszanak”.

“Nyugtalan időket élünk, és vajon mennyi idő telik el, amíg egy AI által eltorzított szalagcím jelentős valós károkat okoz a világban?” – tette fel a kérdést.

A chatbotokat birtokló techcégeket megkeresték kommentárért.

A oldalon. a tanulmánya BBC megkérte a ChatGPT, a Copilot, a Gemini és a Perplexity cégeket, hogy foglaljanak össze 100 hírt, és minden egyes választ értékeltek.

Olyan újságírókat kért meg, akik a cikk témájának megfelelő szakértői voltak, hogy értékeljék a mesterséges intelligencia asszisztensek válaszainak minőségét.

Megállapította, hogy a hírekkel kapcsolatos kérdésekre adott AI-válaszok 51%-a valamilyen formában jelentős problémákat tartalmazott.

Emellett a BBC tartalmát idéző mesterséges intelligencia-válaszok 19%-a ténybeli hibákat, például helytelen tényállításokat, számokat és dátumokat tartalmazott.

Turness asszony blogjában azt mondta, hogy a BBC “új beszélgetést szeretne kezdeményezni az AI-technológiák szolgáltatóival”, hogy “partnerségben együtt dolgozhassunk a megoldások megtalálásán”.

Felszólította a technológiai vállalatokat, hogy “vonják vissza” az AI hírösszefoglalóikat, ahogy az Apple is tette a panaszok után a BBC-től, hogy az Apple Intelligence félrefordította a híreket.

Néhány példa a BBC által talált pontatlanságokra:

• Gemini tévesen azt állította, hogy az NHS nem ajánlja a párologtatást a dohányzásról való leszokás segítőjeként.
• A ChatGPT és a Copilot szerint Rishi Sunak és Nicola Sturgeon még akkor is hivatalban volt, amikor már távoztak.
• Perplexity félreidézte a BBC News egy Közel-Keletről szóló történetében, hogy Irán kezdetben “visszafogottságot” tanúsított, Izrael akcióit pedig “agresszívnak” minősítette

Általánosságban elmondható, hogy a Microsoft Copilotjának és a Google Gemini-jének jelentősebb problémái voltak, mint az OpenAI ChatGPT-jének és a Perplexitynek, amely Jeff Bezost is a befektetői között tartja számon.

Normális esetben a BBC blokkolja tartalmait az AI chatbotok elől, de a tesztek idejére 2024 decemberében megnyitotta weboldalát.

A jelentés szerint amellett, hogy ténybeli pontatlanságokat tartalmaztak, a chatbotok “nehezen tudták megkülönböztetni a véleményt a tényektől, szerkesztői véleményt fogalmaztak meg, és gyakran nem vonták be az alapvető kontextust”.

A BBC generatív mesterséges intelligenciáért felelős programigazgatója, Pete Archer szerint a kiadóknak “rendelkezniük kell az ellenőrzéssel a tartalmuk felhasználásának módja és módja felett, az AI-cégeknek pedig be kell mutatniuk, hogyan dolgozzák fel az asszisztensek a híreket, valamint az általuk produkált hibák és pontatlanságok mértékét és terjedelmét”.