Selon la BBC, les IA génératives restent incapables de résumer correctement des actualités

Soutenez un média indépendant

Reportages, enquêtes, initiatives et solutions en accès libre : pour un numérique plus responsable, notre rédaction compte sur vous.

Selon la BBC, les IA génératives restent incapables de résumer correctement des actualités

11 février 2025 : la chaîne d'informations britannique BBC publie un rapport détaillant les résultats d'une expérience, menée en décembre 2024, sur la façon dont les assistants IA résument des actualités qui leurs sont proposées. Le test est tout sauf concluant, puisque selon le document : "AI assistants risk misleading audiences by distorting BBC Journalism" ("Les assistants IA risquent d’induire le public en erreur en déformant le journalisme de la BBC.")

Les équipes de la rédaction ont testé la capacité de 4 intelligences artificielles utilisées par le grand public à résumer 100 informations publiées par la BBC : ChatGPT (OpenAI), Copilot (Microsoft), Gemini (Googe) et Perplexity.

51%

des contenus publiés par ces IA contenaient au moins une erreur, et 19% présentaient des informations incorrectes par rapport au texte analysé (citations, chiffres ou dates erronées).

BBC - Representation of BBC News content in AI assistants

En conclusion : "This research shows that AI assistants have significant issues with basic factual accuracy. [...] The AI assistants we tested struggled to differentiate between opinion and fact, editorialised, and often failed to include essential context." ("Cette recherche montre que les assistants IA rencontrent des problèmes significatifs avec la basique exactitude des faits. [...] Les assistants IA que nous avons testés ont eu du mal à différencier l’opinion des faits, se sont mis à éditorialiser, et ont souvent omis de fournir un contexte essentiel.")

Un constat problématique, dans la mesure où de plus en plus d'internautes se servent des IA génératives pour se tenir au courant des actualités. Dès lors, une distorsion de ces informations de base compromet la compréhension du monde et favorise le développement de la mésinformation en ligne.

Références :

[Photo de couverture : mk. s]

Soutenez-nous en partageant l'article :