Les chatbots IA et leurs limites en tant que sources d’information

Les chatbots, comme ChatGPT et Gemini, sont de plus en plus utilisés pour accéder à l’information. Pourtant, une étude récente révèle qu’ils ne sont pas encore des outils fiables pour s’informer sur l’actualité. Quels sont les défis auxquels sont confrontés ces chatbots et pourquoi leur utilisation nécessite-t-elle encore de la prudence ?

Résumé en 3 points

• Les chatbots comme ChatGPT et Gemini présentent des erreurs fréquentes lorsqu’ils fournissent des informations sur l’actualité.
• Une étude menée par des médias internationaux a montré que 45 % des réponses des chatbots contenaient au moins une erreur.
• Gemini s’est révélé être le moins fiable, avec un taux d’erreur de 76 %.

Les résultats de l’étude sur les chatbots

Une étude dirigée par la BBC et l’Union Européenne de Radio-Télévision (UER) a évalué la précision des chatbots IA en matière d’actualités. L’enquête a impliqué 19 médias européens, en plus de participants canadiens et américains. Les résultats ont révélé que sur près de la moitié des questions, les chatbots commettaient des erreurs.

Les erreurs les plus courantes concernaient les citations incorrectes de sources (31 %), suivies par des imprécisions (20 %) et un manque de contexte (14 %). Ces résultats montrent que les chatbots peuvent indiquer des sources inexactes ou mal interpréter les informations qu’ils fournissent.

Comparaison des performances des chatbots

Parmi les quatre chatbots testés, Gemini a affiché le taux d’erreur le plus élevé à 76 %, tandis que Perplexity a été désigné comme le plus précis avec 31 % d’erreurs. ChatGPT et Microsoft Copilot ont présenté des taux d’erreur similaires, respectivement de 36 % et 37 %, ce qui est compréhensible compte tenu de leur architecture commune.

Ces résultats soulignent la nécessité de prudence lors de l’utilisation des chatbots comme sources d’information. Même les modèles les plus performants ne sont pas exempts d’erreurs, surtout lorsque les actualités évoluent rapidement.

Les limites de la connaissance des chatbots

Les chatbots se révèlent plus souvent erronés lorsqu’ils traitent des sujets d’actualité en développement, tels que les conflits en cours. Cependant, ils sont plus précis lorsque les événements sont conclus. Ces défis trouvent leur origine dans les ensembles de données utilisés pour former les chatbots, souvent décalés par rapport à l’actualité immédiate.

Pour pallier ces lacunes, les entreprises ont permis aux chatbots d’accéder à Internet, mais la précision des informations actuelles reste problématique. La prudence est donc recommandée, et il est préférable de vérifier soi-même les actualités pour s’assurer de leur véracité.

Contexte et évolution des chatbots IA

Les chatbots IA, comme ChatGPT, ont fait leur apparition dans le domaine de la technologie grâce à des entreprises telles qu’OpenAI. ChatGPT, en particulier, a été lancé en novembre 2022, apportant une nouvelle approche des interactions homme-machine grâce à son modèle de langage GPT-3, puis GPT-4. Les chatbots ont depuis évolué pour inclure des capacités de traitement du langage naturel encore plus avancées.

Gemini, un autre acteur important sur le marché des chatbots, a été développé par DeepMind, une filiale de Google. Malgré les avancées technologiques, ces outils continuent de rencontrer des difficultés à fournir des informations précises et fiables sur des sujets d’actualité, mettant en évidence la nécessité de poursuivre les recherches et les améliorations dans ce domaine.