Pourquoi ne pas faire confiance à ChatGPT pour résumer du texte ?

Il y a des limites à ce que ChatGPT sait, mais il est tenu de fournir ce que vous demandez, même si les résultats sont incorrects. Cela signifie que ChatGPT peut faire des erreurs, même certaines courantes, en particulier lors de la synthèse d'informations auxquelles vous n'aviez pas prêté attention.

ChatGPT peut ignorer ou mal interpréter les invites

Si vous donnez à un chatbot beaucoup de données à trier, même une invite complexe, il peut s'écarter des instructions et suivre sa propre interprétation.

Faire trop de demandes à la fois est l’une des erreurs à éviter. Mais il se peut aussi que le chatbot ne reconnaisse pas un mot ou une phrase particulière que vous utilisez.

Dans l'exemple suivant, ChatGPT reçoit de nombreuses informations sur la fonction linguistique de l'emoji. L'invite intentionnellement simple demande au chatbot de tout résumer et d'expliquer le lien entre les emojis et les cultures.

Le chatbot a fusionné les deux réponses en un seul paragraphe. L'invite suivante avec des instructions plus explicites lui demande d'approfondir sa base de connaissances.

C'est pourquoi vous devez vous assurer que vos instructions sont exactes, fournir un contexte si nécessaire et surveiller les résultats de ChatGPT. Si vous signalez immédiatement des erreurs, le chatbot peut produire des résultats plus précis.

ChatGPT peut ignorer les informations que vous fournissez.

ChatGPT est intelligent, mais il ne doit pas accumuler de détails sur un sujet particulier sans préciser clairement ce qui est important.

Le problème ici est que, sans conseils appropriés, l’algorithme sélectionnera les informations qu’il juge pertinentes pour le rapport ou la liste dont vous avez besoin.

Pour tester ChatGPT, il a été demandé à ChatGPT de résumer un long texte sur les destinations incontournables en Écosse et de créer un itinéraire pour des vacances en famille.

Lorsqu'on lui a demandé si des détails avaient été oubliés, l'entreprise a admis avoir omis certaines informations, comme des attractions spécifiques et des options de transport. La précision est son objectif.

Il n’y a aucune garantie que ChatGPT utilisera les détails que vous attendez. Alors, planifiez et rédigez soigneusement votre message pour vous assurer que le résumé de votre chatbot est exprimé avec précision.

ChatGPT peut utiliser des alternatives incorrectes

OpenAI a mis à jour GPT-4o avec des données disponibles jusqu'en octobre 2023, tandis que celles de GPT-4 Turbo sont disponibles jusqu'en décembre de la même année. Cependant, les connaissances de l’algorithme ne sont pas infinies ni fiables avec les événements en temps réel : il ne connaît pas tout du monde. De plus, il ne révèle pas toujours qu’il manque des données sur un sujet particulier, à moins que vous ne le demandiez directement.

Lors de la synthèse d'un texte contenant de telles références obscures, ChatGPT peut les remplacer par des alternatives qu'il comprend ou inventer des détails à leur sujet.

L'exemple suivant implique une traduction en anglais. ChatGPT ne comprend pas le nom grec du prix Toque d'Or, mais au lieu de mettre en évidence le problème, il donne simplement une traduction littérale et incorrecte.

Les noms d'entreprises, les livres, les récompenses, les liens de recherche et d'autres éléments peuvent disparaître ou être modifiés dans le résumé du chatbot. Pour éviter de grosses erreurs, soyez conscient des limites de création de contenu de ChatGPT.

ChatGPT peut se tromper sur les faits

Il est important d’apprendre tout ce que vous pouvez sur la façon d’éviter les erreurs avec les outils d’IA générative . Comme le montre l’exemple ci-dessus, l’un des plus gros problèmes de ChatGPT est qu’il manque certaines informations ou apprend des choses de manière incorrecte. Cela peut alors affecter tout texte qu’il génère.

Si vous demandez un résumé de différents points de données contenant des événements ou des concepts étrangers à ChatGPT, l'algorithme peut les interpréter mal.

Dans l'exemple ci-dessous, l'invite demande à ChatGPT de résumer quatre tendances TikTok et d'expliquer ce que chacune signifie.

La plupart des explications sont soit légèrement incorrectes, soit manquent d’informations spécifiques sur ce que l’affiche est censée faire. La description de la tendance d’UMG Music est particulièrement trompeuse. La tendance a changé après que la catégorie a été supprimée de TikTok et les utilisateurs publient désormais des vidéos pour critiquer plutôt que pour soutenir UMG, ce que ChatGPT n'était pas au courant.

La meilleure solution n’est pas de faire aveuglément confiance aux chatbots IA. Même si ChatGPT compile les informations que vous fournissez vous-même, assurez-vous de vérifier les descriptions et les affirmations et de noter toute inexactitude. Vous saurez alors comment structurer votre invite pour obtenir les meilleurs résultats.

ChatGPT peut mal identifier les limites de mots ou de caractères.

Bien qu'OpenAI ait amélioré ChatGPT avec de nouvelles fonctionnalités, il semble toujours avoir du mal avec les instructions de base, telles que le respect de limites de mots ou de caractères spécifiques.

Le test ci-dessous montre que ChatGPT a besoin de quelques invites. Le nombre de mots requis est toujours insuffisant ou dépassé.

Ce n’est pas la pire erreur qui puisse arriver avec ChatGPT. Mais c’est un facteur supplémentaire à prendre en compte lors de l’édition des résumés générés par cet outil.

Soyez précis sur la longueur du contenu souhaitée. Vous devrez peut-être ajouter ou supprimer certains mots quelque part. Cela vaut la peine de prendre le temps de vérifier si vous travaillez sur des projets avec des limites de mots strictes.

Dans l’ensemble, ChatGPT est rapide, intuitif et en constante amélioration, mais il a encore ses défauts. Ne faites donc pas entièrement confiance à ChatGPT pour résumer avec précision le texte dont vous avez besoin.

La cause est généralement liée à des informations manquantes ou incorrectes dans la base de données ChatGPT. L'algorithme de ChatGPT est également conçu pour répondre automatiquement sans avoir à vérifier constamment l'exactitude. Pour l’instant, la meilleure solution est de développer votre propre contenu avec ChatGPT comme un assistant puissant qui doit être surveillé régulièrement.