Débrief
Attention, quand le prompt n’est pas assez défini, on laisse une marge d’interprétation à l’outil d’IA. C’est là qu’il peut y avoir un résultat décevant (voir nugget sur les bases du prompt et les techniques avancées).
Toujours se demander : ma question a-t-elle été bien posée ? Quelles sont les bonnes questions à se poser pour évaluer la réponse de l’IAG ?
Il est possible de donner à l’IA des critères d’évaluation de l’information. Par exemple, ne pas prendre les résultats de blogs, de réseaux sociaux, de forums etc…
Exemple : prompt imprécis
Ici, le prompt pousse l'IA à donner une réponse dont le degré de fiabilité sera très faible, ce qui va engendrer des hallucinations. Ceci est dû au fait que pour entraîner un LLM, on lui donne une seule consigne : donner la réponse la plus probable. L'IA ne peut pas dire "cela n'existe pas".
Dans le prompt ci-dessous, demander un article "très cité" est trop vague (le plus cité ? dans les 10 les plus cités ?). L'IA génère une réponse avec un exemple d’une référence qui semble correcte à première vue. Mais quand on clique sur le lien (DOI), c’est un article sur un tout autre thème qui s’ouvre.