Alliage | Textes en intégralité | n°83

Titre alternatif :

Les androïdes rêvent-ils de références fictives ?: Un dialogue avec ChatGPT3.5

Résumé :

International audience

Cet article s'intéresse aux références bibliographiques générées par l'outil ChatGPT3.5. À l'aide de cet outil fondé sur le modèle de génération GPT entrainé ChatGPT3.5, développé par la société OpenAI, nous avons exploré six thèmes différents et analysé un échantillon de références générées par le modèle, en français et en anglais. Les résultats ont révélé des pourcentages élevés de références fictives dans plusieurs domaines, soulignant ainsi l'importance de vérifier attentivement ces références avant de les utiliser dans des travaux de recherche. Une amélioration des résultats a néanmoins été notée entre mai et juillet en ce qui concerne les références en anglais pour des thématiques sur lesquelles ChatGPR3.5 a été particulièrement entrainé, mais la situation reste insatisfaisante en français par exemple. Il est de plus à signaler qu'une grande partie du texte de cet article a été généré par ChatGPT dans un travail commun avec l'auteur humain.

This article focuses on bibliographic references generated by theChatGPT3.5 tool. Using this tool based on the trained GPTgeneration model ChatGPT3.5, developed by the companyOpenAI, we explored six different themes and analyzed a sampleof references generated by the model, in French and English. Theresults revealed high percentages of fictitious references in severalfields, underlining the importance of carefully checking thesereferences before using them in research work. An improvement inresults was nevertheless noted between May and July with regardto English references for themes on which ChatGPR3.5 has beenparticularly trained, but the situation remains unsatisfactory inFrench, for example. It should also be pointed out that much of thetext in this article was generated by ChatGPT in a joint effort withthe human author.

Mots-clés : Bibliographic references, Hallucinations, Generative AI, Fictivity rate, Modèles de langage, Références bibliographiques, Hallucinations, AI générative, Taux de fictivité

Date de publication : 2024-02