Can we Trust Chatbots for now? Accuracy, reproducibility, traceability; a Case Study on Leonardo da Vinci's Contribution to Astronomy - LAAS - Laboratoire d'Analyse et d'Architecture des Systèmes
Pré-Publication, Document De Travail Année : 2023

Can we Trust Chatbots for now? Accuracy, reproducibility, traceability; a Case Study on Leonardo da Vinci's Contribution to Astronomy

Didier El Baz
Équipe Services et Architectures pour Réseaux Avancés

Résumé

Large Language Models (LLM) are studied. Applications to chatbots and education are considered. A case study on Leonardo's contribution to astronomy is presented. Major problems with accuracy, reproducibility and traceability of answers are reported for ChatGPT, GPT-4, BLOOM and Google Bard. Possible reasons for problems are discussed and some solutions are proposed.

Domaines

Sciences cognitives Ordinateur et société [cs.CY]
Fichier principal
Vignette du fichier
Chatbots.pdf (282.26 Ko) Télécharger le fichier
Origine Fichiers produits par l'(les) auteur(s)
Licence
Copyright (Tous droits réservés)

Didier EL BAZ  : Connectez-vous pour contacter le contributeur

https://laas.hal.science/hal-04078350

Soumis le : dimanche 23 avril 2023-09:29:16

Dernière modification le : lundi 20 novembre 2023-11:44:22

Archivage à long terme le : lundi 24 juillet 2023-18:03:39

Télécharger pour visualiser

Dates et versions

hal-04078350 , version 1 (23-04-2023)
hal-04078350 , version 2 (23-10-2023)

Licence

Copyright (Tous droits réservés)

Identifiants

Citer

Didier El Baz. Can we Trust Chatbots for now? Accuracy, reproducibility, traceability; a Case Study on Leonardo da Vinci's Contribution to Astronomy. 2023. ⟨hal-04078350v1⟩

Exporter

BibTeX XML-TEI Dublin Core DC Terms EndNote DataCite
235 Consultations
102 Téléchargements

Altmetric

Partager

More