Quand une image de radiologie manque dans le jeu de données, l'IA produit quand même une analyse médicale. Quand on supprime toutes les images aussi, ce qui suggère que l'analyse se fait sur des données pré-existantes dans le LLM, sans forcément prendre en compte l'objet à etudier.

Des centaines de milliards d’opérations sont nécessaires pour traiter des requêtes via ChatGPT. L'article explique pourquoi, et comment un mot devient un (ou plusieurs) token, avant d'être transformé en vecteur, puis passé dans des couches de neurones.

Les acteurs de l'IA utilisent des données récupérées sur le web. Mais ils ne vont pas chacun parcourir le web à leurs frais. Ils utilisent des bases déjà toutes faites, comme Common Crawl, qui compile les données du web.

Une explication des différentes étapes d'entraînement d'un système IA. D'abord un apprentissage non supervisé sur des grands ensemble de données, puis un apprentissage supervisés sur des données plus restreintes et adaptées à l'usage envisagé.