L'idée de cet atelier est de comprendre la façon dont fonctionnent les grands modèles de langues neuronaux, qui sont au coeur des chatbots conversationnels comme chatGPT, Gemini, Mistral, etc. On présentera d'une façon accessible les principes généraux de ces modèles de langue, qui sont en fait assez simples dans leurs grandes lignes.

On montrera des exemples d'utilisation de différents chatbots pour illustrer la puissance et les limites de ce ces modèles. On expliquera aussi la façon dont ces modèles sont associés à divers garde-fous pour limiter les effets néfastes. En manipulant des données linguistiques très simples, on fabriquera un mini-modèle de langue pour rendre concrète cette présentation.