Les grands modèles de langage (LLM), y compris les modèles GPT qui alimentent des applications telles que ChatGPT, transforment la façon dont les gens interagissent avec la technologie et la façon dont les ordinateurs comprennent et génèrent le langage. Dans ce cours, vous explorerez les concepts fondamentaux du traitement du langage naturel (NLP) et de la modélisation du langage qui sous-tendent les systèmes d'IA générative actuels.

Vous découvrirez comment les modèles de langage sont entraînés, comment les architectures Transformer ont révolutionné l'IA moderne et pourquoi elles sont devenues la base d'une large gamme d'applications, des assistants conversationnels à la génération de contenu, en passant par la synthèse, la traduction et la réponse aux questions. En cours de route, vous examinerez les forces et les limites des LLM, y compris des sujets tels que les hallucinations, l'évaluation, l'IA responsable et les considérations éthiques impliquées dans le développement et le déploiement de ces technologies. Grâce à des ateliers pratiques en Python, vous allez explorer les éléments constitutifs des modèles de langage basés sur Transformer, expérimenter la génération de texte et acquérir une expérience pratique en appliquant des modèles de langage plus petits à des tâches du monde réel. Des questionnaires pratiques réguliers et des activités d'apprentissage interactives renforceront les concepts clés et vous aideront à vous préparer aux évaluations notées. Que vous cherchiez à comprendre le fonctionnement des LLM modernes ou à jeter les bases d'une utilisation de l'IA générative, ce cours fournit les connaissances et l'expérience pratique nécessaires pour démarrer.