Ce cours aborde l'évaluation des Grands modèles langage (LLM), en commençant par les méthodes d'évaluation fondamentales, en explorant les techniques avancées avec les outils de Vertex IA comme Automatic Metrics et AutoSxS, et en prévoyant l'évolution de l'évaluation de l'IA générative.

Ce cours est idéal pour les gestionnaires de produits d'IA qui cherchent à optimiser les applications LLM, les scientifiques de données intéressés par les techniques avancées d'évaluation de modèles d'IA, les éthiciens de l'IA et les décideurs axés sur le déploiement responsable de l'IA, et les chercheurs universitaires qui étudient l'impact de l'IA générative dans divers domaines. Une compréhension de base de l'intelligence artificielle, des concepts d'apprentissage automatique, et une familiarité avec le traitement du langage naturel (NLP) sont recommandés. Une expérience préalable avec Google Cloud Vertex IA est bénéfique mais non requise. Il couvre les applications pratiques, l'intégration du jugement humain avec des méthodes automatiques, et prépare les apprenants aux futures tendances de l'évaluation de l'IA à travers divers médias, y compris le texte, les images et l'audio. Cette approche complète garantit que vous êtes équipé pour évaluer efficacement les LLM, en améliorant les stratégies commerciales et l'innovation.