„Document and Evaluate LLM Prompting Success“ ist ein Kurs für Fortgeschrittene, der sich an ML-Ingenieure und KI-Praktiker richtet, die für die Stabilität und Leistung von LLM-Systemen im Live-Betrieb verantwortlich sind. Um ein LLM von einem coolen Prototyp zu einem zuverlässigen Produktionsdienst zu machen, bedarf es mehr als nur cleverer Prompts – es erfordert operative Disziplin. Dieser Kurs bietet das Rahmenwerk für diese Disziplin.

Sie lernen, professionelle Betriebsdokumentation zu erstellen und ein Schritt-für-Schritt-Handbuch für die Verwaltung kritischer Systemaufgaben wie die Aktualisierung eines Vektorindexes zu verfassen, komplett mit Validierungsprüfungen und Rollback-Verfahren. Außerdem werden Sie den Sprung von der „Prompt-Kunst“ zur „Prompt-Wissenschaft“ schaffen und lernen, Prompt-Muster systematisch zu bewerten und A/B-Tests durchzuführen. Durch die Analyse der Abwägungen zwischen Antwortqualität, Konsistenz und Token-Kosten treffen Sie datengestützte Entscheidungen, die sowohl Leistung als auch Effizienz gewährleisten. Der Kurs gipfelt in der Erstellung eines LLMOps-Toolkits für die Produktionsreife, das Sie in die Lage versetzt, KI-Produktionssysteme effektiv zu verwalten und zu optimieren.