Entwickelt für KI-Produktteams und KI-Führungskräfte, führt in die Bewertung von LLM-basierten Produkten ein. Der Kurs bietet einen einfachen Einstieg in das Lernen, ohne dass Programmierkenntnisse erforderlich sind. Der Kurs wird verfügbar sein auf 9. Dezember 2024 Start.
Was Sie lernen werden
Die Grundlagen der LLM-Bewertung: von Bewertungsmethoden und Benchmarks bis hin zu Schutzmaßnahmen gegen LLM und wie man benutzerdefinierte LLM-Bewertungstools erstellt. Dieser Kurs richtet sich an KI-Produktmanager und KI-Führungskräfte, die die Kernkonzepte von KI-Qualität und Beobachtbarkeit beherrschen wollen.
Bewertung der verschiedenen Phasen des Lebenszyklus der LLM-Anwendung: von der Versuchsphase bis zur Phase der Produktionsüberwachung.
Wie man Bewertungsdatensätze entwirft und verschiedene Testfälle mit synthetischen Daten erzeugt.
Mögliche Probleme mit LLM-Anwendungen: Halluzinationen, prompte Injektionen, unkontrolliertes Knacken, usw.
Aufbau der LLM-Beobachtbarkeit in Produktionsumgebungen: Rückverfolgbarkeit, Bewertung, Schutzmaßnahmen.
LLM-Bewertungsmethoden: LLM-Bewertungsinstrumente, reguläre Ausdrücke, prädiktive Indikatoren.
Praktische Beispiele: Bewertung von RAGs (Retrieval Augmentation Generation Systems), QA-Systemen und intelligenten Agenten.
Warten auf die Veröffentlichung...