MLflow 3 Schulung: GenAI Observability für LLMs

LLM-Traces prüfen, Prompt-Versionen vergleichen und Modellfreigaben mit MLflow 3 dokumentieren

MLflow 3 Schulung: GenAI Observability für LLMs
MLflow 3 Schulung: GenAI Observability für LLMs

Kursbeschreibung

  • Kurs-ID:KKC_0327
  • Kursdauer:3 Tage
  • Uhrzeit:09:00 - 16:00 Uhr

Die MLflow 3 Schulung verbindet LLM-Traces, Experimentläufe und Modellfreigaben in einem gemeinsamen Workflow. Du richtest einen Tracking-Server mit Backend-Store und Artifact-Store ein, protokollierst Runs mit den benötigten Metadaten und vergleichst Ergebnisse im MLflow-UI sowie über Python-Code. Die Laborstrecke zeigt, wie Entwicklungsteams Änderungen an Modellen und Prompts prüfen, bevor sie diese für weitere Deployment-Schritte freigeben. So dokumentieren Data Science, ML-Engineering und Plattformbetrieb die Übergabe.

Für LLM-basierte Anwendungen instrumentierst du Aufrufe und RAG-Abläufe, untersuchst einzelne Trace-Spans und verknüpfst auffällige Antworten mit Prompt-Versionen und Kontextdaten. Für GenAI-Reviews nutzt du Scorer und wiederholbare Evaluationsläufe. Im Abschluss-Lab bewertest du einen neuen Prompt, aktualisierst einen Registry-Eintrag und leitest aus Runs und Traces einen Monitoring-Hinweis ab. Die Übungen beziehen klassische ML-Modelle ebenso ein wie GenAI-Anwendungen und ergänzen die Themen unserer Machine-Learning-Schulungen.

Du arbeitest drei Tage in einer durchgehenden Laborstrecke und nimmst ein reproduzierbares Repository-Layout, dokumentierte Prompt-Versionen und ein Muster für Freigabe-Reviews mit. Mit zwei bis acht Personen pro Gruppe bleibt Raum für technische Rückfragen. Für den anschließenden Betrieb eigener Sprachmodelle bietet die Schulung zu LLM Self-Hosting und Deployment einen passenden nächsten Schritt. Frag einen passenden Termin für deine MLflow 3 Schulung an.

Die wichtigsten Themen im Überblick

  • LLM-Traces systematisch auswerten
  • Prompt-Versionen prüfbar vergleichen
  • MLflow-Runs reproduzierbar aufbauen
  • Modellfreigaben dokumentieren
  • GenAI-Scorer für Reviews nutzen
  • Betriebssignale aus Runs ableiten

Zielgruppe

  • Data-Science-Fachkräfte mit Python-Erfahrung
  • ML-Engineers für reproduzierbare Experimente
  • MLOps-Engineers und KI-Plattform-Teams
  • Teams mit LLM- oder RAG-Anwendungen im Betrieb

Voraussetzung für die Schulung

  • Sichere Python-Grundlagen, etwa nach dem Python-Einstieg mit Machine Learning
  • Erfahrung mit ML- oder LLM-Projekten
  • Grundverständnis von APIs und Git-Workflows, etwa aus der Einführung in Git, GitLab und CI/CD
  • Basiswissen zu Containern, beispielsweise aus dem Docker Linux Container Workshop

Kursinhalte

MLflow-3-Plattform einrichten

  • Tracking-Server und Repository-Struktur
  • Backend-Store und Artifact-Store
  • Experimente für die Teamarbeit
  • Autologging und manuelles Logging
  • Run-Konventionen für technische Reviews

Experimente reproduzierbar protokollieren

  • Run-Metadaten und Metriken
  • Dataset-Logging für reproduzierbare Runs
  • Model Signatures und Input Examples
  • Artefakte für Audit und Vergleich
  • Vergleich ausgewählter Experimentläufe

Model Registry für Releases nutzen

  • Modellversionen und Registry-Aliasse
  • Freigaben über Tags und Aliasse
  • Registry-Strukturen für Teamprozesse
  • MLflow Models für Serving
  • Containerisierte Deployment-Pipelines

GenAI-Observability mit Tracing

  • Trace-Spans für LLM-Aufrufe
  • RAG-Abläufe in Trace-Ansichten
  • Tool-Aufrufe und Fehleranalyse
  • Kostenmetriken und Latenzmetriken
  • Trace-Daten für Betriebsreviews

Prompts versionieren und vergleichen

  • Prompt-Versionen in der Prompt Registry
  • Prompt-Vergleich über Experimente
  • Variantenfreigabe für Testumgebungen
  • Artefaktablage für Prompt-Sets
  • Reviews für Prompt-Änderungen

Modelle und LLM-Antworten evaluieren

  • mlflow.evaluate für klassische Modelle
  • GenAI-Scorer für Antwortqualität
  • Baseline-Vergleich mit Referenzdaten
  • Metriken für Release-Entscheidungen
  • Betriebssignale aus Traces und Runs

Wähle aus 12 Terminen an 2 Standorten:

Ergebnisse filtern
MLflow 3 Schulung: GenAI Observability für LLMs
11.01. - 13.01.2027 Live Online Plätze frei Wenige Plätze Nicht buchbar
1.790 € netto (2.130,10 € brutto)

Datum und Uhrzeit

11.01. - 13.01.2027
09:00 - 16:00 Uhr

MLflow 3 Schulung: GenAI Observability für LLMs
22.03. - 24.03.2027 Live Online Plätze frei Wenige Plätze Nicht buchbar
1.790 € netto (2.130,10 € brutto)

Datum und Uhrzeit

22.03. - 24.03.2027
09:00 - 16:00 Uhr

MLflow 3 Schulung: GenAI Observability für LLMs
21.06. - 23.06.2027 Live Online Plätze frei Wenige Plätze Nicht buchbar
1.790 € netto (2.130,10 € brutto)

Datum und Uhrzeit

21.06. - 23.06.2027
09:00 - 16:00 Uhr

MLflow 3 Schulung: GenAI Observability für LLMs
11.01. - 13.01.2027 Dortmund Plätze frei Wenige Plätze Nicht buchbar
1.790 € netto (2.130,10 € brutto)

Veranstaltungsort

Europaplatz 11, 44269 Dortmund

Datum und Uhrzeit

11.01. - 13.01.2027
09:00 - 16:00 Uhr

MLflow 3 Schulung: GenAI Observability für LLMs
11.01. - 13.01.2027 München Plätze frei Wenige Plätze Nicht buchbar
1.790 € netto (2.130,10 € brutto)

Veranstaltungsort

Elektrastr. 6a, 81925 München

Datum und Uhrzeit

11.01. - 13.01.2027
09:00 - 16:00 Uhr

MLflow 3 Schulung: GenAI Observability für LLMs
22.03. - 24.03.2027 Dortmund Plätze frei Wenige Plätze Nicht buchbar
1.790 € netto (2.130,10 € brutto)

Veranstaltungsort

Europaplatz 11, 44269 Dortmund

Datum und Uhrzeit

22.03. - 24.03.2027
09:00 - 16:00 Uhr

MLflow 3 Schulung: GenAI Observability für LLMs
22.03. - 24.03.2027 München Plätze frei Wenige Plätze Nicht buchbar
1.790 € netto (2.130,10 € brutto)

Veranstaltungsort

Elektrastr. 6a, 81925 München

Datum und Uhrzeit

22.03. - 24.03.2027
09:00 - 16:00 Uhr

MLflow 3 Schulung: GenAI Observability für LLMs
21.06. - 23.06.2027 Dortmund Plätze frei Wenige Plätze Nicht buchbar
1.790 € netto (2.130,10 € brutto)

Veranstaltungsort

Europaplatz 11, 44269 Dortmund

Datum und Uhrzeit

21.06. - 23.06.2027
09:00 - 16:00 Uhr

MLflow 3 Schulung: GenAI Observability für LLMs
21.06. - 23.06.2027 München Plätze frei Wenige Plätze Nicht buchbar
1.790 € netto (2.130,10 € brutto)

Veranstaltungsort

Elektrastr. 6a, 81925 München

Datum und Uhrzeit

21.06. - 23.06.2027
09:00 - 16:00 Uhr

MLflow 3 Schulung: GenAI Observability für LLMs
09.08. - 11.08.2027 Dortmund Plätze frei Wenige Plätze Nicht buchbar
1.790 € netto (2.130,10 € brutto)

Veranstaltungsort

Europaplatz 11, 44269 Dortmund

Datum und Uhrzeit

09.08. - 11.08.2027
09:00 - 16:00 Uhr

  • Firmenschulung

    In einem unserer 21 Schulungszentren oder Live Online mit individuellen Inhalten

    • Passgenaue Inhalte nach deinem Bedarf
    • Individuelle Terminplanung
    • Hybride und Modulare Trainingsgestaltung
    • Kostenvorteil für dein Team
    Firmenschulung anfragen
  • Inhouseschulung

    Wir kommen zu dir ins Unternehmen und planen eure Inhouseschulung

    • Inhalte auf euch zugeschnitten
    • Termine nach euren Bedürfnissen
    • Vertraute Umgebung, kein Reiseaufwand
    Inhouseschulung anfragen
  • Offene Termine

    Du benötigst ein Angebot für unsere offenen Termine oder einer der Termine passt dir nicht? Einfach hier anfragen

    • Feste Termine, im Voraus planbar
    • An unseren 21 Standorten oder Live-Online
    • Austausch mit anderen Teilnehmenden
    • Kleine Lerngruppen von bis zu 8 Personen
    Offene Schulung anfragen

Verwandte Kurse

  • GenAI-Marketing Grundkurs: Strategie und Umsetzung

    Nächste und weitere Termine:
    In Präsenz: 14.01.2027
    Live Online: 14.01.2027

    Weitere Kursinfos
  • Open-Source-LLMs lokal betreiben: Grundkurs

    Nächste und weitere Termine:
    In Präsenz: auf Anfrage
    Live Online: 07.12.2026

    Weitere Kursinfos
  • Large Language Models Advanced Kurs: Eigene LLMs und Tuning

    Nächste und weitere Termine:
    In Präsenz: auf Anfrage
    Live Online: 07.12.2026

    Weitere Kursinfos
  • KI Securitykurs: Schutz vor bösartigen LLMs, WormGPT und Co.

    Nächste und weitere Termine:
    In Präsenz: auf Anfrage
    Live Online: 16.11.2026

    Weitere Kursinfos
  • Effektive KI Software-Tests mit LLMs Kurs

    Nächste und weitere Termine:
    In Präsenz: auf Anfrage
    Live Online: 16.11.2026

    Weitere Kursinfos
  • Perplexity AI und Comet Kurs: Recherche, die schneller ist

    Nächste und weitere Termine:
    In Präsenz: auf Anfrage
    Live Online: 16.11.2026

    Weitere Kursinfos
  • Beyond Machine Learning Kurs: Was kommt danach?

    Nächste und weitere Termine:
    In Präsenz: auf Anfrage
    Live Online: 11.12.2026

    Weitere Kursinfos
  • KI-Strategie für den Mittelstand, die wirkt Kurs

    Nächste und weitere Termine:
    In Präsenz: auf Anfrage
    Live Online: 30.11.2026

    Weitere Kursinfos
eKomi Seminarbewertungen für www.kebel.de

Geprüfte Weiterbildungsqualität: eKomi Seminarbewertungen von Kebel Training

Unsere Kebel Training GmbH setzt bei der Qualitätssicherung auf unabhängige eKomi-Kundenbewertungen, um die Zufriedenheit nach jeder Schulung transparent abzubilden.

Mit über 1.800 verifizierten Bewertungen innerhalb der letzten 12 Monate gehört das Unternehmen zu den bestbewerteten Anbietern für IT-, KI- und Soft-Skills-Weiterbildungen im deutschsprachigen Raum.

Nach jedem durchgeführten Seminar erhalten alle Teilnehmenden die Einladung, das Training freiwillig und anonym über das unabhängige Bewertungsportal eKomi zu beurteilen.

Zum Bewertungsportal

Kebel Training GmbH wurde im Rahmen einer bundesweiten Kundenbefragung mit dem Award „Deutschlands Beste Business-Partner 2026“ im Bereich IT-Weiterbildung ausgezeichnet. Die Auszeichnung würdigt B2B-Unternehmen auf Grundlage der Erfahrungen und Bewertungen ihrer Kunden.

Ausgezeichnete IT-Weiterbildung: Kebel Training zählt zu „Deutschlands Beste Business-Partner 2026“

Die Kebel Training GmbH wurde im Rahmen einer bundesweiten Kundenbefragung mit dem Siegel „Deutschlands Beste Business-Partner 2026“ in der Kategorie IT-Schulungs- & Zertifizierungsanbieter ausgezeichnet. Im Ranking des DUP UNTERNEHMER-Magazins und des Deutschen Instituts für Service-Qualität (DISQ) vom 13. August 2026 erreichte das Unternehmen den 3. Platz. Die Auszeichnung basiert auf unabhängigen Kundenbewertungen und bestätigt die hohe Service- und Trainingsqualität für Geschäftskunden in ganz Deutschland. Als Weiterbildungspartner unterstützt Kebel Training Unternehmen, Fachkräfte und Teams dabei, Software-Lösungen im Arbeitsalltag effizient einzusetzen. Das Kursportfolio umfasst über 1.200 praxisorientierte Seminare und offizielle Zertifizierungen – darunter Schwerpunkte in den Bereichen:

  • Microsoft-Schulungen: Von Microsoft 365, Office-Anwendungen und Power BI bis hin zu Azure Cloud, Windows Server und IT-Security.
  • KI-Schulungen: Ob Grundlagen oder vertiefende Themen – unsere KI Schulungen unterstützen Dich dabei, KI kompetent und verantwortungsvoll in Deinem beruflichen Umfeld einzusetzen.
  • SAP-Schulungen:  Im Fokus stehen u. a. praxisnahe Szenarien aus Finance, Controlling, Logistik, Produktion, HR, Reporting und Analytics.
  • DATEV-Seminare: Gezielte Weiterbildungen für Finanzbuchhaltung, Lohnabrechnung, Jahresabschluss und digitale Kanzleiprozesse.
  • Autodesk-Trainings: Spezialisierte CAD- und BIM-Kurse für AutoCAD, Revit, Inventor und Fusion 365.
  • Soft Skills Seminare: Hierbei handelt es sich um soziale Kompetenzen bzw. soziale Intelligenz wie Teamfähigkeit, ein gutes Gedächtnis, rhetorische Fähigkeiten, Know-how im Projekt-Management und kommunikative Kompetenz.

Warum Unternehmen und Kunden auf unser Kebel Team setzen?

Die Top-Platzierung beim Business-Partner-Award 2026 spiegelt die konsequente Ausrichtung auf den Lernerfolg der Teilnehmenden wider. Kunden profitieren von klaren Qualitätsstandards:

  • 100 % Durchführungsgarantie: Jedes Seminar findet garantiert statt – bereits ab 1 angemeldeten Person.
  • Kleine Lerngruppen: Mit maximal 2 bis 8 Teilnehmenden bleibt genügend Raum für individuelle Fragen und Praxisbeispiele.
  • Maximale Flexibilität: Alle Trainings sind an 21 Standorten deutschlandweit, als Live-Online-Seminar oder als maßgeschneiderte Inhouse-Schulung direkt im Unternehmen buchbar.
  • Erfahrene Trainer und Trainerinnen aus der Praxis vermitteln Wissen verständlich und direkt anwendbar.

FAQ

Tracing erfasst die einzelnen Schritte eines LLM- oder RAG-Ablaufs als Spans. MLflow 3 verbindet diese Trace-Daten mit Prompts, Kontextinformationen, Latenzen und Evaluationsergebnissen. Entwickler können dadurch auffällige Antworten untersuchen, Varianten vergleichen und Entscheidungen für eine Freigabe dokumentieren.

MLflow Tracking protokolliert Experimentläufe, Parameter, Metriken, Datensätze und Artefakte. Die Model Registry verwaltet daraus hervorgehende Modellversionen, Aliasse, Tags und dokumentierte Freigabeschritte. Tracking beantwortet damit die Frage nach dem Experiment, die Registry die Frage nach der freigegebenen Version.

Die Prompt Registry eignet sich, wenn Prompt-Varianten versioniert, bewertet und für definierte Umgebungen freigegeben werden sollen. Eine reine Artefaktablage speichert Prompt-Dateien, bildet aber den Zusammenhang zwischen Version, Evaluation, Alias und Freigabeprozess nicht in derselben Form ab.

Die Schulung richtet sich an Data-Science-Fachkräfte, ML-Engineers, MLOps-Engineers und Entwickler von LLM- oder RAG-Anwendungen. Sie passt zu Teams, die MLflow bereits verwenden oder Tracking, Registry, Prompt Management und GenAI-Tracing in einem gemeinsamen Workflow aufbauen möchten.

Sichere Python-Grundlagen und erste Erfahrung mit ML- oder LLM-Projekten werden vorausgesetzt. Kenntnisse in Git, APIs und containerisierten Anwendungen erleichtern den Einstieg in die Laboraufgaben. MLflow-Vorkenntnisse sind hilfreich, werden aber nicht als formale Voraussetzung genannt.

Die Schulung dauert drei Tage. Die Inhalte folgen einer zusammenhängenden Laborstrecke vom Plattform-Setup über Tracing und Prompt Management bis zur Evaluation und zum abschließenden GenAI-Review.

Nach der Schulung erhältst du ein Zertifikat von Kebel Training als Nachweis deiner Weiterbildung. Es handelt sich nicht um eine eigenständige offizielle Herstellerzertifizierung oder MLflow-Prüfung.

Eine Inhouse-Durchführung für dein Team wird auf Anfrage geprüft. Technische Umgebung, gewünschte Schwerpunkte und organisatorische Anforderungen werden vorab mit Kebel Training abgestimmt.

Ja, nach erfolgreicher Teilnahme am MLflow 3 Schulung: GenAI Observability für LLMs erhältst Du ein Teilnahmezertifikat. Dieses bestätigt Deine erweiterten Kenntnisse im professionellen Einsatz von MLflow 3 Schulung: GenAI Observability für LLMs .

Ja, wir garantieren die Durchführung aller von uns bestätigten Termine. Der MLflow 3 Schulung: GenAI Observability für LLMs findet auch bereits ab einem Teilnehmer statt, sodass Du Deine Weiterbildung sicher und zuverlässig planen kannst.

Ja, wir bieten den MLflow 3 Schulung: GenAI Observability für LLMs als Inhouse Training oder Firmenschulung an. Zusätzlich kann die Schulung auch als Online-Firmenschulung durchgeführt werden. Inhalte, Prozesse und Schwerpunkte passen wir individuell an die Anforderungen Deines Unternehmens an.

Name