KI-Agenten - Monitoring, Guardrails und Qualitätssicherung im Betrieb 
-
Mehr Kontrolle für produktive KI-Agenten: Diese 2-tägige Schulung vermittelt, wie Sie Agentensysteme überwachen, Fehler erkennen und Änderungen sicher bewerten. Die Schulung ist besonders geeignet für Mitarbeitende in IT-Betrieb, Security und technischer Projektleitung.
-
KI-Agenten verhalten sich weniger vorhersehbar als klassische Software. In dieser Schulung lernen Sie, produktive Agentensysteme zu überwachen, zu prüfen und gezielt zu verbessern.
Der Kurs behandelt Logging, Tracing und Metriken für Qualität, Kosten, Latenz und Zuverlässigkeit. Sie erkennen fehlerhafte Abläufe, vergleichen Prompt-Versionen und sichern Änderungen mit Tests ab. Ein weiterer Schwerpunkt liegt auf Guardrails, Zugriffskontrollen und Human-in-the-Loop. Das Seminar zeigt, wie Sie sensible Aktionen freigeben, Fallbacks planen und Entscheidungen nachvollziehbar dokumentieren.
Sie entwickeln einen Betriebsprozess für KI-Agenten. So verbinden Sie Monitoring, Evaluation und Governance zu einem kontrollierten Verbesserungszyklus.
Angesprochener Teilnehmerkreis:
DevOps- und MLOps-Teams, KI-Verantwortliche, Softwareentwickler, IT-Architekten, IT-Security-Verantwortliche und technische Produktmanager, die KI-Agenten betreiben oder absichern.Kursziel:
Nach dem Kurs überwachen Sie Agentenläufe, bewerten Prompts, Tools und RAG-Qualität und steuern riskante Aktionen mit Freigaben. Sie bauen Prozesse für Tests, Fehleranalyse und laufende Verbesserung auf. -
- Betriebsanforderungen für KI-Agenten
- Unterschied zwischen klassischem Softwarebetrieb und Agentenbetrieb
- Nichtdeterministisches Verhalten von LLM-basierten Systemen
- Risiken durch Tool-Nutzung, Kontextwechsel und autonome Entscheidungen
- Typische Fehlerbilder im produktiven Einsatz
- Rollen und Verantwortlichkeiten im Betrieb
- Monitoring und Observability
- Logging von Prompts, Antworten und Tool Calls
- Tracing von Agentenentscheidungen und Workflow-Schritten
- Analyse von Fehlverhalten und unerwarteten Ergebnissen
- Metriken für Qualität, Kosten, Latenz und Zuverlässigkeit
- Dashboards und Review-Prozesse für Agentensysteme
- Prompt Engineering und Prompt Management
- Systematische Gestaltung von System-, Rollen- und Aufgabenprompts
- Prompt Patterns für stabile Agentensteuerung
- Versionierung und Vergleich von Prompts
- Debugging fehlerhafter Agentenantworten
- Reduktion von Halluzinationen und Fehlinterpretationen
- Evaluation und Model Harness
- Aufbau von Testfällen für Agentenverhalten
- Vergleich von Modellantworten und Prompt-Varianten
- Regressionstests für Prompts, Tools und Workflows
- Bewertung von RAG-Qualität und Kontextnutzung
- Qualitätssicherung vor Änderungen an Agentensystemen
- Guardrails und Sicherheitsmechanismen
- Prompt Injection und Jailbreak-Risiken
- Output Filtering und Content-Regeln
- Zugriffskontrolle für Tools und sensible Daten
- Begrenzung autonomer Aktionen
- Sicherheits- und Freigabekonzepte für kritische Workflows
- Eskalation und Human-in-the-Loop
- Erkennung unsicherer oder kritischer Situationen
- Freigabeprozesse für risikobehaftete Aktionen
- Übergabe an Menschen bei Unsicherheit oder Regelverletzungen
- Fallback-Strategien und Fail-Safe-Mechanismen
- Dokumentation und Nachvollziehbarkeit von Entscheidungen
- Kontinuierliche Verbesserung
- Feedback-Schleifen aus Nutzerinteraktionen
- Analyse von Fehlerklassen und Optimierungspotenzialen
- Anpassung von Prompts, Tools und Wissensquellen
- Governance für Änderungen an Agentensystemen
- Praxisnaher Betriebsprozess für KI-Agenten
- Betriebsanforderungen für KI-Agenten
-
Grundwissen zu KI-Agenten und LLM-Anwendungen ist erforderlich. Erfahrung mit Softwarebetrieb, Monitoring, DevOps oder Qualitätssicherung ist hilfreich.
- Dieses Seminar können Sie als Präsenzseminar oder als Live-Online-Training (virtuelles Präsenzseminar) buchen. Die technischen Voraussetzungen für Live-Online-Schulungen (Virtual Classrooms) finden sie hier. Sie können Ihre Auswahl bei der Anmeldung treffen.
Anmeldung
Preise
Die Teilnahmegebühr beträgt
ab 1.490,00 €
(1.773,10 € inkl. 19% MwSt.)
Durchführung ab 1 Teilnehmenden (mehr lesen ...)
Im Preis enthalten sind PC-COLLEGE - Zertifikat, Pausenverpflegung, Getränke und Kursmaterial.
-
ChatGPT - Grundkurs
-
Der gesamtüberblick über die Möglichkeiten hat meine Erwartungen übertroffen.
S.H. - 19.09.2025
-
T. Z. war eine sehr angenehme, ruhige und kompetente Referentin. Ich habe viel Neues gelernt und bekanntes Wissen vertiefen können. Die praktischen Beispiele waren hilfreich und haben die Schulung abwechslungsreich gestaltet. Zudem ist sie sehr flexibel auf unsere firmenspezifischen Fragen eingegangen und hat sich hier stets Zeit genommen, das fand ich besonders gut.
A.A. - 06.06.2025
-
Auch wenn der Kurs nur 1 Tag dauert, lernt man wunderbar die Funktionen und Möglichkeiten von ChatGPT kennen und kann nach dem Kurs problemlos selbstständig mit dieser KI-Anwendung arbeiten.
C.B. - 14.11.2025
-
-
-
Kundenauszeichnung
PC-COLLEGE bietet
exzellente Seminare
bestätigen unsere Teilnehmer auf dem unabhängigen Bewertungsportal eKomi. -
Qualitätsgarantie
Wir möchten Sie mit unseren Seminaren begeistern. Sollten Sie mit einer PC-COLLEGE- Schulung nicht zufrieden sein und uns dies innerhalb von 14 Tagen schriftlich mitteilen, können Sie das Seminar am selben Standort kostenfrei wiederholen.
-
Durchführung ab 1 Teilnehmenden
Unser Ziel ist es, Ihnen schnellstmöglich den gewünschten Kurs anzubieten. Aus diesem Grund führen wir einen Großteil unserer Seminare ab einer Person durch. Das bietet Ihnen Planungssicherheit und bringt Sie schnell an Ihr Ziel.
- ... alle Vorteile auf einen Blick
-
-
Ihre gewünschte Kursart wählen Sie bei der Anmeldung:
- Präsenzseminar:
Ein Schulungserlebnis vor Ort
mit persönlichen Kontakten und Hygieneregeln - Online-Seminar:
Modernes und interaktives
Live-Online-Training in
Echtzeit
im Job!
Hier individuelles Firmenseminar anfragen
Thema:
KI-Agenten - Monitoring, Guardrails und Qualitätssicherung im Betrieb
