KI-Agenten - Monitoring, Guardrails und Qualitätssicherung im Betrieb 
-
Mehr Kontrolle für produktive KI-Agenten: Diese 2-tägige Schulung vermittelt, wie Sie Agentensysteme überwachen, Fehler erkennen und Änderungen sicher bewerten. Die Schulung ist besonders geeignet für Mitarbeitende in IT-Betrieb, Security und technischer Projektleitung.
-
KI-Agenten verhalten sich weniger vorhersehbar als klassische Software. In dieser Schulung lernen Sie, produktive Agentensysteme zu überwachen, zu prüfen und gezielt zu verbessern.
Der Kurs behandelt Logging, Tracing und Metriken für Qualität, Kosten, Latenz und Zuverlässigkeit. Sie erkennen fehlerhafte Abläufe, vergleichen Prompt-Versionen und sichern Änderungen mit Tests ab. Ein weiterer Schwerpunkt liegt auf Guardrails, Zugriffskontrollen und Human-in-the-Loop. Das Seminar zeigt, wie Sie sensible Aktionen freigeben, Fallbacks planen und Entscheidungen nachvollziehbar dokumentieren.
Sie entwickeln einen Betriebsprozess für KI-Agenten. So verbinden Sie Monitoring, Evaluation und Governance zu einem kontrollierten Verbesserungszyklus.
Angesprochener Teilnehmerkreis:
DevOps- und MLOps-Teams, KI-Verantwortliche, Softwareentwickler, IT-Architekten, IT-Security-Verantwortliche und technische Produktmanager, die KI-Agenten betreiben oder absichern.Kursziel:
Nach dem Kurs überwachen Sie Agentenläufe, bewerten Prompts, Tools und RAG-Qualität und steuern riskante Aktionen mit Freigaben. Sie bauen Prozesse für Tests, Fehleranalyse und laufende Verbesserung auf. -
- Betriebsanforderungen für KI-Agenten
- Unterschied zwischen klassischem Softwarebetrieb und Agentenbetrieb
- Nichtdeterministisches Verhalten von LLM-basierten Systemen
- Risiken durch Tool-Nutzung, Kontextwechsel und autonome Entscheidungen
- Typische Fehlerbilder im produktiven Einsatz
- Rollen und Verantwortlichkeiten im Betrieb
- Monitoring und Observability
- Logging von Prompts, Antworten und Tool Calls
- Tracing von Agentenentscheidungen und Workflow-Schritten
- Analyse von Fehlverhalten und unerwarteten Ergebnissen
- Metriken für Qualität, Kosten, Latenz und Zuverlässigkeit
- Dashboards und Review-Prozesse für Agentensysteme
- Prompt Engineering und Prompt Management
- Systematische Gestaltung von System-, Rollen- und Aufgabenprompts
- Prompt Patterns für stabile Agentensteuerung
- Versionierung und Vergleich von Prompts
- Debugging fehlerhafter Agentenantworten
- Reduktion von Halluzinationen und Fehlinterpretationen
- Evaluation und Model Harness
- Aufbau von Testfällen für Agentenverhalten
- Vergleich von Modellantworten und Prompt-Varianten
- Regressionstests für Prompts, Tools und Workflows
- Bewertung von RAG-Qualität und Kontextnutzung
- Qualitätssicherung vor Änderungen an Agentensystemen
- Guardrails und Sicherheitsmechanismen
- Prompt Injection und Jailbreak-Risiken
- Output Filtering und Content-Regeln
- Zugriffskontrolle für Tools und sensible Daten
- Begrenzung autonomer Aktionen
- Sicherheits- und Freigabekonzepte für kritische Workflows
- Eskalation und Human-in-the-Loop
- Erkennung unsicherer oder kritischer Situationen
- Freigabeprozesse für risikobehaftete Aktionen
- Übergabe an Menschen bei Unsicherheit oder Regelverletzungen
- Fallback-Strategien und Fail-Safe-Mechanismen
- Dokumentation und Nachvollziehbarkeit von Entscheidungen
- Kontinuierliche Verbesserung
- Feedback-Schleifen aus Nutzerinteraktionen
- Analyse von Fehlerklassen und Optimierungspotenzialen
- Anpassung von Prompts, Tools und Wissensquellen
- Governance für Änderungen an Agentensystemen
- Praxisnaher Betriebsprozess für KI-Agenten
- Betriebsanforderungen für KI-Agenten
-
Grundwissen zu KI-Agenten und LLM-Anwendungen ist erforderlich. Erfahrung mit Softwarebetrieb, Monitoring, DevOps oder Qualitätssicherung ist hilfreich.
- Dieses Seminar können Sie als Präsenzseminar oder als Live-Online-Training (virtuelles Präsenzseminar) buchen. Die technischen Voraussetzungen für Live-Online-Schulungen (Virtual Classrooms) finden sie hier. Sie können Ihre Auswahl bei der Anmeldung treffen.
Anmeldung
Preise
Die Teilnahmegebühr beträgt
ab 1.490,00 €
(1.773,10 € inkl. 19% MwSt.)
Durchführung ab 1 Teilnehmenden (mehr lesen ...)
Im Preis enthalten sind PC-COLLEGE - Zertifikat, Pausenverpflegung, Getränke und Kursmaterial.
-
ChatGPT - Grundkurs
-
T. Z. war eine sehr angenehme, ruhige und kompetente Referentin. Ich habe viel Neues gelernt und bekanntes Wissen vertiefen können. Die praktischen Beispiele waren hilfreich und haben die Schulung abwechslungsreich gestaltet. Zudem ist sie sehr flexibel auf unsere firmenspezifischen Fragen eingegangen und hat sich hier stets Zeit genommen, das fand ich besonders gut.
A.A. - 06.06.2025
-
Auch wenn der Kurs nur 1 Tag dauert, lernt man wunderbar die Funktionen und Möglichkeiten von ChatGPT kennen und kann nach dem Kurs problemlos selbstständig mit dieser KI-Anwendung arbeiten.
C.B. - 14.11.2025
-
Der gesamtüberblick über die Möglichkeiten hat meine Erwartungen übertroffen.
S.H. - 19.09.2025
Künstliche Intelligenz (KI) - Grundlagen Microsoft Copilot & Google Gemini
-
kleine Gruppen, genügend Zeit für Fragen, IT-Skills sind in heute unabhängig vom Beruf unabdingbar, diese Kurse leisten einen guten Beitrag dazu, danke
P.G. - 03.06.2025
-
-
-
Zertifikatsservice
Sollten Sie Ihr PC-COLLEGE-Zertifikat verlegt oder bei einem Arbeitgeber abgegeben haben, senden wir Ihnen auf Wunsch, bis zu sieben Jahre nach Kursende, gerne Ihr Original-Zertifikat per Post oder ein PDF per E-Mail zu.
-
Bildungsanbieterauszeichnung
Wir wurden im Internationalen Bildungsanbieter-Elite-Ranking (IBER) der performNET AG mit der Höchstwertung von fünf Sternen ausgezeichnet.
PC-COLLEGE schreibt Kundenorientierung groß und hält Qualitätsstandards dauerhaft auf einem sehr hohem Niveau.
-
Nachbetreuung
Auch nach dem Seminar sind wir für Sie da. Vier Wochen nach jedem Training stehen wir Ihnen kostenfrei für programmspezifische Fragen zur Verfügung.
- ... alle Vorteile auf einen Blick
-
-
Ihre gewünschte Kursart wählen Sie bei der Anmeldung:
- Präsenzseminar:
Ein Schulungserlebnis vor Ort
mit persönlichen Kontakten und Hygieneregeln - Online-Seminar:
Modernes und interaktives
Live-Online-Training in
Echtzeit
im Job!
Hier individuelles Firmenseminar anfragen
Thema:
KI-Agenten - Monitoring, Guardrails und Qualitätssicherung im Betrieb
