Wie man seinen AI-Agenten einfängt - aka "Evaluation and Observability"
26.06.2026
|
13:00
-
14:00
Uhr
Zugangslink wird nur angezeigt, wenn du für das Event angemeldet bist
Sprache:
Englisch
Du entwickelst AI Agents mit LangGraph oder einem ähnlichen Framework – aber woher weißt du, dass sie tatsächlich funktionieren?
Im Gegensatz zu "klassischer" Software sind LLM-basierte Systeme probabilistisch. Dieselbe Anfrage kann unterschiedliche Ergebnisse liefern, und Fehler sind oft subtil, schwer reproduzierbar und schwierig zu diagnostizieren. Je autonomer Agents werden, desto wichtiger werden Evaluation und Observability als zentrale Engineering-Praktiken.
In dieser Session zeige ich, wie du mit einer Observability-Plattform wie LangSmith mehr Systematik und Verlässlichkeit in die Entwicklung von AI Agents bringst.
Du lernst, wie du:
- Evaluations-Datensätze aufbaust und die Leistung von Agents systematisch misst
- Über „scheint zu funktionieren“ hinausgehst und mit quantitativen Metriken arbeitest
- Traces und Observability-Tools nutzt, um das Verhalten von Agents Schritt für Schritt nachzuvollziehen
- Typische Fehlerquellen in Agent-Workflows identifizierst und behebst
- Evaluation in deinen Entwicklungsprozess integrierst, um schneller und sicherer zu iterieren
Die Session beinhaltet praxisnahe Beispiele aus realen Agent-Projekten und zeigt, wie Evaluation und Observability dabei helfen können, den Schritt vom Prototypen zum produktionsreifen System zu schaffen.
Für wen ist die Session gedacht?
Technische Entscheider, CTOs, AI Engineers und Entwickler, die LLM-Anwendungen und AI Agents entwickeln.
Format
Live-Demos, Code, Traces und praxisnahe Beispiele.
Empfohlen für: CTOs, Product Manager, Product Leader, Developers
Veranstaltet von
The Agent Native Product
Ich unterstütze B2B Software-Firmen dabei, ihre Produkte AI-Native neu aufzubauen.
Alex Key
alex.key@kawunu.comEmpfohlene Events
Wie man seinen AI-Agenten einfängt - aka "Evaluation and Observability"
26.06.2026
|
13:00
-
14:00
Uhr