Kelet: Automatisierte Root-Cause-Analyse für KI-Agenten
Was Kelet leistet
Kelet ist ein Dienst, der KI-Agenten und LLM-Anwendungen in der Produktion kontinuierlich überwacht, um automatisch zu ermitteln, warum sie scheitern. Anstatt mit klaren Fehlern abzustürzen, geben Agenten oft stillschweigend falsche Antworten, was eine manuelle Trace-Analyse erfordert. Kelet automatisiert diese Untersuchung, indem es Fehlermuster über Tausende von Sitzungen hinweg clustert.
Wie es funktioniert
- Sie verbinden Ihre Traces und Signale (Nutzerfeedback, Bearbeitungen, Klicks, Stimmung, LLM-als-Richter usw.)
- Kelet verarbeitet diese Signale und extrahiert Fakten zu jeder Sitzung
- Es bildet Hypothesen darüber, was in jedem Fall schiefgelaufen ist
- Es clustert ähnliche Hypothesen über Sitzungen hinweg und untersucht sie gemeinsam
- Es zeigt eine Ursache mit einem vorgeschlagenen Fix an, den Sie prüfen und anwenden können
Die zentrale Erkenntnis: Einzelne Sitzungsfehler wirken zufällig, aber wenn man die Hypothesen clustert, treten Fehlermuster hervor.
Integrationsoptionen
Drei Integrationsmöglichkeiten:
- Kelet Skill für Coding-Agenten: Durchsucht Ihre Codebasis, ermittelt, wo Signale gesammelt werden sollten, und richtet alles automatisch ein
- Python SDK:
pip install kelet - TypeScript SDK:
npm install kelet
Die manuelle Einrichtung erfordert das Hinzufügen von zwei Zeilen zu Ihrem Agenten-Code. Kelet ist vollständig OpenTelemetry-konform, sodass jeder OTEL-instrumentierte Agent sofort funktioniert.
Unterstützte Frameworks und Plattformen
Funktioniert mit: OpenTelemetry, Langfuse, Mixpanel, OpenAI, Anthropic, LangChain, pydantic AI SDK, CrewAI, Strands, Agno, Mastra, PostHog, LangGraph, AutoGen, LlamaIndex, Haystack, Semantic Kernel und Gemini APIs.
Funktioniert mit jedem Agenten oder jeder LLM-Anwendung, bei der Sie den Code besitzen: agentische Schleifen, mehrstufige Workflows, RAG-Pipelines, Chatbots, autonome Agenten.
Zwei Situationen, in denen Kelet nicht passt:
- Wenn Sie KI-Tools von anderen nutzen (Cursor, Claude Code, Copilot als Entwickler)
- Wenn Sie eine Skill oder ein Plugin innerhalb einer bestehenden agentischen Plattform entwickeln
Technische Details
- Läuft auf Kelets Servern (SOC 2 zertifiziert)
- Nimmt kontinuierlich Traces rund um die Uhr auf
- LLM-Tokens für die Analyse werden von Kelet übernommen (berühren nicht Ihre Modell-API-Rechnung)
- Preise basieren auf der Nutzung (siehe kelet.ai/pricing)
- Derzeit während der Beta kostenlos (keine Kreditkarte erforderlich)
Leistungsmetriken
Aus Pilotkohortendaten:
- 73 % der Teams hatten Fehler, die niemand bemerkte (Kelet fand sie)
- 14,3 Minuten mediane Zeit von der Trace-Aufnahme bis zum Prompt-Patch
- 33.000+ Sitzungen analysiert über Design-Partner-Bereitstellungen hinweg
📖 Read the full source: HN AI Agents
👀 Siehe auch
Vektoris Speicherarchitektur: Prinzipien aus Claudes geleaktem System
Vektori implementiert einen dreischichtigen hierarchischen Satzgraphen für KI-Erinnerung, inspiriert von durchgesickerten Prinzipien aus Claudes Architektur. Das System verwendet strenge Qualitätsfilter, skeptisches Abrufen mit einer Mindestpunktzahl von 0,3 und bewahrt Korrekturverläufe über Sitzungen hinweg.
AskFirst API fügt KI-Agenten eine menschliche Genehmigungsebene hinzu
AskFirst ist eine REST-API, die KI-Agenten pausieren lässt, um menschliche Genehmigung einzuholen, bevor sie irreversible Aktionen durchführen. Sie funktioniert mit lokalen Modellen, gehosteten APIs und jedem Framework und bietet E-Mail-Benachrichtigungen, Genehmigungs-/Ablehnungsoptionen und Audit-Protokolle.
Adam: Eine einbettbare, plattformübergreifende KI-Agenten-Bibliothek in C
Adam ist eine C-Bibliothek, die einen vollständigen Agenten-Loop mit Tool-Aufrufen, Gedächtnis, Sprache und Unterstützung für Cloud- sowie lokale LLMs bietet und dafür entwickelt wurde, in jede Anwendung eingebettet zu werden.
Offline-Sprache-zu-Text-Tool für macOS mit lokalem Whisper über MLX
Ein Entwickler hat whisper-dictate als Open-Source veröffentlicht, ein macOS-Tool, das vollständig offline Spracherkennung in Text mit Echtzeit-Übersetzungsfunktionen bietet, indem es Whisper lokal über MLX auf Apple Silicon ausführt. Die Transkription dauert etwa 500 ms, nachdem das Sprechen beendet wurde.