Monitoring und Kosten
Tracing, Evaluation und Kostenkontrolle für LLM-Apps und laufende Agenten.
6 Ressourcen
Arize Phoenix
Open-Source-Tracing und Evaluation für LLMs und Agenten auf OpenTelemetry-Basis.arize.comccusage
CLI für lokale Claude-Code-Logs zeigt Tokens und geschätzte Kosten nach Tag, Monat oder Sitzung.github.comHelicone
Offenes Observability-Gateway für LLMs protokolliert Anfragen, Latenz und Kosten über mehrere Anbieter.helicone.aiLangfuse
Selbst hostbare Open-Source-LLM-Plattform für Tracing, Evaluation, Prompts und Kosten.langfuse.comLangSmith
LangChains Plattform für Tracing, Monitoring und Evaluation von LLM-Apps und Agenten.langchain.comOpenRouter
Eine API für viele Modellanbieter mit Preisen pro Anfrage, Nutzungsübersicht und Routing.openrouter.ai