모니터링과 비용
LLM 앱과 장기 실행 에이전트의 추적, 평가, 비용 관리.
6 개 리소스
Arize Phoenix
OpenTelemetry 기반 LLM 및 에이전트 오픈 소스 추적과 평가.arize.comccusage
Claude Code 로컬 로그로 일별, 월별, 세션별 토큰과 예상 비용을 보고하는 CLI.github.comHelicone
요청, 지연 시간, 비용을 기록하는 오픈 소스 LLM 관측 게이트웨이.helicone.aiLangfuse
추적, 평가, 프롬프트 관리, 비용 추적을 지원하는 자체 호스팅 LLM 플랫폼.langfuse.comLangSmith
LLM 앱과 에이전트의 추적, 모니터링, 평가를 위한 LangChain 플랫폼.langchain.comOpenRouter
여러 모델을 하나의 API로 사용하며 요청별 요금, 사용량, 라우팅을 지원합니다.openrouter.ai