comet-ml/opik

Opik 是开源 LLM 应用观测、评测和调试平台，覆盖 RAG systems 与 agentic workflows。仓库描述强调 comprehensive tracing、automated evaluations 和 production-ready dashboards，这些能力对应 LLM 应用里最难排查的部分：检索输入、prompt、工具调用、中间输出和评测结果之间的因果链。它与 Flightdeck 的差异在于更偏 LLM app/RAG evaluation，全链路 experiment/debug/monitor 统一。对团队来说，Opik 的价值不只是看单次 trace，而是把质量回归和生产观察放到同一数据模型里。