模型微调监控

Langtrace

langtrace.ai

Langtrace是一款面向大型语言模型应用开发场景的开源可观测性工具，核心定位为LLM应用全链路性能监测与优化平台。核心功能包括符合OpenTelemetry标准的全链路追踪、机器学习流程多维度指标分析、LLM交互数据沉淀与黄金数据集构建。该工具面向AI应用开发工程师、MLOps运维人员、AI产品经理等群体，可应用于RAG应用性能排查、微调模型效果评估、AI应用迭代测试等多个场景，同时支持自我托管部署，能够帮助用户规避供应商锁定问题，实现AI应用全生命周期的可观测管理。