LangWatch

LangWatch 是一个 LLM 可观察性和评估平台，旨在帮助 AI 团队监控、评估和优化他们的 LLM 驱动应用。它提供对提示、变量、工具调用和代理的全面可视化，确保更快的调试和更智能的洞察。LangWatch 支持离线和在线检查，以及 LLM 作为评判者和基于代码的测试，允许用户在生产环境中扩展评估并维护性能。它还提供实时监控，具备自动异常检测、智能警报和根本原因分析等功能，并支持注释、标记和实验的功能。