Arize-ai/phoenix

项目概览

项目基于 OpenTelemetry 构建，且不绑定特定语言、框架或供应商，适合需要跨技术栈统一追踪标准的团队进行 LLM 应用监控。

项目类型

评测观测 · 基础设施

部署方式

Python 环境

License

License 待确认

适合谁

• 需要在缺乏专用平台时对 LLM 应用进行实验、评估和故障排查的 AI 工程师、开发者和数据团队。

核心能力

• 使用基于 OpenTelemetry 的埋点技术，对 LLM 应用的运行时进行追踪。该功能用于捕获应用运行的内部数据，帮助用户观察应用行为并排查问题，目前状态为可用。
• 利用 LLM 对应用的性能进行基准测试，支持对响应生成和检索（RAG）环节的评估。该功能用于量化应用输出质量，目前状态为可用。
• 创建包含示例的版本化数据集。这些数据集可用于实验、评估和模型微调，帮助用户管理测试数据，目前状态为可用。
• 追踪并评估提示词、LLM 和检索系统相关的变更。该功能用于比较不同配置对应用性能的影响，目前状态为可用。
• 通过模型上下文协议（MCP）提供访问 phoenix 各项能力的统一接口。该功能作为辅助模块，用于通过标准协议交互，目前状态为可用。

限制与风险

• 使用 Azure 模板部署时仅提供明文 HTTP，在生产环境使用需要额外配置 TLS 代理。

如何开始

• 安装难度较低，可通过 pip 或 conda 使用单条命令安装并启动，首次运行路径为 pip install arize-phoenix。

核验依据

• README: Phoenix is an open-source AI observability platform designed for experimentation, evaluation, and troubleshooting. It provides:
• README: Install Phoenix via `pip` or `conda` and have a fully functional Phoenix ```shell pip install arize-phoenix phoenix serve ```
• README: Phoenix container images are available via [Docker Hub](https://hub.docker.com/r/arizephoenix/phoenix) and can be deployed using Docker or Kubernetes. Arize AI also provides cloud…
• Release: arize-phoenix: v18.1.0
• README: MCP server implementation for Arize Phoenix providing unified interface to Phoenix's capabilities

内容核验时间：