Arize Phoenix 是什麼、怎麼用:看大模型應用的調用鏈路、做評測(安裝與上手)

Arize Phoenix 是什麼、怎麼使用?按官方 README 講清它的六項功能、基於 OpenTelemetry 的設計、pip 與 Docker 安裝、phoenix serve 本地啟動、各個子包的分工、支持哪些智能體框架和模型廠商,以及用它排查「智能體為什麼答錯」的基本思路。

NNathaniel bigo··原創首發·AI 輔助撰寫
9 分鐘讀完
資料核對於 2026-10-11 · 依據官方文檔與公開資料整理 免費帳號 帳號
本文根據 Arize Phoenix 官方倉庫 README 整理,資料核對於 2026-10-11。命令取自官方 README,沒有在本機運行驗證。

適用於誰

  • 搜「arize phoenix 是什麼」「arize phoenix 使用」的人;
  • 做了一個智能體或 RAG 應用,回答不對時只能靠打印日誌猜原因的人;
  • 想知道一次請求裏到底調用了幾次模型、檢索到了什麼、每一步花了多少時間和 token 的人。

結論先說

  1. Phoenix 是 Arize 開源的 AI 可觀測性平台,官方定位是用於實驗、評測和排查問題,可以自己部署。
  2. 核心是追蹤(Tracing):把應用運行時的每一步記錄下來,包括每次模型調用的輸入輸出、每次工具調用、每次檢索。
  3. 基於 OpenTelemetry 和 OpenInference,官方強調與廠商和語言無關。
  4. 本地兩步跑起來:pip install arize-phoenix,然後 phoenix serve。
  5. 不用自己埋點:它對主流的智能體框架和模型 SDK 有現成的集成。
  6. 許可證是 Elastic License 2.0,使用前留意條款。

一、六項功能

功能做什麼
Tracing(追蹤)用基於 OpenTelemetry 的埋點,記錄大模型應用的運行過程
Evaluation(評測)用大模型給應用的表現打分,包括回答質素和檢索質素
Datasets(數據集)創建帶版本的樣例集,用於實驗、評測和微調
Experiments(實驗)比較提示詞、模型、檢索方式改動前後的效果
Playground迭代提示詞、對比模型、調參數,並且可以重放追蹤到的模型調用
Prompt Management(提示詞管理)給提示詞做版本、打標籤、測試改動

這六項連起來是一個閉環:線上的調用被追蹤下來 → 挑出有問題的樣例存進數據集 → 在 Playground 裏改提示詞 → 用實驗對比新舊版本 → 用評測量化效果。

二、為什麼需要追蹤

一個智能體回答一個問題,背後可能是:一次檢索、三次模型調用、兩次工具調用。最後答錯了,原因可能在任何一步:

  • 檢索回來的片段就不相關;
  • 片段是對的,但模型沒用上;
  • 模型決定調用工具時參數填錯了;
  • 工具返回了錯誤,模型把錯誤當成了結果。

只看最終回答是分不清的。追蹤把每一步的輸入、輸出、耗時都擺出來,像看程序的調用棧一樣。追蹤裏的一條完整記錄叫 trace,其中的每一步叫 span。

三、安裝與啟動

bash
pip install arize-phoenix
phoenix serve

啟動後在瀏覽器裏打開終端打印出來的地址。官方 README 裏的連結指向本機的 6006 端口。

Docker:官方鏡像在 Docker Hub 上,名稱是 arizephoenix/phoenix。運行參數見官方文檔。

四、把應用接上去

README 給了一條自動配置的命令,它會檢測你用的框架並接好追蹤:

bash
npx @arizeai/phoenix-cli setup

已經裝了 Phoenix 的話,等價的寫法是 px setup。

手動接入則是在應用裏安裝對應的埋點包並指向 Phoenix 的地址,README 沒有給出最小代碼,具體步驟見官方的 Tracing 文檔。相關的子包:

包作用
arize-phoenix-otel對 OpenTelemetry 的輕量封裝,帶有適配 Phoenix 的預設設定
arize-phoenix-client訪問 Phoenix REST API 的輕量客戶端
arize-phoenix-evals評測工具,包括 RAG 相關性等
@arizeai/phoenix-otel、@arizeai/phoenix-client、@arizeai/phoenix-evals上面三個的 TypeScript 版本(evals 標註為 alpha)
@arizeai/phoenix-cli命令行,用來獲取追蹤、數據集和實驗

也就是說,生產環境裏的應用只需要裝輕量的埋點包,不需要裝完整的 arize-phoenix。

五、支持哪些框架和廠商

README 列出的集成:

  • 框架:OpenAI Agents SDK、Claude Agent SDK、LangGraph、Vercel AI SDK、Mastra、CrewAI、LlamaIndex、DSPy;
  • 模型廠商:OpenAI、Anthropic、Google GenAI、Google ADK、AWS Bedrock、OpenRouter、LiteLLM 等。

本站介紹過的幾個框架都在其中:《OpenAI Agents SDK 教學》、《Claude Agent SDK 快速上手》、《Vercel AI SDK 是什麼》、《Mastra 是什麼》。

因為底層是 OpenTelemetry,沒有現成集成的系統也可以按標準自己上報。

六、給編程智能體用

README 裏有專門面向編程智能體的部分:

  • MCP 伺服器:Phoenix 實例自帶一個遠程 MCP 端點,在實例地址後面加 /mcp,可以接到 Claude Code、Cursor 等支持 MCP 的客戶端。接上之後,可以直接讓編程智能體去查追蹤記錄、分析失敗的調用;
  • Skills:倉庫的 .agents/skills/ 裏提供了 phoenix-cli、phoenix-evals、phoenix-tracing 三個技能。

MCP 的接法見《Claude Code MCP 配置教學》。

七、用它排查問題的基本思路

  1. 先找到那條出問題的 trace,按時間或輸入內容定位;
  2. 從後往前看:最終回答是哪次模型調用產生的,它當時的完整輸入是什麼;
  3. 檢查輸入裏的每一部分:系統提示詞對不對、檢索到的片段相不相關、工具返回了什麼;
  4. 定位到出問題的那一步,再決定是改提示詞、改檢索,還是改工具的說明和返回格式;
  5. 把這個案例存進數據集,改完之後用它來驗證,之後也作為迴歸用例。

檢索不相關時怎麼調,見《Dify 知識庫搭建教學》裏的排查表;只想批量對比提示詞,用更輕量的《promptfoo 使用教學》。

八、數據與許可

  • 追蹤數據裏有用戶輸入和模型輸出的原文。自己部署時,這些數據在你的機器上;要注意誰能訪問 Phoenix 的介面,以及是否需要對敏感內容做脫敏;
  • 遙測:README 說明預設會收集基礎的網頁分析數據,可以用環境變量 PHOENIX_TELEMETRY_ENABLED=false 關閉;同時聲明不收集追蹤數據和評測結果;
  • 許可證:Elastic License 2.0(ELv2)。它和 MIT、Apache 這類寬鬆許可不同,對把軟件作為託管服務提供給第三方等用法有限制。公司內部自用一般不受影響,但要對外提供服務時請先閱讀條款;
  • 託管選項:README 提到 Arize 另有託管平台 Arize AX,使用相同的埋點方式。

常見問題

Q:和 promptfoo 是一類工具嗎?

側重點不同。promptfoo 是「上線前用一批固定用例批量對比」;Phoenix 的核心是「運行時把每一步記錄下來」,在此基礎上再做評測和實驗。兩者可以一起用。

Q:只在開發時用,還是也能用在生產環境?

兩種都可以。開發時在本機啟動,邊調邊看;生產環境需要單獨部署並規劃存儲,見官方的部署文檔。

Q:會不會拖慢我的應用?

追蹤基於 OpenTelemetry,數據通常是異步上報的。具體的性能影響和採樣配置,以官方文檔為準。

Q:必須用它的評測功能嗎?

不必。很多人只用追蹤這一項,就已經能解決大部分「不知道哪一步出了問題」的情況。

參考資料

  • Arize-ai/phoenix(官方倉庫與 README):https://github.com/Arize-ai/phoenix
需要開通或續費?AI 會員充值與全部商品 →

Nathaniel 的更多內容

  1. 01

    AI 學習路線:零基礎從哪開始,6 個階段、每階段該讀哪幾篇教學(2026)

    AI 學習路線怎麼走?給零基礎的人一條循序漸進的路徑:先選一個助手用順,再學提問,再用進日常工作,按需學做圖做影片,守住私隱與版權,最後進階自動化和編程。每個階段都配了本站對應的教學。

    其他 AI 工具0
  2. 02

    AI 瀏覽器有哪些:Perplexity Comet、Opera Neon、Dia、Brave Leo 與 Edge Copilot 的官方說法對照

    AI 瀏覽器有哪些?按官方頁面整理 Perplexity Comet、Opera Neon、Dia、Brave Leo 和 Edge 裏的 Copilot:官方自述的定位、支持的平台、免費還是訂閱,以及 Gemini、Claude 的 Chrome 方案和已停用的 ChatGPT Atlas。

    其他 AI 工具0
  3. 03

    即夢國際版 Dreamina 是什麼:官方站入口、能生成什麼、免費積分和模型(2026)

    即夢國際版 Dreamina 是什麼?官方站是 dreamina.capcut.com,是一個圖片、影片和數字人一體的 AI 創作平台。按官方首頁和 FAQ 講:能生成什麼、免費用戶每天 120 積分、列出的 Seedance 與 Seedream 模型,以及和國內即夢怎麼區分。

    其他 AI 工具0
  4. 04

    Kimi K3 Coding Plan 是什麼、怎麼用:Kimi Code 會員、模型 ID、套餐價格和額度規則

    Kimi K3 Coding Plan 是什麼?按 Kimi 官方文檔核對:官方現在叫 Kimi Code,是 Kimi 會員權益裏的編程服務,Plus 及以上才有;講 K3 等模型 ID、國內新套餐價格、三種客戶端、第三方工具接入和額度規則。

    Kimi0
  5. 05

    DeepSeek V4 Pro 和 Flash 的區別與 API 價格:官方價格頁逐項對照(高峰與空閒時段)

    DeepSeek V4 Pro 和 Flash 有什麼區別、API 怎麼收費?按 DeepSeek 官方價格頁(2026-10-19 查詢)列出兩個模型的版本、上下文、圖像理解、並發和每百萬 token 價格,說明高峰與空閒時段的計費差別和舊模型名怎麼處理。

    其他 AI 工具0
  6. 06

    GPT-6 Pro(Astra)怎麼用、哪些套餐有:怎麼選到 Pro 檔、用量限制和 Pro 三檔價格

    GPT-6 Pro(Astra)怎麼用、哪些套餐有?按 OpenAI 幫助中心核對:聊天裏 Pro 檔給 Pro 100、Pro 200、Business 和 Enterprise;Plus 在 Work 和 Codex 裏含 Astra。講怎麼選到、用量上限和官方 Pro 價格。

    ChatGPT0

同產品的其他教學

  1. 01

    AI圖片放大與高清修復:Midjourney、ChatGPT、Gemini 怎麼出高解像度圖

    AI 生成的圖不夠清晰,想打印或做大圖怎麼辦?本文按官方文檔講清 Midjourney 的 Subtle / Creative 放大和 HD 直出、Gemini 與 ChatGPT 的解像度選項、Flow 的影片放大,以及「AI 放大會編造細節」的注意事項。

    Gemini其他 AI 工具0
  2. 02

    AI影片運鏡提示詞大全:推拉搖移跟升降、環繞、甩鏡怎麼寫(中英對照)

    AI 影片的運鏡提示詞怎麼寫?本文按 Google 官方影片提示指南整理鏡頭運動、機位角度、鏡頭光學效果三張中英對照表,每個術語配效果說明和例句,並給出組合運鏡的寫法和常見翻車原因,適用於 Veo、即夢、可靈等工具。

    Gemini其他 AI 工具0
  3. 03

    AI 影片翻譯怎麼做:用 ElevenLabs 給影片自動配音翻譯、轉寫並生成字幕

    想把一段影片翻譯成另一種語言並保留原聲音色?本文按 ElevenLabs 官方文檔講清 Dubbing 自動配音翻譯的操作步驟、文件限制、免費檔水印與計費方式,以及用 Speech to Text 轉寫、在字幕編輯器裏調整並導出字幕的流程。

    其他 AI 工具0
  4. 04

    MCP Inspector 怎麼用:安裝、啟動命令、調試 MCP 伺服器與 v2 的變化

    MCP Inspector 是什麼、怎麼安裝和使用?按 MCP 官方文檔講清網頁、命令行、終端介面三種模式的啟動命令,怎麼連本地和遠程伺服器、怎麼傳環境變量,密鑰存在哪,以及 v2 相比舊教學在端口、令牌變量名和 Node 版本上的變化。

    Claude其他 AI 工具0
  5. 05

    MCP 的 stdio、SSE 和 Streamable HTTP 有什麼區別:本地與遠程 MCP 怎麼選

    MCP 配置裏的 stdio、sse、http 到底差在哪?按 MCP 官方規範講清兩種標準傳輸方式的工作原理、Streamable HTTP 與舊的 HTTP+SSE 的關係、會話與斷線續傳、規範對安全的硬性要求,以及本地伺服器和遠程伺服器各適合什麼場景。

    Claude其他 AI 工具0
  6. 06

    Midjourney 可以商用嗎:作品歸屬、商用條件與隱身模式

    Midjourney 生成的圖片和影片能不能商用、版權歸誰、公司用要什麼套餐、作品會不會被別人看到?本文按 Midjourney 服務條款逐條解釋,並補充中美對 AI 生成圖片版權的官方 / 司法觀點。

    其他 AI 工具0

0 條評論

登入 後參與評論

還沒有評論,來搶沙發~