AI
★ 12k

LLMの可観測性・評価ツール

Phoenixは、Arize AIが開発するオープンソースのAI可観測性・評価プラットフォームです。OpenTelemetryベースのトレーシングでLLMアプリやエージェントの実行過程を記録・可視化し、LLM-as-a-judgeなどによる自動評価、データセット管理、実験の比較、プロンプトの管理までをローカル環境やセルフホストで実行できます。LangChain、LlamaIndex、OpenAI、smolagentsなど主要フレームワークとの統合が用意されており、数行のコードで計装を開始できます。RAGやエージェントの「なぜこの回答になったのか」を追跡・改善したいAIエンジニアや、評価を開発サイクルに組み込みたいチームに向いています。ベンダーロックインを避けつつLLMの観測基盤を整えたい場合の有力な選択肢です。

関連トピック

agentsai-monitoringai-observabilityaiengineeringanthropicdatasetsevalslangchainllamaindexllm-evalllm-evaluationllmopsllmsopenaiprompt-engineeringsmolagents

コメント(0)

コメントするにはログインしてください。

同じカテゴリのOSS

Let's Build Together

候補が見つかったら、導入条件を整理しよう。

実現したい業務、既存ツールとの連携、データの保管場所、保守を担う人。自社での選定・導入に迷ったら、運営元のClasslessへご相談ください。