opik

LLM開発ツール

★ 20k

LLMアプリの評価・トレーシング基盤

Opikは、Comet社が開発するオープンソースのLLM評価・観測プラットフォームです。LLMアプリやRAGシステム、エージェントワークフローの実行を詳細にトレーシングし、自動評価(LLM-as-a-judge含む)、プロンプト管理、本番監視用ダッシュボードまでを一体で提供します。開発中のデバッグから本番運用のモニタリングまで同じ基盤でカバーできる点が特徴で、OpenAI、LangChain、LlamaIndexなど主要なライブラリとの統合も豊富です。PythonとTypeScriptのSDKがあり、セルフホストにも対応しています。LLMアプリの品質を定量的に管理したい開発チームや、評価とモニタリングを商用SaaSに頼らず自社環境で完結させたい企業に向いています。Apache-2.0ライセンスで利用できます。