opik
LLM開発ツールLLMアプリの評価・トレーシング基盤
Opikは、Comet社が開発するオープンソースのLLM評価・観測プラットフォームです。LLMアプリやRAGシステム、エージェントワークフローの実行を詳細にトレーシングし、自動評価(LLM-as-a-judge含む)、プロンプト管理、本番監視用ダッシュボードまでを一体で提供します。開発中のデバッグから本番運用のモニタリングまで同じ基盤でカバーできる点が特徴で、OpenAI、LangChain、LlamaIndexなど主要なライブラリとの統合も豊富です。PythonとTypeScriptのSDKがあり、セルフホストにも対応しています。LLMアプリの品質を定量的に管理したい開発チームや、評価とモニタリングを商用SaaSに頼らず自社環境で完結させたい企業に向いています。Apache-2.0ライセンスで利用できます。
関連トピック
コメント（0）
コメントするにはログインしてください。
同じカテゴリのOSS
hermes-agent
ユーザーと共に成長するAIエージェント（Nous Research製）
OpenCode
The open source coding agent.
firecrawl
WebをLLM向けに検索・スクレイピングするAPI
transformers
🤗 Transformers: the model-definition framework for state-of-the-art machine learning models in text, vision, audio, and multimodal models, for both inference and training.
ponytail
Makes your AI agent think like the laziest senior dev in the room. The best code is the code you never wrote.
dify
ノーコードでAIアプリを構築できるLLMOpsプラットフォーム