#020 AI/ML 模型管理
Comet ML
彗星 ML
★★★☆☆ 難度 3/5
支援所有主流 ML 框架的實驗追蹤平台，提供豐富的模型評估工具
工具介紹
Comet ML 是靈活的 ML 實驗管理平台，透過簡單的程式碼插入即可自動追蹤訓練指標、超參數、混淆矩陣等實驗資料。
平台支援 PyTorch、TensorFlow、Scikit-learn 等所有主流框架，並提供 LLM 評估和 Prompt 管理功能，適應 AI 技術快速演進的需求。
內建的模型生產監控功能讓 PM 能持續追蹤上線模型的效能漂移，及早發現潛在問題。
核心功能
- ✓ 跨框架實驗自動追蹤
- ✓ LLM 評估與 Prompt 管理
- ✓ 模型生產效能監控
- ✓ 混淆矩陣與視覺化工具
- ✓ 團隊協作與報告分享
適用情境
- ● ML 實驗追蹤與比較
- ● LLM 應用效果評估
- ● 生產模型效能監控
#experiment-tracking
#llm
#monitoring