Link:langsmith
LangSmith是一個統一的DevOps平臺,用於開發、協作、測試、部署和監控LLM應用程式。它支援LLM應用程式開發生命週期的所有階段,為構建LLM應用提供端到端的解決方案。主要功能包括:鏈路追蹤、提示工具、資料集、自動評估、線上部署等。適用於構建基於LLM的AI助手、 ChatGPT應用的開發者。
需求人群:
"開發、測試、部署LLM應用"
使用場景示例:
使用鏈路追蹤分析一個提示呼叫鏈路的細節
透過提示工具,讓非技術人員參與提示內容的編寫
利用資料集功能構建迴歸測試集,持續評估應用質量
一鍵將LangChain應用部署上線,進行真實環境驗證
產品特色:
鏈路追蹤:Debug LLM應用,檢視每個呼叫的詳細資訊
提示工具:協作構建和管理提示
資料集:構建、管理測試資料集
自動評估:大規模評估LLM應用質量
一鍵部署:將LLM應用部署到LangServe