視覺化程式設計

ChainForge是一款開源的視覺化程式設計環境,專注於提示工程。它可以讓你評估提示和文字生成模型的穩健性,超越了簡單的案例證據。我們認為,提示多個大型語言模型、比較它們的響應並測試關於它們的假設,應該不僅容易,而且有趣。ChainForge提供了一套工具,以最小的努力評估和視覺化提示(和模型)的質量。換句話說,它旨在讓大型語言模型的評估變得簡單。ChainForge開箱即用地支援測試提示注入攻擊的穩健性、測試響應格式的一致性、傳送大量引數化提示並匯出到Excel檔案、驗證同一模型不同設定的響應質量、測量不同系統消息對ChatGPT輸出的影響等。