Raindrop

Raindrop 是什麼？

Raindrop 是首個專為生產環境中的 AI agent 建構的監控平台。它解決了傳統監控工具遺漏的關鍵靜默失敗問題——當 AI agent 產生幻覺、無限迴圈或破壞工具而不觸發標準錯誤警報時。Raindrop 捕獲每次 agent 執行，包括訊息、工具呼叫、重試和錯誤，然後使用自訂模型偵測幻覺和迴圈等真實故障。該平台整合在 Slack 中，允許工程師分類問題、查詢資料，並透過即時實驗證明修復有效。受到財富 100 強公司和 Replit、Speak、Clay 等快速成長的 AI 新創公司的信賴，Raindrop 每月處理數十億條追蹤記錄。

主要功能

• 完整的 Agent 追蹤

  記錄每次生產運行，捕獲訊息、工具呼叫、重試和錯誤，在一個地方提供 agent 軌跡和決策序列的完整可見性。

• 自動問題偵測

  AI agent 在背景工作，對潛在問題模式進行分類和調查，當出現幻覺或工具故障等問題時，生成逐步說明解釋發生了什麼。

• 自訂訊號與分類器

  為對您的產品重要的行為定義自訂訊號——除了「使用者挫折感」等預設訊號外，團隊還可以追蹤「Agent 陷入迴圈」或「UI 美學投訴」，並監控數百萬事件中的事件發生率。

• Slack 原生分類 Agent

  在任何 Slack 頻道中 @Raindrop，即可提問、分類問題、建立訊號和總結最大問題，無需離開 Slack。在後續對話中保持上下文，並支援自動簡報。

• 實驗與 A/B 測試

  首個專為 AI agent 設計的 A/B 測試框架，讓您在推出前透過功能開關證明改進效果，針對即時流量執行實驗以確認問題已解決。

• SOC 2 合規且企業級就緒

  SOC 2 Type II 合規，具有智慧伺服器端 PII 去識別化、SSO/SAML 登入、稽核日誌、存取控制，以及可在您自己的雲端中部署的自託管測試版。

使用案例

• 生產環境 Agent 監控 : AI 工程團隊即時監控已部署的 agent，在使用者注意到之前，當 agent 因幻覺、迴圈或工具故障而靜默失敗時收到 Slack 警報。
• 除錯與根因分析 : 工程師透過深入追蹤和工具呼叫來調查複雜的 agent 問題以找到根本原因，分類 agent 提供出錯原因的逐步說明。
• 驗證 Agent 修復 : 在發布修復後，團隊使用功能開關針對即時流量執行實驗，以確認問題已永久解決，而不僅僅是暫時修補。
• 自訂行為追蹤 : 醫療保健、金融服務和教育領域的公司追蹤特定領域的訊號，如「有害使用者行為」或「合規違規」等對其業務至關重要的指標。
• 多 Agent 工作流程可觀測性 : 建構並行或多 agent 工作流程的團隊使用 Raindrop 來管理「追蹤義大利麵」，梳理複雜的軌跡以發現是哪個 agent 導致了問題。

常見問題