TwelveLabs

TwelveLabs 是什麼？

TwelveLabs 是一個影片原生的智慧平台，專為需要從大規模影片中萃取真實意義的組織打造。它不仰賴人工標註或基本的抽幀取樣，而是同時處理影片完整的時間軸——畫面、音訊與語言——讓每一刻都能被搜尋、分析與運用。平台核心為兩款自研模型：用於搜尋與探索的多模態嵌入模型 Marengo，以及用於深度分析與文字生成的影片語言模型 Pegasus。可透過 API、SDK 與 MCP 存取，並可部署於公有雲、私有雲或地端環境。

主要功能

• 多模態影片搜尋

  以自然語言搜尋整個影片庫，涵蓋畫面、音訊、對話乃至人物情緒，無須手動標註。由 Marengo 提供動力，於 47 種語言中達到 78.5% 的綜合準確率。

• 深度影片分析（Pegasus）

  Pegasus 能對長達兩小時的影片進行全時間軸連續推理，追蹤實體、因果關係與敘事脈絡，自動生成摘要、章節、問答、詮釋資料與事件報告。

• 高速索引基礎架構

  透過單一多模態管線以約 60 倍即時速度擷取並索引影片——一小時影片可在一分鐘內完成索引，每日可處理超過 10,000 小時。

• 內容分段與精華片段製作

  自動偵測長影片中的場景切換、節奏變化與自然段落，並依描述性提示詞組合出有針對性的精華集錦或短片。

• 合規與品牌安全監控

  大規模識別敏感內容、違規情形與品牌安全風險，並提供可解釋的輸出，使內容審查流程更快速、更具信心。

• 彈性部署與客製化模型訓練

  可部署於任何公有雲、私有雲或地端環境。並能以自有資料微調模型，打造專屬於貴組織的垂直領域影片智慧。

使用案例

• 媒體與娛樂內容典藏 : 製作公司與廣播業者可在數秒內從多年素材中找出帶有時間戳的片段，讓被動的片庫化為可即時搜尋、可重複利用的資產。
• 運動內容製作 : 運動組織可跨整個賽季快速定位特定比賽時刻、球員動作與值得剪輯的精彩鏡頭，更快包裝出適合球迷觀看的內容。
• 廣告科技與情境式投放 : 行銷團隊可依據真正的影片理解（而非詮釋資料）將廣告投放於品牌安全的場景中，實現真正的情境式廣告投放，無須人工審查。
• 公部門與安防 : 政府機關與安防團隊可針對監視器與密錄器影片，自動化處理證據管理、異常偵測與事件後報告。
• 開發者與企業整合 : 工程團隊可透過簡潔的 API、SDK 與 MCP 將影片智慧直接整合至產品與工作流程中，並支援以特定領域資料進行客製化模型訓練。

常見問題