Cohere Compass 影片搜尋開放私人預覽:找到時間點,為何比找到檔案更難?

Cohere Compass 推出 Video Intelligence 私人預覽。解析影片時間點檢索、畫面與逐字稿、文件共同搜尋與權限,以及十一組資料的原廠排序評測與導入驗收。

Share
Cohere Compass Video Intelligence 官方主視覺,白色標誌位於彩色抽象背景
Cohere 官方影片搜尋主視覺,本次以設計夥伴私人預覽推出。 圖片來源:官方原文。

Cohere Compass 想讓企業搜尋影片時,直接找到回答問題的那幾十秒。若你只記得會議裡有人改了上線日期,拿到整段一小時錄影,仍然得自己拖曳播放進度。

Cohere 在 2026 年 11 月 16 日介紹 Video Intelligence 私人預覽,讓應用與 AI 代理一起搜尋影片和文件,回傳帶時間標記的片段、逐字稿與畫面描述。

這個功能把影片當成同時有聲音、畫面與前後事件的資料。因為投影片的圖表可能和口頭說明不同,單靠字幕關鍵字不一定能找到完整答案。

官方表示,片段的開始與結束是在搜尋時決定,也會遵守使用者的內容存取權。這讓搜尋結果更接近可檢查的證據,卻仍需要回原片核對問題的上下文。

我會建議已有大量會議或訓練影片的團隊,先挑一個能定義正確片段的資料集參與評估。需要立即全面上線的人,則應先確認私人預覽的開通與部署條件。

要衡量它的用途,先從影片裡的答案為何不能只靠逐字稿開始。

Cohere Compass 如何同時搜尋說話和畫面?

影片搜尋需要把說了什麼、畫面顯示什麼及事件順序放在一起理解。逐字稿可以保存口頭內容,但簡報上的圖表、示範動作和沒有念出來的文字,可能仍然留在畫面裡。

例如某位講者說營收正在改善,投影片卻顯示另一項成本同步增加。若問題是在問獲利壓力,搜尋系統只取到那句正面說明,就可能漏掉讀者需要的另一半資訊。

Cohere 的發布文章以這種落差解釋新功能的目標。它希望找到影片中與問題相關的時刻,並提供片段、逐字稿及畫面描述,讓應用可以把證據交給使用者。

影片還有順序問題。單一畫面可以看到球員離開球場,前後片段才可能交代是換人、受傷或被判出場。若搜尋條件問的是事件原因,單張截圖不能完整回答。

這使新功能的價值超過替影片加字幕,但也提高驗收要求。找到看起來相似的畫面,和找到能回答問題的整段事件,應分成不同層級檢查。

對企業來說,較直接的用途是讓錄下來的決策和示範重新被使用。當答案藏在過去的會議裡,搜尋能先縮小觀看範圍,使用者仍能回到原片理解脈絡。

理解內容之後,還得把答案的開始與結束找準。

Cohere Compass Video Intelligence 官方主視覺,白色標誌位於彩色抽象背景
Cohere 官方影片搜尋主視覺,本次以設計夥伴私人預覽推出。 圖片來源:官方原文。
Cohere 官方 Video Intelligence 發布示範,功能以私人預覽提供。 來源:官方原始貼文。

搜尋時決定片段邊界,減少重新拖曳時間

Compass 宣稱會依問題決定相關片段,而非只回傳預先切好的固定區段。片段的邊界影響使用者能否直接看到答案,也影響後續 AI 取得多少必要背景。

固定切片容易在一句話中間分段。若前半段交代條件,後半段才講結論,只取其中一段,系統即使搜尋到正確主題,也可能把有條件的說法讀成全面適用。

官方的做法是在查詢時找出開始與結束時間。這讓「介紹功能」和「說明取消條件」可能回傳不同長度的片段,不必永遠使用同一組事先設定的區塊。

但是更精準的定位仍需要人能核對。每筆結果連回原始影片,並帶時間標記與文字說明,才有辦法確認這幾秒是完整答案,還是剛好少了前一句否定。

片段越短一定越好嗎?

適合的長度應該由問題決定。查某個數字可能只需要短片段,查團隊為何改決策,則可能需要保留較長討論,不能把越短當成共同優化目標。

因此,企業驗收時可以同時記錄兩種錯誤,一種是答案根本不在片段裡,另一種是答案在,但使用者還得往前後找才能明白。兩者都會消耗觀看時間,修正方向卻不同。

片段更短,證據與前後文就更需要能追溯。

文件和影片共用搜尋,權限也要一路保留

同一次搜尋可找出相關頁面與影片時刻,但結果只能來自使用者原本有權查看的內容。這讓文件與錄影能互相補充,也把存取控制變成搜尋設計的一部分。

依Compass 產品頁及本次公告,資料可以進入共同的檢索系統。檢索就是從資料中找出和問題相關的內容,之後應用再用這些證據回答或安排工作。

常見的 RAG 會先檢索資料再讓模型生成回答。影片加入之後,回答可以引用同一次簡報的投影片與講者解釋,而不必只依賴其中一種格式。

官方也提出透過 MCP 伺服器連接代理的方式。MCP 是讓 AI 呼叫外部工具的共同介面,代理因此能搜尋影片,但不代表它自動取得整間公司的全部錄影權限。

權限應在結果產生前就生效。若沒有權限的內容先被找出,再只把連結藏起來,摘要或畫面描述仍可能帶出資訊。企業要驗收的是完整結果的可見範圍。

資料更新也會影響這個範圍。使用者離職、專案轉為保密,或原片被撤回時,搜尋結果能否同步反映,應列入實際導入測試,而非只看初次匯入成功。

這種控制要隨實際資料和代理接入一起驗收。

領先四點四分,是官方十一組資料的排名結果

官方以十一個資料集比較七個影片嵌入模型,平均排序指標領先最強替代方案四點四分。嵌入模型負責把內容轉成可比較的表示,協助搜尋相近或相關資料。

這裡的指標叫 nDCG@10,衡量最前面十筆搜尋結果的相關性排序。重要答案排在前面會得到較好的分數,所以它能反映使用者是否容易先看到需要的內容。

但排序分數不是問題回答的正確率。即使相關片段排到第一名,後續模型仍可能摘要錯誤。反過來,回答者也可能從較低名次找到有用片段,兩段能力不應混為一談。

這次測試包含六個公開資料集,以及五個內部資料集,總共一萬一千一百三十三則查詢。五個內部資料集分為三個企業知識與兩個運動資料集。因為混合了公開與內部資料,外部讀者不能只靠公開部分就重建整個平均結果。

官方另把資料分成公開基準、運動與企業知識領域,各自領先的比較對手並不相同。這說明資料內容會改變模型相對表現,單一總分不會消除使用場景的差別。

這份數據由產品提供者執行並發布,本文查核的是原始說明,沒有獨立重跑影片檢索。企業可以拿它縮小候選範圍,但仍需用自己的影片和問題,確認排序是否同樣有用。

平均名次提供線索,自己的問題分布仍會改變結果。

私人預覽怎麼評估,先做可核對的問題集

設計夥伴可以在管理雲端或自有環境測試,先訂出正確片段,才能比較搜尋品質。十一月十七日查詢時,官方仍以私人預覽和招募設計夥伴描述這次開放。

私人預覽代表功能要透過特定合作安排取得,不能直接推論所有 Compass 帳戶已經能開啟。正式費用、可用容量和部署條件,仍應向官方確認,文章不自行補出未公布方案。

準備評估時,可以先挑公司擁有使用權的訓練片或會議錄影。每一題先由熟悉影片的人標出答案位置,並說明需要保留的前後文,讓結果有可比較的基準。

問題最好貼近實際查詢方式。員工可能記得「有人說新版先暫停」,卻不知道功能正式名稱。若題目都直接複製字幕中的原句,測到的就可能只是關鍵字對照。

也要納入沒有答案的題目。當某段會議沒有承諾交付日期,系統應能呈現證據不足,而非挑一段提到日期的片段,讓後續回答者誤以為找到承諾。

評估表可以記錄是否找到答案、片段邊界是否足夠、需要人工補看的時間,以及權限結果。這些是建議的驗收方式,並非本文已替任何企業完成的產品測試。

影片資料也有版本問題。同一門訓練可能保留去年與今年的錄影,兩段都回答相同問題,卻使用不同操作介面。檢索若只看相關性,使用者可能先看到已過時的教學。

所以資料整理應保存錄製日期、適用版本與內容擁有人,讓應用有條件判斷何者適用。這是導入時應建立的資料規則,不是本文宣稱新功能已自動解決所有版本衝突。

多人說話的錄影也需要核對身分。片段找到一句承諾之後,回答者若把它歸給錯誤的人,業務意義就會改變。必要時應讓結果直接呈現可回看的原始聲畫。

匯入之後的更新工作同樣要估算。新增影片、修正文字與撤除內容,都可能影響索引,團隊應確認從資料變動到搜尋反映之間需要多久。

這些條件會決定搜尋能否長期使用。只計較第一次示範省下幾分鐘,卻沒有維護資料與權限,原本可核對的證據也可能逐漸失去適用性。

搜得到之外,還要量算節省的人工作業和資料處理成本。

哪些影片值得先導入,哪些仍要人工逐段看

會議承諾與訓練說明有明確答案,適合先做定位評估,法律判斷則需要完整來源審閱。兩者都可能受益於快速搜尋,但不能使用同一個自動化批准標準。

訓練影片可以先從「某個操作如何完成」開始。若檢索結果能帶到正確示範,再保留版本日期,員工就比較容易確認找到的是仍然適用的教學。

會議紀錄則要注意決策是否在後段被更改。搜尋到一位成員提出上線日期,和全體最後同意該日期,是不同事件。問題集應包含這種容易混淆的情境。

媒體素材庫可能更重視可見物件、人物和事件順序。定位結果可以協助編輯縮短尋片時間,影片的重用權利、剪輯方式與素材授權仍要由原有流程處理。

我會優先讓這項功能替人找證據,再逐步評估能否替特定問題產生可靠摘要。若一開始就把找到片段等同完成決策,影片理解和業務責任之間的缺口很容易被忽略。

這次發布值得追蹤的是,企業知識開始從文件延伸到可核對的影片時刻。把搜尋定位與最後決策分工,才容易累積能持續改進的使用紀錄。

Cohere Compass 影片搜尋常見問題

台灣所有企業現在都可以直接使用嗎?

官方公告的是私人預覽與設計夥伴招募,沒有提供台灣全面開通的承諾。需要向官方核對帳戶、部署與資料處理條件,再安排試用。

搜尋結果能取代看原始影片嗎?

它可以縮小觀看範圍,並提供時間點與文字脈絡。重要承諾、法律或合規判斷仍應回原片,確認說話者、條件和後續修正。

第一批應該準備什麼資料?

先整理有權使用的錄影、常見問題與人工標記的答案片段,並留下看不到內容的測試帳戶。這比只匯入大量檔案,更容易判斷搜尋結果是否符合需求。

延伸閱讀:RAW-RAG 研究:保留原始對話就能改善 AI 記憶,六勝一敗該怎麼看?

延伸閱讀:語音 AI 代理只看逐字稿夠嗎?Tazo 的音訊決策層主張與論文證據怎麼讀

原始資料來源