Voxtral 3 是什麼?Mistral 語音轉錄、語音生成與代理 API 的價格與限制

Voxtral 3 是 Mistral 在 2026 年 10 月 20 日推出的語音模型家族,包含轉錄、語音生成與語音代理 SDK。本文整理價格、語言支援、官方基準的對手與條件,以及導入前要先測的限制。

Share
Mistral 官方 Voxtral 3 部落格的藍色方塊主視覺
Mistral 官方 Voxtral 3 部落格主視覺圖片,非本站拍攝/實測。 圖片來源:官方原文。

客服電話打進來,來電者帶著口音、說到一半停頓,語音代理卻要聽懂、查出資料、替對方訂好時段,還要用自然的語氣接話。Mistral 在 2026 年 10 月 20 日推出的 Voxtral 3,鎖定的就是這種流程,官方宣稱每一回合在一秒內完成。

它是一組模型,包含兩個離線轉錄模型、一個即時轉錄模型、一個語音生成模型,另外加上一套語音代理 SDK。SDK 是軟體開發套件,工程師可以少寫許多串接程式,直接把聽、想、說接成一條線。

Mistral 官方 X 帳號在 10 月 20 日 16:00 UTC 發文介紹,換算成台灣時間是 10 月 21 日凌晨 0 點。我查詢時貼文有 2,500 個讚、約 14.8 萬次瀏覽,所以討論度不低。

但貼文只寫了「state-of-the-art」,也就是同類最佳,條件得回官方部落格與文件才查得到。查完之後會發現,轉錄成績有領先也有並列,即時轉錄在官方自己的圖表裡還輸給 Gemini 3.5 Realtime Transcribe。

語音生成的情況比較複雜,官方圖表上多語言與表現力的分數和 ElevenLabs 只差零點幾分,但專測數字與專有名稱的題目落後約 18 個百分點,價格則是每百萬字元 13 美元。

價格因此成為 Voxtral 3 最容易感受到的優勢,語音代理 API 搭配 Mistral Small 4 推理,每分鐘只要 0.04 美元。

我的判斷是,已經在做多語客服、會議轉錄或語音助理的開發團隊,現在就值得拿它跑一輪比價與錯誤率測試。需要穩定中文口語表現、離線自架權重,或已經綁定電話系統的團隊,則要先確認幾個條件再決定。

這些條件分散在不同頁面,官方頁面之間的數字也不完全一致,所以要先弄清楚每個模型各自負責什麼。

Voxtral 3 是什麼?三種模型加一套語音代理 SDK

Voxtral 3 由轉錄、語音生成與語音代理三塊組成。官方文件把模型頁都標成 2026 年 10 月 20 日釋出的 3.0 版,狀態是 Public Preview,也就是公開預覽。

以下我把官方價格與語言數一次列出,方便後面對照。

模型 用途 官方價格 語言數(官方語言頁)
Voxtral Small Transcribe 3 離線轉錄,最高準確度 每分鐘 0.004 美元 50 種
Voxtral Mini Transcribe 3 離線轉錄,約 4B 參數 每分鐘 0.0035 美元 50 種
Voxtral Mini Transcribe Realtime 3 即時轉錄,WebSocket 串流 每分鐘 0.008 美元 45 種語言與方言
Voxtral TTS 3 語音生成,離線與即時共用 API 每百萬字元 13 美元 35 種語言、50 多種方言
語音代理 API 聽、想、說一條龍 每分鐘 0.04 美元起 依各階段模型而定

語音代理 API 的 0.04 美元是搭配 Mistral Small 4 推理的價格,換成其他推理模型是 0.08 美元。表格裡最便宜的是離線轉錄,一小時錄音用 Mini 約 0.21 美元,用 Small 約 0.24 美元,這是我依官方每分鐘價格相乘的結果。

即時轉錄每分鐘 0.008 美元,是離線的 2 到 2.3 倍,但它內建斷句判斷。這個功能叫語句結束偵測,語音代理要靠它決定什麼時候該開口。

不是每一項都比上一代便宜。官方價格頁同時列出舊版,Voxtral TTS 從每百萬字元 16 美元降到 13 美元,Voxtral Mini Transcribe 2 卻是每分鐘 0.003 美元,Mini 3 漲到 0.0035 美元。

Small 與 Mini 的差別在準確度與成本。官方說 Small 是旗艦轉錄與說話者分離模型,Mini 約 4B 參數,小到能放進資源有限的環境。

兩者都支援情境提示,也就是先把專有名詞交給模型,降低它聽錯的機會。即時版的串流延遲可以由開發者設定,官方模型頁寫的範圍是 80 到 2,400 毫秒。

語音生成模型提供預設聲音,也能用一段錄音複製聲音。官方文件列出 34 種情緒標籤與兩種語速標籤,開發者可以在文字中間逐字指定語氣,比舊版把每種情緒做成不同聲音更好調整。

語音代理 SDK 架在 LiveKit 之上,這是一套開源的即時音訊傳輸工具。官方說聽、想、說是三個獨立模型,所以可以換掉推理用的語言模型,不必重寫整個代理。

模型本身運行在 Mistral 的伺服器,使用者的程式負責收音與播放。電話場景比較特別,官方文件寫明 SIP 電話串接在上線時只開放給企業客戶,要透過客戶團隊申請。

先搞清楚元件,才看得懂官方拿什麼數字證明它夠好。

Mistral 官方 Voxtral 3 部落格的藍色方塊主視覺
Mistral 官方 Voxtral 3 部落格主視覺圖片,非本站拍攝/實測。 圖片來源:官方原文。
Mistral 官方頻道 Voxtral 3 發表影片,非本站實測。 來源:官方 YouTube。

Voxtral 3 轉錄成績怎麼讀?Small 與 Microsoft 並列,即時版輸給 Gemini 3.5

官方部落格的轉錄圖表顯示,Voxtral Small Transcribe 3 領先 Whisper large-v3 與 GPT Transcribe,但和 Microsoft AI Transcribe 2 打成平手。要看懂這句話,得先知道錯誤率怎麼算。

字詞錯誤率是辨識結果中錯字、漏字與多字的比例,數字愈低愈好。日文、韓文、泰文與中文官方改用字元錯誤率,其他語言用字詞錯誤率,評測資料是 FLEURS 這套多語言朗讀語料。

官方取七個模型都支援的 45 種語言做平均。「指定語言」是事先告訴模型說的是哪種語言,「自動偵測」則讓模型自己判斷。

模型 指定語言的錯誤率 自動偵測的錯誤率
Voxtral Small Transcribe 3 4.0% 4.1%
Microsoft AI Transcribe 2 4.0% 4.1%
Voxtral Mini Transcribe 3 4.5% 4.6%
Gemini 3.5 Transcribe 4.5% 6.1%
Scribe v2 4.9% 4.9%
GPT Transcribe 5.6% 6.3%
Whisper large-v3 14.9% 16.0%

所以「領先」要看對手。對 Whisper 領先很多,對 Microsoft 只是並列。改成自動偵測語言後,Gemini 3.5 Transcribe 升到 6.1%,Voxtral 的優勢才拉開。

有一處官方說法互相對不上。Small 的模型頁寫它勝過 Microsoft AI Transcribe 2,但部落格的 FLEURS 圖是並列,下一張圖裡 Microsoft 的分數還略好。

下一張圖引用 Artificial Analysis 的 WER 指數,由 VoxPopuli、Earnings-22 與 AgentTalk 三組資料加權,數字愈低愈好。圖上共有三十多個系統,我只挑文中出現過的對手。

我從官方圖表的資料讀出,Fun-Realtime-ASR-preview 是 1.73,Microsoft AI Transcribe 2 是 2.04,Voxtral Small 是 2.10,排第三。Scribe v2 是 2.18,Voxtral Mini 是 2.22。

更後面的 Gemini 3.5 Transcribe 是 2.60,GPT Transcribe 是 3.31,Whisper large-v3 是 4.07。

所以這張圖裡 Voxtral Small 沒有拿第一,但比上一代 Voxtral Mini Transcribe 2 的 3.59 明顯進步。

說話者分離要標出「誰在什麼時候說了什麼」,指標是串接最小排列錯誤率,數字同樣愈低愈好。Small 是 18.4%,Mini 是 18.6%,Pyannote 是 19.0%。

Microsoft 是 20.3%,Scribe v2 是 23.0%,Gemini 3.5 Transcribe 是 38.4%。Voxtral 比上一代的 30.9% 降了約四成,這是我用官方圖表相除的結果。

但 Voxtral 和 Pyannote 只差 0.6 個百分點,換一份資料就可能翻轉,所以我只把它讀成「同一個等級」。

情境提示的效果則最容易在日常工作用到。官方用 Earnings-22 財報電話會議資料測關鍵詞召回率,Small 沒給提示時是 81.4%,提供詞表後升到 94.6%。

Scribe v2 從 84.0% 升到 94.3%,Gemini 3.5 Transcribe 從 80.9% 升到 87.3%。

所以沒給詞表時 Scribe v2 還略高,給了詞表後兩者幾乎相同。在這張圖裡,詞表帶來的提升比三個模型之間的差距更大。官方說明詞表裡混了 0 到 100 個干擾詞,所以實際效果要看你的詞表準不準。

即時轉錄要另外讀。官方用 35 種語言的 FLEURS 子集,把 Voxtral 即時版在不同串流延遲下的錯誤率,和其他即時模型並排。

模型與設定 錯誤率
Voxtral Mini Transcribe 3(離線基準) 4.0%
Gemini 3.5 Realtime Transcribe 4.2%
Voxtral Mini Realtime 3,延遲 2,400 毫秒 5.7%
Microsoft AI Transcribe 2 Streaming 5.8%
Voxtral Mini Realtime 3,延遲 960 毫秒 6.0%
Voxtral Mini Realtime 3,延遲 480 毫秒 6.4%
Voxtral Mini Realtime 3,延遲 240 毫秒 7.4%
GPT Live Transcribe 8.4%
Scribe v2 Realtime 8.7%

所以 Voxtral 即時版在官方自己的圖上,比 GPT Live 與 Scribe 準,和 Microsoft 接近,輸給 Gemini。圖表沒有替 Gemini 標示延遲設定,因此這個比較並不完全對等。

部落格寫的「500 毫秒以內」,在圖上最接近的設定是 480 毫秒,錯誤率 6.4%,比離線 Mini 的 4.0% 高出 2.4 個百分點。官方文件解釋,延遲愈短,模型能參考的後續聲音就愈少,所以準確度會下降。官方即時轉錄文件建議的起始設定正好是 480 毫秒。

要用在客服對話,必須在自己的資料上確認 6% 上下的錯誤率能不能接受。

另外還有一個容易漏掉的細節。這份 35 種語言的即時評測清單沒有中文,圖說卻提到中文改用字元錯誤率,兩者對不上。語言頁雖然說即時模型支援 45 種語言與方言,我在查到的頁面裡找不到完整名單,所以中文即時轉錄的實際表現要自己測。

延伸閱讀:Mistral AI 推出 Voxtral TTS!跟 ElevenLabs 正面對決

轉錄之後,輪到語音生成與整條代理管線的成本與延遲。

Voxtral 3 語音生成與代理 API:每分鐘 0.04 美元買到什麼?

語音生成的賣點是用幾分之一的價格換到接近的品質,官方用四張品質對價格的散點圖支持這句話,但四張圖的結論並不一致。這四張圖都要先看評測口徑。

Voice Code Bench 的題目由 BeSimple AI 製作,專門測客服最怕出錯的數字與專有名稱,共 300 句英文提示,每個系統兩種聲音。

評審模型是 gemini-3.8-flash,價格取自各家定價頁,資料日期是 2026 年 10 月 20 日。圖上共 16 個系統,下表只列分數或價格最接近的五個。

系統 忠實片段比例 每百萬字元價格
Eleven v4 98.3% 80 美元
Eleven v4 Turbo 97.5% 40 美元
Voxtral TTS 79.7% 13 美元
Inworld TTS-2 77.3% 25 美元
Inworld TTS-2 Flash 75.0% 15 美元

所以在這個專測數字與名稱的題目上,ElevenLabs 高出約 18 個百分點,但價格是 Voxtral 的 3 到 6 倍。在價格不高於 13 美元的模型裡,Voxtral 的分數最高,只是沒有追上最貴的那一組。

另外三張圖是 Mistral 的內部評測,題目由 Mistral 自己挑選。發音控制題用 300 句含罕見或自創詞的英文,Voxtral 是 86.8%,Inworld TTS-2 是 81.8%,Eleven v4 是 68.2%。

這題讓評審對照目標詞的音標來聽,官方文件沒有記載發音控制的系統只列在資料中,沒有畫在圖上。

多語言題取 11 種語言,由評審模型打 1 到 5 分,Eleven v4 是 3.17,Voxtral 是 3.16,Eleven v4 Turbo 是 3.15。英文表現力題則是 Eleven v4 的 3.17 對上 Voxtral 的 3.13。

差距只在小數點後第二位,圖表說明也沒有附信賴區間,所以我只把它讀成「品質在同一個等級」,不推論誰更好聽。聽感最後仍要靠自己的耳朵與目標聽眾。

語音代理 API 才是這次最完整的產品。每一回合依序經過語句結束偵測、轉錄、語言模型、工具與語音生成,使用者從停下來到聽見回答的時間,是這些階段相加。

官方部落格說各階段不必等前一段完成,所以每回合在一秒以內。

但延遲文件說這些階段串成一條鏈,延遲逐段相加,還提醒模型延遲與端到端延遲是兩個數字,後者包含網路與你的程式。所以「一秒以內」只是 Mistral 的描述,你的客服線路會得到多少,得自己量。

價格方面,用 Mistral Small 4 推理時是每分鐘 0.04 美元。我依官方價格換算,若每月有 1,000 通平均 5 分鐘的電話,整通都計費的話約 200 美元,換成其他推理模型是 400 美元。

我讀過的頁面裡沒有看到計費粒度的說明,所以這只能當估算。這個價格也不包含你自己的資料庫、工單系統或電話線路費。

官方文件列出的內建工具有網路搜尋、文件庫與工作區連接器,自己的函式則在你的程式裡執行。

要特別注意電話場景。官方文件說明,電話上沒有你的程式在執行,所以放在用戶端的工具會失敗,電話代理只能用伺服器端工具。訂位或查帳這類動作,得在設計階段就寫成伺服器端工具。

即時轉錄還有一個限制。同一個即時工作階段不能同時開啟說話者分離與語句結束偵測,兩者同時設定會回傳錯誤,需要兩者的場景必須拆成不同工作階段。

延伸閱讀:Mercury Voice 主打 320 毫秒開始回答:語音 AI 變快,不能只看模型那一段

了解流程與成本之後,導入前還有幾件事要先核對。

導入 Voxtral 3 前先核對:語言、授權、部署與舊版遷移

導入的第一個檢查點,是官方頁面對同一件事的說法並不一致。我把部落格、模型頁與語言頁、限制頁並排,差異如下。

項目 官方部落格 模型頁 語言頁與限制頁
語音生成語言 35 種以上、50 多種方言 寫 9 種語言 35 種、50 多種方言
即時轉錄語言 內文寫 35 種以上,模型卡寫 40 種以上 未列數字 45 種語言與方言
即時延遲 500 毫秒以內 80 到 2,400 毫秒可設定 限制頁:80 到 1,200 毫秒的整數,或 2,400 毫秒

模型頁寫「9 種語言」,疑似沿用 3 月 Voxtral TTS 的文字,當時官方寫的正是 9 種語言。這是我的推測,我沒有看到官方說明原因,但 9 種和 35 種不可能同時正確,即時轉錄的 35、40、45 種也一樣。

延遲的三個說法則不互相衝突,模型頁寫的是範圍,限制頁才交代實際只接受哪些值,部落格的 500 毫秒以內是官方對整體表現的描述。

遇到這種情況,語言頁最像最新規格,因為它同時列出各模型的範圍。不過規格頁也可能更新不同步,所以實際導入前,應該用自己的語料逐語言測試,而不是只看數字。

授權與自架是第二個檢查點。官方部落格寫可以用 Mistral 的歐洲託管 API,也可以部署在自己的基礎設施,但要在地端或私有雲跑完整堆疊,頁面寫的是聯絡 Mistral 團隊。

我在 Hugging Face 的 Mistral 帳號搜尋 Voxtral,只看到 2025 到 2026 年的舊版,沒有 Voxtral 3 的公開權重。

舊版的授權也不一樣。Voxtral-Mini-4B-Realtime-2602 是 Apache 2.0,Voxtral-4B-TTS-2603 則是 CC BY NC 4.0,後者限定非商業用途。

所以 Voxtral 3 的權重若日後公開,授權條款需要重新確認,不能直接沿用舊版的印象。

API 的託管位置有歐洲、美國與全球三種端點,官方也強調使用者可以控制音訊是否保留。資料主權對歐洲企業是賣點,對台灣團隊則要回到自己的隱私政策,確認音訊送往哪個地區是否合規。

第三個檢查點是舊版遷移。官方有專門的遷移頁,列出 Voxtral 2 到 Voxtral 3 的模型對照。最容易讓程式出錯的一項,是字詞級時間戳已經移除,要求 word 會回傳 400 錯誤,只能改用片段級時間戳。

即時轉錄的設定也變嚴格。所有設定必須在第一段音訊送出前一次寄完,之後再更新會收到錯誤事件。說話者分離的結果可能出現片段重疊,顯示介面要能同時保留兩段。

聲音複製的規則也值得先讀。官方文件寫零樣本複製只需要一小段錄音,專業聲音複製則建議 30 分鐘到 3 小時的素材。複製他人的聲音前,應該先取得本人同意,這是我的建議,不是官方條文。

這幾件事確認後,才能判斷自己屬於哪一類使用者。

適合誰、不適合誰

適合先試的,是已經有語音客服、會議紀錄或語音助理需求,並想壓低每分鐘成本的開發團隊。它的價格與 SDK 組合,可以讓你用同一個供應商搭出完整原型。

也適合需要多語言、說話者分離與專有名詞詞表的轉錄工作。這幾項在官方圖表上都有領先或並列的成績,而且 Small 與 Mini 的價格差距小,可以用同一批音檔比兩種準確度。

不適合直接採用的,是必須自架權重、不能把音訊送到外部 API 的團隊。目前沒有公開權重,官方只寫完整堆疊要聯絡 Mistral 團隊,沒有列出地端部署的價格。

中文口語為主、即時轉錄是核心功能的團隊,也要保留測試時間。即時模型的 35 種語言評測沒有中文,離線評測雖然有中文,我也沒有在官方頁面看到針對台灣口音與繁體輸出的數字。

導入順序建議先用離線 Mini 轉錄跑自己的樣本,確認詞表效果,再開即時模型測延遲設定,最後才把語音代理接到電話。因為每一步的失敗原因不同,分開測才找得到問題。

Voxtral 3 的限制與風險

最需要先認清的,是所有圖表都由 Mistral 自己發布,測試設定由廠商挑選。

轉錄用的是 FLEURS 公開資料集與 Artificial Analysis 的指數。語音生成的四張圖中,Voice Code Bench 的題目由 BeSimple AI 製作,其餘三張標示為內部評測,四張的評審都是另一個語言模型,圖說也沒有交代是誰執行測試。

評審模型有自己的偏好,這是這類評測共通的限制。所以這些圖適合用來決定「值不值得測」,不適合直接當成採購依據。

模型狀態是 Public Preview,官方文件的個別頁面也提醒,部分功能在上線時尚未開放,例如語音生成的整體風格指令。預覽版日後可能調整介面與價格,這是我的提醒,不是官方說法,重要專案要預留變更空間。

電話整合只對企業客戶開放,要走客戶團隊。這讓小團隊很難驗證端到端的電話體驗,只能先用網頁或本機 SDK 測試。

延遲與準確度之間有取捨。官方文件寫得很直接,語句結束偵測沒有一個設定可以同時避免打斷人與回得太慢。收集地址與訂單編號這類會停頓的內容,要偏向晚一點結束,快問快答的語音選單則偏向早一點。

聲音複製帶來冒用風險。語音生成用在客服或行銷時,聽眾可能不知道對方是 AI,所以要先確認所在地法規與平台規則是否要求揭露,這點模型頁沒有替使用者決定,需要導入的團隊自己處理。

最後是成本估算的不確定。我換算的每月費用只含官方列出的每分鐘價格,沒有包含你的雲端運算、通話線路、儲存與人工覆核,真正的總成本要在小規模試跑後才看得出來。

導入時最容易卡住的問題,集中在語言、價格、自架與舊版升級,這些在常見問題裡一次回答。

Voxtral 3 常見問題

Voxtral 3 可以用在中文語音轉錄嗎?

官方離線評測的 45 種語言包含中文,語音生成也列出中文(普通話)預設聲音。但我搜尋官方部落格與文件頁,沒有看到台灣口音或繁體輸出的專門數字,即時轉錄的 35 種語言評測清單也沒有中文,所以要用自己的錄音測試。

Voxtral 3 的價格怎麼算?

離線轉錄是 Mini 每分鐘 0.0035 美元、Small 每分鐘 0.004 美元。即時轉錄每分鐘 0.008 美元,語音生成每百萬字元 13 美元,語音代理 API 每分鐘 0.04 美元起。

Voxtral 3 能自己架在公司內部嗎?

官方說可以在自己的基礎設施部署,但完整堆疊要聯絡 Mistral 團隊。我查詢時 Hugging Face 上沒有 Voxtral 3 的公開權重,所以目前不能自行下載使用。

從 Voxtral 2 升級要改什麼?

要換成新的模型代號,字詞級時間戳改為片段級,即時工作階段的設定要在第一段音訊前一次送完。語音生成的情緒也從不同聲音改為文字內的標籤。

先用自己的音檔測過,再決定要不要換

Voxtral 3 把轉錄、語音生成與語音代理放進同一個 API,價格明確,官方圖表也交代了對手與條件。對想壓低語音功能成本的團隊,這是一個值得認真比較的選項。

但領先與並列要分開看,即時版的準確度、中文表現與電話整合都需要自己驗證。建議先拿一批真實錄音,比較錯誤率、延遲設定與專有名詞詞表的效果,再決定是否把代理接到正式線路。

想持續追蹤語音 AI 與代理的新發展,可以免費訂閱 AI 郵報,也可以回到官方文件核對價格與語言清單是否更新。

資料來源