OpenAI語音模型GPT-4o-transcribe、GPT-4o-mini-transcribe和GPT-4o-mini-tts的特點、定價和使用場景
Openai推出了新一代語音模型,為開發者提供更強大的語音交互能力,并支持語音智能體的開發。這些模型包括兩款語音轉文本模型(gpt-4o-transcribe和gpt-4o-mini-transcribe)以及一款文本轉語音模型(gpt-4o-mini-tts)。它們分別有什么特點呢?
1. GPT-4o-transcribe(語音轉文本模型)
特點:
高精度轉錄:經過大量多樣化、高質量音頻數據集的長時間訓練,能夠更好地捕捉語音的細微差別,減少誤識別,大幅提升轉錄可靠性。
適應復雜場景:對口音、語速、環境噪聲等具有很強的適應性,即使在背景嘈雜、說話人口音較重或語速較快的情況下,也能準確識別并轉錄語音內容。
長語音處理能力:能夠處理較長的語音輸入,適合需要長時間連續語音轉錄的場景。
使用場景:
會議記錄:將會議中的語音內容實時或事后轉錄為文本,方便會后整理和回顧,提高工作效率。
采訪記錄:在新聞采訪、人物訪談等場景中,快速準確地將采訪者的語音內容轉錄成文字,便于后續的編輯和發布。
語音筆記:將用戶的語音筆記轉錄為文本,方便用戶隨時查看和整理。
客戶呼叫中心:準確識別客戶語音,將其轉錄為文本,便于客服人員快速理解客戶需求并進行相應處理。
定價:
每100萬個音頻輸入tokens的價格為 $6.00,約合每分鐘 $0.006。
2. GPT-4o-mini-transcribe(語音轉文本模型的精簡版)
特點:
高效快速:模型體積更小,運算速度更快,能夠在短時間內完成語音轉錄任務。
資源占用低:對硬件資源的要求相對較低,適合在資源有限的設備上運行。
性價比高:雖然單詞錯誤率(WER)稍高于完整版模型,但仍優于原有的 Whisper 模型。
使用場景:
移動設備語音輸入:在智能手機、平板電腦等移動設備上,為用戶提供快速的語音輸入轉錄功能,例如語音輸入文字消息。
小型語音應用:適用于一些對轉錄精度要求相對不高,但需要快速響應的小型語音應用,如語音指令識別、簡單的語音筆記等。
資源受限的環境:在計算資源有限的場景下,如一些小型企業或個人開發者的項目中,提供高效且成本較低的語音轉錄解決方案。
定價:
每100萬個音頻輸入tokens的價格為 $3.00,約合每分鐘 $0.003。
3. GPT-4o-mini-tts(文本轉語音模型)
特點:
可引導性:首次支持“可引導性”,開發者不僅可以指定模型“說什么”,還能控制“怎么說”。例如可以預設語音風格為“平靜”“沖浪者”“專業的”“中世紀騎士”等,還能根據指令調整語音風格,如“像富有同情心的客服 Agent 一樣說話”。
自然流暢的語音:生成的語音自然流暢,富有表現力,能夠根據文本內容和預設的風格進行相應的語音表達。
多語言支持:支持多種語言的文本轉語音,滿足不同語言用戶的需求。
使用場景:
有聲讀物:將文字書籍、文章等轉換為有聲內容,為用戶提供更加生動有趣的閱讀體驗。
智能客服:為智能客服系統提供語音合成功能,使客服機器人能夠以自然、富有表現力的聲音與用戶進行交流,提升用戶體驗。
語音播報:在新聞播報、天氣預報、交通廣播等場景中,將文本內容轉換為語音進行播報。
定價:
每100萬個文本輸入tokens的價格為 $0.60,每100萬個音頻輸出tokens的價格為 $12.00,約合每分鐘 $0.015。
GPT-4o-transcribe等模型已通過OpenAI的API接口向開發者開放,集成到應用程序中非常便捷,僅需少量代碼。開發者可以根據功能和環境需要選擇適合自已的模型,也可以到官網體驗。
官網:http://open ai.fm/
博客:https://openai.com/index/introducing-our-next-generation-audio-models/