GPT-4.1系列相比GPT-4o有哪些改進和區別?
Openai 昨晚發布了 GPT4.1 系列,GPT4.1 替代了 4o,性價比超高(在 OpenAI 體系內)。 具備 1M 超長上下文,性能出色,4.1 nano 和 mini 版本價格實惠,適合處理大量長文本任務。 代碼能力超越 GPT 4.5,但不及 o1 等推理模型,GPT-4.1 在多個方面相較于 GPT-4o 有明顯的提升,以下是他們的主要區別:
1. 性能提升
編碼能力:
GPT-4.1:在 SWE-bench Verified 編碼基準測試中得分為 54.6%,比 GPT-4o 提高了 21.4%。
GPT-4o:在相同測試中得分為 33.2%。
改進:GPT-4.1 在處理代碼倉庫、完成任務以及生成可運行并通過測試的代碼方面表現出色。
指令遵循:
GPT-4.1:在 Scale 的 MultiChallenge 基準測試中得分為 38.3%,比 GPT-4o 提高了 10.5%。
GPT-4o:在相同測試中得分為 27.8%。
改進:GPT-4.1 在遵循復雜指令、格式化輸出、避免錯誤行為等方面表現更好。
長文本理解:
GPT-4.1:在 Video-MME 長文本理解基準測試中得分為 72.0%,比 GPT-4o 提高了 6.7%。
GPT-4o:在相同測試中得分為 65.3%。
改進:GPT-4.1 在處理長視頻(無字幕)和長文檔時,能夠更好地理解和提取關鍵信息。
2. 上下文窗口
GPT-4.1:支持 100 萬 token 的上下文窗口,比 GPT-4o 的 12.8 萬 token 大幅增加。
GPT-4o:支持 12.8 萬 token 的上下文窗口。
改進:GPT-4.1 能夠處理更大的代碼庫、多文檔任務和長文本,適用于法律、編程、客戶支持等多個領域。
3. 模型效率
GPT-4.1:在推理效率上有顯著提升,延遲更低,成本更低。
GPT-4.1 mini:延遲降低了近一半,成本降低了 83%。
GPT-4.1 nano:是最快的模型,延遲極低,適用于低延遲需求的任務。
GPT-4o:在推理效率上相對較低,尤其是在處理大規模上下文時。
4. 圖像理解
GPT-4.1:在圖像理解方面表現出色,特別是在多模態任務中。
GPT-4.1 mini:在 MMMU 圖像理解基準測試中得分 72.7%,優于 GPT-4o 的 68.7%。
GPT-4o:在圖像理解任務中表現較弱。
5. 成本
GPT-4.1:每百萬輸入 token 收費 $2.00,輸出 token 收費 $8.00。
GPT-4.1 mini:每百萬輸入 token 收費 $0.40,輸出 token 收費 $1.60。
GPT-4.1 nano:每百萬輸入 token 收費 $0.10,輸出 token 收費 $0.40。
GPT-4o:每百萬輸入 token 收費更高,具體未明確,但 GPT-4.1 系列在成本上更具優勢。
6. 應用場景
GPT-4.1:適用于需要強大計算能力和復雜任務處理的場景,如專業軟件開發、法律文檔分析、大規模數據處理等。
GPT-4.1 mini:適合在資源受限的環境中使用,如普通個人電腦、小型服務器等。
GPT-4.1 nano:主要針對移動端和嵌入式設備,適用于對響應速度要求高且資源受限的場景,如快速文本分類、自動補全等。
GPT-4o:適合一般用途,但在處理大規模上下文和復雜任務時表現較弱。
更多測試指標請參考 OpenAI 博客:https://openai.com/index/gpt-4-1/。