GPT-4o是OpenAI為聊天機器人ChatGPT發布的一款多模態大模型,于2024年5月14日發布。其中“o”代表“omni”,該詞意為“全能”,源自拉丁語“omnis”
GPT-4o模型可以接收文本、音頻和圖像的任意組合作為輸入,并實時生成文本、音頻和圖像的任意組合輸出。GPT-4o可以在短至 232 毫秒的時間內響應音頻輸入,平均為 320 毫秒,與人類的響應時間相似。性能方面,在傳統基準測試中,GPT-4o在文本、推理和編碼等方面實現了與GPT-4 Turbo級別相當的性能,同時在多語言、音頻和視覺功能方面的表現分數也創下了新高。
相較于2023年11月推出的GPT-4 Turbo,GPT-4o在處理速度上提升達到200%,同時在價格上也下降了50%,并分階段集成至OpenAI的各個產品之中。ChatGPT的免費用戶也可以通過GPT-4o模型,進行數據分析、圖像分析、互聯網搜索、訪問應用商店等操作。2024年5月14日,GPT-4o向ChatGPT Plus和Team的客戶全面推出。當地時間5月15日,OpenAI聯合創始人兼首席執行官山姆·奧特曼稱,GPT-4o的文本模式已經發布,但語音模式還未發布。5月20日,微軟推出GPT-4o加持的AI PC(人工智能個人電腦)系列。美國東部時間6月10日,蘋果公司宣布與OpenAI合作,會把ChatGPT集成在蘋果系統生態中,由最新的GPT-4o驅動。美東時間7月18日,Open AI發布了大模型GPT-4o mini,具備文本、圖像、音頻、視頻的多模態推理能力。8月,GPT-4o新版本上線,在輸入和輸出分別節省50%和33%花費的情況下,能力得到全方位提升,在ZeroEval基準測試中排名世界第一。
發展歷程
2024年5月14日,OpenAI(美國人工智能研究公司)在線上舉辦“春季更新”活動。在活動中,OpenAI發布了新旗艦模型“GPT-4o”。同日,GPT-4o向ChatGPT Plus和Team的客戶全面推出。與現有模型相比,GPT-4o展現出了其在視覺和音頻理解方面的出色技能。和GPT-4相比,GPT-4o的最大區別在于,所有模態都集成在一個模型中,多模態整合更精細,延遲僅300毫秒左右,同時能夠感知情緒、語氣、表情,實現更自然的交互,這需要數據組織能力、聚焦突破能力、工程優化能力,也擴大了人們對于交互的想象空間。OpenAI沒有推出搜索引擎,但是基于ChatGPT或GPT-4o,未來人類獲得信息的方式很可能會改變,GPT-4o或為OpenAI開啟了一個超級入口。當地時間5月15日,OpenAI聯合創始人兼首席執行官山姆·奧特曼稱,GPT-4o的文本模式已經發布,但語音模式還未發布。5月20日,微軟推出GPT-4o加持的AI PC(人工智能個人電腦)系列,微軟高管們將其稱為“史上最強、最智能的Windows PC”。
當地時間2024年6月10日,蘋果公司宣布與OpenAI合作,會把ChatGPT集成在蘋果系統生態中,由最新的GPT-4o驅動。6月19日,OpenCompass發布了首個大模型高考全卷評測結果,OpenAI的GPT-4o排名第二,得分296分(語數外三科加起來的滿分為420分)。美東時間7月18日,Open AI在官網發布了大模型GPT-4o mini,具備文本、圖像、音頻、視頻的多模態推理能力。GPT-4o mini已取代了GPT-3.5 Turbo。GPT-4o mini的性能比GPT-4好,但API的價格卻下降了60%,每100萬tokens的輸入為15美分,每100萬tokens的輸出為60美分。8月,GPT-4o新版本上線,在輸入和輸出分別節省50%和33%花費的情況下,能力得到全方位提升,在ZeroEval基準測試中排名世界第一。最新版模型“GPT-4o-2024-08-06”在JSON模式評估中,得分100%。相比之下,2023年6月的版本得分還低于40%。在代碼編輯方面,最新版本的基準得分和此前版本相同,但是現在成本只有原來的一半。同時,新版本也是OpenAI在圖像輸入上最便宜的型號。
2025年2月,OpenAI首席執行官Sam Altman宣布GPT 4o升智,智力達到o3 pro水平。3月25日,OpenAI宣布推出GPT-4o圖像生成功能,把先進圖像生成器集成至GPT-4o。ChatGPT和Sora平臺的各類用戶計劃陸續體驗該功能,企業版與教育版也計劃接入該功能具有精準文本渲染、嚴格遵循指令、深度調用知識及對話上下文等特點,還能對上傳圖像進行二次創作等。
2025年4月11日,OpenAL宣布ChatGPT昨日移除GPT-4模型,全面升級至新型原生多模態模型GPT-4o,但仍在APl中使用,GPT-4o在寫作質量、編程輔助、STEM領域全面超越GPT-4模型,并升級改善了GPT-4o的指令遵循、問題解決和對話流程。
功能和服務
GPT-4o所有功能包括視覺、聯網、記憶、執行代碼以及GPT Store等,對所有用戶免費開放。
應用領域
ChatGPT的用戶(包括免費用戶)可以用GPT-4o模型(更新前只能使用GPT-3.5),來進行數據分析、圖像分析、互聯網搜索、訪問應用商店等操作。
產品命名
GPT-4o的“o”代表“omni”。該詞意為“全能”,源自拉丁語“omnis”。在英語中“omni”常被用作詞根,用來表示“全部”或“所有”的概念,凸顯了其多功能的特性。
相關評價
GPT-4o的發布有望掀起新一輪全球AI浪潮,人工智能AIETF(515070)、機器人ETF(562500)等AI產業鏈相關產品有望受催化。(上海第一財經傳媒有限公司評)
相關事件
AI大模型高考全卷評測排名
2024年6月19日, 上海人工智能實驗室旗下司南評測體系OpenCompass發布了首個大模型高考全卷評測結果。語數外三科加起來的滿分為420分,此次高考測試結果顯示,阿里通義千問2-72B排名第一,為303分;OpenAI的GPT-4o排名第二,得分296分;上海人工智能實驗室的書生·浦語2.0排名第三,三個大模型的得分率均超過70%。從結果來看,大模型的語文、英語考試水平普遍不錯,但數學都不及格。從單科成績看,GPT-4o的語文得分為111.5分,排第三;GPT-4o的數學得分為73分,排第二;GPT-4o的英語得分為111.5分,排第一。
6月24日,在極客公園最新發布的高考新課標Ⅰ卷大模型評測報告中,GPT-4o 以562分排名文科總分第一。本次評測默認所有大模型的聽力都獲得30分滿分。閱讀和語言運用兩項,GPT-4o獲得80分滿分。在40分的寫作考試中,GPT-4o獲得最高分29分。在由歷史、地理、政治組成的新課標文綜考卷評測中,GPT-4o獲得237分的成績,平均分達到79分。政治考試中,GPT-4o獲得了88分的最高分。地理考卷GPT-4o得到最高分68分。河南省高考分數段統計數據顯示,本次大模型高考評測與河南省考卷完全相同,河南高考錄取分數線顯示,文科本科一批錄取分數線為521分,GPT-4o在文科考生中排名8811名,相當于人類考生的前2.45%。所有大模型在數學、物理、化學等數理學科上都無法達到及格水平,大模型的理科最好成績還無法進入人類考生的前30%。以數學試卷為例,9款大模型產品中,GPT-4o、文心一言4.0和豆包獲得60分以上成績(滿分150分),化學和物理試卷,各模型平均分分別是34分和39分(滿分為100和110)。化學單項最高分由豆包獲得,成績為49.5分,GPT-4o為42分。
失控行為首次公開
當地時間2024年8月8日,OpenAI在其官網發布了GPT-4o的安全技術報告,報告詳盡闡述了研究人員在GPT-4o發布前進行的安全防護與風險評估工作。報告指出,GPT-4o的整體風險評級為“中等”。報告還首次揭示了GPT-4o的若干失控行為,諸如模仿用戶聲音、發出怪異的尖叫等。此外,OpenAI還表示,用戶在使用GPT-4o語音模型時,可能會對其產生感情上的依戀。
參考資料 >
重磅!類人速度超快語音響應!OpenAI推出新旗艦模型GPT-4o,圖文音頻手機AI搞定.四川經濟網國際頻道.2024-05-14
ChatGPT火爆背后有何法律風險?.法制網.2023-02-16
“ChatGPT”會不正常嗎?歐盟欲設制度規范其使用.看看新聞.2023-02-16
ChatGPT會影響到人類社會嗎.人民政協網.2023-02-16
?風口上的AI聊天機器人.手機中國網.2023-02-16
ChatGPT發布一周年之際 人工智能革命才剛剛開始.新浪財經.2023-12-11
3分鐘速覽OpenAI春季發布會:GPT-4o炸裂登場!聽說讀寫絲滑如真人.科創板日報.2024-05-14
OpenAI新模型GPT-4o“炸裂登場”.百家號.2025-03-12
OpenAI發布免費新品GPT-4o:可對音頻、視覺和文本實時推理,與人自然對話,功能秒殺Siri.澎湃新聞.2025-05-04
環球視角:OpenAI推出新一代AI模型GPT-4o.環球科技.2024-05-14
OpenAI發布全新生成式 AI 模型GPT-4o:語音對話更流暢,免費提供.IT之家.2024-05-14
OpenAI推出新旗艦模型GPT-4o “屬于每個人的云端情人來了”.上游新聞.2024-05-14
GPT-4o!OpenAI推出新款人工智能模型.東方財富網.2024-05-14
環球視角:OpenAI推出新一代AI模型GPT-4o.環球網科技.2024-05-14
OpenAI山姆·奧特曼:新款語音模型GPT-4o尚未發布.界面新聞.2024-06-16
挑戰蘋果!微軟推出最新大模型加持的Windows筆記本,號稱史上最智能.澎湃新聞-今日頭條.2024-05-21
蘋果官宣ChatGPT集成于全系統生態.新浪科技-新浪微博.2024-06-11
Vision Pro將在中國開賣,起售價近3萬.每日經濟新聞-今日頭條.2024-06-11
利空突襲!大跌超500點.今日頭條.2024-07-19
GPT4o更新絲滑解決9.11和9.9誰大,更強也更便宜了.百家號.2024-08-07
解讀|GPT-4o為OpenAI開啟超級入口,對谷歌形成挑戰?.今日頭條.2024-05-15
首個AI高考全卷評測結果發布:最高分303,數學全不及格.今日頭條.2024-06-20
OpenAI首席執行官Sam Altman宣布GPT 4o升智.騰訊網.2025-02-16
OpenAI推出GPT-4o圖像生成功能.界面新聞.2025-03-27
OpenAI宣布:ChatGPT將停用GPT4模型,全面升級至4o版本.今日頭條.2025-04-12
重磅!類人速度超快語音響應!OpenAI推出新旗艦模型GPT-4o,圖文音頻手機AI搞定.每日經濟新聞.2024-05-14
OpenAI發布新款人工智能模型GPT-4o.百家號.2024-05-14
OpenAI發布新模型GPT-4o,平均響應時間為320毫秒,“幾乎接近人類交談”.中國網.2025-03-12
OpenAI發布人工智能新模型 稱其“會聽會看會說”.央視新聞客戶端.2024-06-16
OpenAI一夜改寫歷史,GPT-4o聊天機器人干翻所有語音助手,人工智能AIETF(515070)開盤沖高.東方財富網.2024-05-14
大模型2024高考發榜,豆包等三款國產AI考上文科一本線.今日頭條.2024-06-25
GPT-4o失控行為首次公開:克隆人類聲音、詭異尖叫!網友直呼“毛骨悚然”.百家號.2024-08-10