感謝本站網友 華南吳彥祖、軟媒用戶1392612 的線索投遞!
剛剛,OpenAI 深夜直播,GPT-4o 的原生圖像生成大升級!奧爾特曼親自上陣組隊,演示了自拍變梗圖、相對論漫畫等功能,不過相對隔壁谷歌發布的新模型,OpenAI 的這波動作著實有點不夠看。
就在谷歌剛剛扔出地表最強模型 Gemini 2.5 Pro 不久,OpenAI 也有動作了。
奧爾特曼親自帶隊,展示了 GPT-4o 圖像生成技術的各種大升級,比如制作梗圖、文本渲染、多輪交互生成和指令遵循等。
整個直播中最亮的演示,莫過于這張官方玩梗的表情包了。
目前,這項功能已經在 ChatGPT 和 Sora 中,向所有 Plus、Pro、Team 和免費用戶推出。
當然,新版 Sora 生圖的時間,也比以往更長了。但 OpenAI 看來,生圖的質量和其具備的世界知識,讓用戶值得等待那多出的幾秒。
GPT-4o 原生圖像生成來了!
在直播中,奧爾特曼介紹道,從今天起,ChatGPT 中的原生圖像生成功能正式推出!
GPT-4o 的全模態能力,從此也融合進了 Sora 中。
OpenAI 多模態研究的負責人 Gabe 介紹說,兩年前剛開始這個項目時,他對于 GPT-4 這個強大的模型會怎樣原生支持圖像模型非常好奇。
一年后,當模型完成訓練時,他看到了令人興奮的跡象。從 GPT-2 以來,他已經很久沒有這種感覺 —— 這是一個瘋狂時刻。
給出以下 prompt,GPT-4o 就生成了符合要求的圖像,完全還原了要求。
接下來,三個人用手機來了張自拍,GPT-4o 立刻把三人自拍轉換成了動漫風格的版本。
甚至他們開始官方玩梗,讓模型添加一段「Feel The AGI」在圖片上,一張表情包就此誕生。
這個過程,就體現了 4o 作為全能模型的強大能力。
因為它不僅僅是一個語言模型,還包括圖像、音頻,所有輸入和輸出的模態。它可以理解、生成這些模態,并且無縫地在它們之間工作。
用 OpenAI 的話說,「我們終于邁向了這種真正集成的多模態模型」。
接下來,他們讓模型畫出一幅描述相對論的漫畫,要求通俗易懂,還要加入一些幽默元素。
這個提示詞非常模糊,因此看看模型會生成什么樣的圖,就格外令人期待了。果然,生成效果令人驚喜。
注意,這個過程中,模型很可能利用了自己的世界知識,對提示詞進行了擴展。
然后,他們給了模型一張卡片,希望生成同樣風格的圖像,但要求主角不再是卡片中的巨貓國王,而是某位研究者的狗狗。
另外,卡片上還需要出現一些細節,比如模型的名字和年份,以及狗狗的體重和身高。
可以看到,生成圖像在文本渲染方面非常驚艷,所有數據都準確無誤。
最后一個演示,是基于此前幾人生成的內容,制作一個紀念幣。
而且,還要求圖使用了一個特殊的十六進制代碼,且加上生成圖像的文本和日期。
可以看到,生成結果非常驚艷!此前曾出現的藝術熊、收音機、愛因斯坦漫畫、研究者的狗狗以及模型名稱和日期,全部都出現在了紀念幣上。
模型之所以精準完成這樣復雜的要求,是因為它是用非自回歸的方式訓練的,因此它能夠理解上下文中的文本和多張圖片,以非常和諧的方式在紀念幣上呈現出來。
和 GPT-4o 聊天,定制各種圖像