夕小瑤科技說(shuō) 原創(chuàng)
 作者 | 小戲、ZenMoore

就在今天！OpenAI 悶聲放了一個(gè)大招！

圖片

還沒(méi)有官宣，還沒(méi)有發(fā)布會(huì)，也沒(méi)有大肆報(bào)道與關(guān)注。OpenAI 這次僅僅以灰度測(cè)試的方式，給部分用戶發(fā)布了一個(gè)可以說(shuō)“整合了幾乎所有可用工具”的完全版 GPT-4 智能體版本。

再具體一點(diǎn)，這次更新，將之前版本相互獨(dú)立各自分離的 Agent 功能統(tǒng)一了起來(lái)。之前 GPT-4 的工作模式是四個(gè)獨(dú)立的功能（一個(gè)對(duì)話窗口內(nèi)只能使用其中一個(gè)特性）：

• 圖像上傳 + GPT-4
• 插件 + GPT-4
• 代碼運(yùn)行器 + 文件上傳 + GPT-4
• 圖像生成 + GPT-4

這次更新使其變成了：

• GPT-4 + 圖像上傳 + 插件 + 代碼運(yùn)行器 + 文件上傳 + 圖像生成

All In One!

例如，我想實(shí)現(xiàn)扔給 GPT-4 一張圖，讓 GPT-4 完成圖像理解再根據(jù)我的 Prompt 要求完成新圖像的生成，之前的 GPT-4 是無(wú)法做到這個(gè)事情的，因此當(dāng)你使用圖像生成功能的時(shí)候就無(wú)法上傳圖片。而更新完成之后，現(xiàn)在可以做到自動(dòng)圖像編輯啦！ 如下圖所示：

圖片

這看似是一個(gè)小小的更新，但實(shí)際上是通過(guò)把之前分開(kāi)的各種 Agent Feature 整合在一起從而將 GPT-4 真正進(jìn)化為了一個(gè)“理解一切，處理一切，生成一切”的超級(jí)統(tǒng)一智能體！

回顧 OpenAI 的官方說(shuō)明，可能其中最為關(guān)鍵的詞句就是其中的“automatic”一詞

圖片

什么是“automatic”，那就是針對(duì)用戶輸入的任意一個(gè)任務(wù)，現(xiàn)在的 GPT-4 可以自動(dòng)的選擇并組合使用各種它可以使用的工具，以完成用戶的特定的任務(wù)目標(biāo)。換言之，之前通過(guò)用戶人為切換插件完成的任務(wù)，更新后的 GPT-4 (All Tools) 類似 AutoGPT，可以一體化的完成如意圖識(shí)別，任務(wù)分配，工具調(diào)用等諸多任務(wù)，GPT-4 也由此完成了單一的大模型到智能體的進(jìn)化。

圖片

舉個(gè)網(wǎng)友的例子，如果我希望讓 GPT-4 生成一個(gè)當(dāng)前時(shí)間丹佛的天氣圖，拆解這個(gè)任務(wù)，GPT-4 需要做的不僅僅是使用 DALLE 3 生成一張圖片，而是還需要查詢當(dāng)前時(shí)刻丹佛的天氣，這需要調(diào)用另一個(gè) API，而如下圖所示，GPT-4（All Tools）現(xiàn)在可以自動(dòng)的完成這一套任務(wù)。

圖片

再來(lái)一個(gè)更復(fù)雜的任務(wù)，如果要求 GPT-4 依次反復(fù)使用它所能使用的所有工具來(lái)生成一張炫酷有趣的創(chuàng)意圖片，GPT-4 會(huì)怎么樣呢？

圖片

如上圖所示，GPT-4 完美的理解了任務(wù)的要求，首先使用了 DALLE 創(chuàng)建初始圖像，并以“抽象”，“懷舊”，“希望”等為主題設(shè)計(jì)了輸入 DALLE 的 Prompt，生成了初始的圖像

圖片

接著通過(guò)調(diào)用 Python，分析生成圖像中的顏色，確定主導(dǎo)色調(diào)，最終經(jīng)過(guò)一系列 GPT-4 的神操作，GPT-4 交出了這樣一個(gè)答卷，先不論其中藝術(shù)性如何，但可以看出 GPT-4 已經(jīng)可以熟練的玩轉(zhuǎn)各種工具。

圖片

再來(lái)一個(gè)例子，對(duì)于一個(gè) PDF 信息提取的任務(wù)，之前的版本可能還需要額外使用 Advanced Data Analysis 功能上傳附近才可以辦到，而新版本的 GPT-4 則將多類型文件完全統(tǒng)一，直接上傳 PDF 便可以和 GPT-4 暢快 Chat。

圖片

當(dāng)然，目前的目前，GPT-4 的這次升級(jí)還沒(méi)有正式發(fā)布，只是以灰度測(cè)試的形式“走漏了一點(diǎn)風(fēng)聲”，不過(guò)哪怕僅僅看到這些蛛絲馬跡，但也足夠讓人期待完全版 GPT-4 會(huì)為我們帶來(lái)什么樣的想象空間。

圖片