随着 ChatGPT 的能力越來越多,OpenAI 要進行整合了。
自一年前的 2022 年 11 月 30 日發布以來,初創公司 OpenAI 一直在穩步改進其廣受歡迎的 AI 聊天機器人 ChatGPT,但根據已經推出該體驗的用戶表示,ChatGPT 最新的更新吸收了之前的所有功能,并且似乎将其合并爲一個。
多名用戶在社交媒體上分享了一條發給他們的 ChatGPT 帳戶的更新消息,内容如下:
" 您的 GPT-4 已更新 :上傳多種類型的文檔:處理 PDF、數據文件或任何您想要分析的文檔。 隻需上傳并開始提問。無需切換即可使用工具:現在可以自動訪問浏覽、高級數據分析和 DALL-E。 (如果願意,在 GPT-4 下仍然可以進行手動選擇。)"
而這些功能——分析和回答有關 PDF 和其他文檔的問題、網頁浏覽和數據分析,以及與 OpenAI 的圖像生成模型 DALL-E 3 集成,允許用戶使用文本提示來制作新圖像——在過去的幾個月裏,用戶之前必須在 ChatGPT 會話的 "GPT-4" 下拉菜單下獨立打開每一項。 換句話說:用戶以前一次隻能使用這些 ChatGPT 功能之一。
這意味着,如果您想分析文檔,然後生成有關它的圖像,則必須在單個聊天會話中完成第一個任務,手動複制從 ChatGPT 返回的分析文本,然後使用以下命令啓動新的聊天窗口: DALL-E 3 已啓用。 然後,您可以粘貼第一個聊天會話中遺留下來的文本,并要求新的 DALL-3 會話中的 ChatGPT 生成圖像。 現在,借助 OpenAI 的最新更新,您可以在同一個聊天會話中完成所有這些任務,從而大大提高了服務效率。
用戶認爲此更新和模式是 " 所有工具(All Tools)"。
01 用戶最初的反應非常正面,對其他基于 GPT 的初創公司來說同樣是颠覆性的
" 突發事件:ChatGPT-4 剛剛将其各種瘋狂的工具整合到一個單獨的聊天中,就像戰神金剛 ( Voltron ) 風格! 無縫處理 PDF、數據、DALLE、視覺、浏覽。 你的能力剛剛提升了," 紐約大學斯特恩商學院學生主任康納 · 格倫南 ( Connor Grennan ) 在 LinkedIn 帖子中寫道,他引用了 20 世紀 80 年代頗具影響力的漫畫,其中由人們駕駛的大型機械獅子組合成一個戰士。 (20 世紀 90 年代的《恐龍戰隊》在真人表演中也采取了類似的方法)。
p-AI 孵化器創始人 Alex Ker 在 X 平台上宣稱:" 今天許多初創公司都死了,因爲 OpenAI 添加了 PDF 聊天功能。 您還可以與數據文件和其他文檔類型聊天。 我們有一波更适合作爲功能而不是獨立公司的産品。 包裝器(wrapper)一方面受到 OpenAI 的擠壓,另一方面受到現有企業的擠壓。 外面的世界很艱難。"
Nvidia 高級 AI 科學家 Jim Fan 對此表示同意,并在 X 上發帖稱:" 在你的精神高昂之前,先問問自己:OpenAI/Anthropic/Microsoft 能否在黑客馬拉松中讓 3 名工程師添加此功能?" 他還建議,遵循這種模式的初創公司最終将陷入 " 瘦包裝器 ( thinwrapper ) 墓地 "。
Ker 和 Fan 提到了自從 OpenAI 支持對其 GPT-3.5 和 GPT-4 大語言模型 ( LLM ) 進行 API 訪問以來湧現的許多公司,這些 AI 模型支撐着不同版本的 ChatGPT。
第三方公司已經能夠訪問這些模型來構建自己的由 OpenAI 技術支持的應用程序和産品,其中一些提供 PDF 和文檔分析。 這些應用程序和産品被技術社區成員視爲 " 包裝器 ",有時甚至是嘲笑的,因爲它們本質上隻是圍繞底層 GPT-3.5/4 技術 " 包裝 " 的不同用戶界面。
事實上,OpenAI 在今年 3 月開放了自己的 ChatGPT 第三方插件庫,以及第三方開發者提供的一些産品,包括 PDF 和文檔分析工具。 然而,使用它們的體驗對于用戶來說通常有點麻煩,需要他們将文檔上傳到單獨的網站并将 URL 粘貼到 ChatGPT 中。
新的更新似乎使這些插件基本上過時了。 此外,有用戶指出,得益于上傳功能結合 DALL-E 3 圖像生成和 ChatGPT 現有的對話理解,"All Tools" 更新可以使用自然語言指令編輯用戶提供的圖像,有效與 Photoshop 競争完成此任務。
02 但有些人有安全顧慮
爲了提高效率并爲用戶提供更強大的體驗,将 ChatGPT 不斷擴展的功能列表捆綁到一個類似 " 戰神金剛(Voltron)" 的形式中是有意義的。 盡管如此,一些人還是提出了安全擔憂。
Django Python Web 框架的共同創建者、數據發布 / 探索工具 Datasette 的創始人 Simon Willison 表示:" 我真的很驚訝地看到浏覽器和代碼解釋器在同一個會話中可用,感覺就像是針對兩者組合進行創造性提示注入攻擊的有效載體。"
" 代碼解釋器 " 是 ChatGPT 中 " 高級數據分析 " 設置的名稱,它允許上傳和分析文檔。
然而,正如各種用戶所表明的那樣,ChatGPT 很容易被包含某些信息的上傳内容所欺騙,例如給出秘密指令的白色文本。
Willison 在随後的 X 帖子中詳細闡述了他的擔憂,他寫道:" 浏覽模式是提示注入的載體,因爲惡意指令可能隐藏在浏覽模式訪問的頁面中。 現在這些惡意指令可以訪問沙箱中的 Python,其輸出可能包括觸發浏覽的進一步指令?"
Willison 的觀點很好理解:如果 ChatGPT 可以讀取網頁,那麽黑客或惡意行爲者就會構建網頁,爲其提供秘密指令,以便使用 " 高級數據分析 " 模式中提供的代碼生成功能(以前與浏覽和其他操作隔離)進行編程。 攻擊者可以讓 ChatGPT 爲他們的利益、惡作劇、破壞或更糟的目的做各種各樣的事情,包括讓它編寫程序,理論上在安裝時劫持一個人的計算機或設備。
OpenAI 之前尚未宣布 ChatGPT 的新捆綁版本——在本文發表時,官方公司博客和 ChatGPT 發行說明網頁均未更新以包含有關捆綁功能的新信息。OpenAI 首席執行官 Sam Altman、首席技術官 Mira Murati 和開發者關系倡導者 Logan Kilpatrick 也尚未通過他們的 X 帳戶發布相關信息。