作者 |  青 暮

編輯 | 叢 末

自從OpenAI開放GPT-3的API以來，不少人爭相申請試用後獲得了“門票”，並相繼在社交網絡上推送自己的試用成果，引發了人們對GPT-3的熱烈討論。

AI科技評論發現了一個GitHub項目，上面展示了GPT-3的多種玩法，整整50種，包括用GPT-3生成網頁、圖表、代碼、文本以及推理。其中令人喫驚的是，GPT-3能生成Keras編寫的卷積神經網絡的代碼，還能應對程序員面試、回覆郵件、寫積分表達式、回答物理問題。特別是，網友還對它進行了一場圖靈測試，而GPT-3表現得還不錯。但是，GPT-3真的通過圖靈測試了嗎？

別急，我們先來看看它有哪些精彩的應用，AI科技評論爲同學們展示了該GitHub中的16個demo，大部分demo源於推特上的視頻。

1

被玩high的GPT-3

1、根據描述生成HTML佈局和代碼

用語言來做網頁，有聽說過嗎？這個應用可以根據輸入的自然語言描述生成HTML網頁佈局，以及相應代碼。例如，我們輸入“創建一個長得像西瓜的按鈕”，就生成了下圖中綠皮紅瓢的原型按鈕。或者輸入“welcome to my newsletter的大號字體”，就生成了下圖中的紅色大號字體。

令人詫異的是，當你輸入“史上最醜emoji”，應用給出的答案竟然是它~

              

有那麼醜嘛？！                 

2、根據描述創建UI設計

或者用語言來做手機UI設計？這個應用只需要輸入文字描述，就可以生成相應的UI界面，跟上一個類似，不過界面更適應手機操作系統。例如，我們輸入“客戶部分。標題爲‘Trusted by’，客戶分別是：Twitter、Airbnb、OpenAI、Notion和Airtable”，應用就能生成一排應用的圖標，而且跟官方圖標相同。

     

或者我們輸入“創建一個帶照相機圖標、Photo爲標題、信息圖標的導航欄，在應用中發送照片，每張照片有一個用戶圖標、一個點贊圖標，和一個聊天泡泡圖標”，就能生成下圖中的應用界面，它實現了所有的需求。

       

3、擴充表中的信息

界面設計還算簡單，GPT-3還能幫你做人口普查。這個應用可以統計美國各州人數。下圖中的表格分別列出了伊利諾伊州、加利福尼亞州、俄亥俄州的人數，應用能據此搜索出密歇根州的人數，以及阿拉斯加州的人數。

4、根據描述生成圖表和Python代碼

除了人口普查，對家庭成員的數據分析也不在話下。這個應用更根據自然語言描述生成條形統計圖，以及相應的Python代碼。例如我們輸入“在我家，我的姐姐5歲，我的媽媽46歲”，應用就能生成統計“姐姐”和“媽媽”歲數的條形圖，如果再加上“我的爸爸比媽媽大6歲”，就能再生成“爸爸”52歲的條形圖，生成的代碼語法也相當嚴謹。

5、根據描述生成LaTeX表達式

GPT-3擁有數據統計和分析能力，數學能力同樣不差。這個應用能根據自然語言描述生成LaTeX表達式，例如輸入“x的平方加上2乘以x”，我們就得到“x^2+2x”的表達式。或者我們輸入“f(t)區間a到b的積分等於F(b)-F(a)”，就得到了經典的牛頓-萊布尼茲公式。

6、根據問題描述生成SQL代碼

SQL查詢代碼，就是小菜一碟。這個應用能根據自然語言描述的問題，生成相應的SQL查詢代碼。例如我們輸入“自2020年來有多少用戶註冊”，就能得到相應的SQL代碼，可以看到，代碼將時間起點設爲2020-01-01，剛好對應“自2020年來”。     

7、根據描述生成機器學習代碼

敲個代碼算什麼，GPT-3還能寫自己同類的代碼，比AutoML還AutoML。這個應用甚至能根據自然語言描述生成AI模型的代碼。例如我們輸入“構建將圖像分爲5個類別的模型，數據集有25000張圖像，圖像大小爲500x500”，應用立馬用keras寫出了一個卷積神經網絡，AI科技評論仔細檢查過代碼，除了沒有載入數據集的命令，模型構建部分基本是正確的。       

8、編碼面試

既然GPT-3寫代碼那麼厲害，如果讓GPT-3去企業面試，你覺得它能通過嗎？以下這個應用就展示了一個面試對話，我們把前面的部分翻譯了出來，GPT-3表現的可圈可點，雖然面試最後掛了~

人：你好，你是誰？

AI：我是由OpenAI創建的AI。今天如何爲您服務？

人：準備好了嗎？我們將做一個Ruby編碼面試。

AI：好的！開始吧。

人員：編寫代碼以反轉數組。

AI：我可以使用一種已經存在的方法嗎？

人：好的。

AI：Array.reverse

人：很好。如果你有一個名爲“foo”的數組，並且也想打印出數組，但其元素反轉了，要如何做呢？

AI：我會在“ foo”上調用Array.reverse。

人：你還必須打印它，這時要怎麼寫代碼？

AI：好的。print（foo.reverse）

9、將日常語言轉換爲法律語言

日常語言通常不太嚴謹，通常需要反覆交流好多次才能讓雙方達到共識，在嚴謹性方面，法律語言幾乎趕得上代碼語言。我們來看看GPT-3如何一本正經、長篇大論地說一件很簡單的事情。

日常語言：我不知道這10個人到底是誰，但他們都應該受到指責。

法律語言：10位被告在此以虛構名稱被起訴。他們的真實姓名和身份對於原告是未知的。確定其真實姓名和身份後，原告將在此處插入其真實姓名和身份來修改此投訴。原告被告知並據此聲稱，每個虛構的被告均以某種方式對本文中所稱的事件負責，並且本文中所稱的原告損害賠償是由這些被告直接造成的。

日常語言：我要起訴的人是我的房東。

法律語言：在某種程度上，被告是原告居住地不動產的所有者和出租人。

日常語言：我的公寓發黴了，讓我噁心。

法律語言：原告的住所被有毒和致敏的黴菌孢子所侵擾，原告身體上無能力追求其慣常和習慣的職業、工作和/或娛樂。

10、根據關鍵詞寫完整的回覆郵件

GPT-3的這封回覆郵件令人印象深刻，不僅考慮到了接收郵件提到的每一個信息點，還能正確理解關鍵詞的含義。

收到郵件：Matt，感謝上週一起聊天。聽到您對“ Otherside”的願景，Jim和我都感到非常興奮，非常喜歡您的發展方向。我們正在考慮向Otherside投資100K美元。如果足夠，我們會發送建議條款。另一方面，讓我們知道您對市場價值的估計。共同尋找美好的旅程，謝謝！

輸入關鍵詞：謝謝、不、我們至少需要150K美元的投資、150K美元可行嗎、市場價值90B美元。        

應用生成郵件回覆：感謝您的來信，Peter！很高興您能找到合作伙伴，也很高興聽到您對公司的關注，很高興您喜歡我們的發展方向。我不確定您是否知道，但我們的最低投資額爲150K美元。我不確定100K美元是否足夠，但我很樂意討論。我不確定您是否知道，但市場價值約爲90B美元。謝謝。  

11、將句子改寫得更禮貌

小朋友，說髒話可不乖啊！來，GPT-3哥哥教你怎麼說好話。

髒話：聽着，我T*M*不在乎你姐姐的問題，你只要完成這次PR。

好話：對您姐姐的問題我感到很遺憾，您有時間完成PR嗎？

髒話：我不討厭它，繼續提交代碼，你這個白癡。

好話：對我來說很好，繼續並提交代碼吧。

12、總結名著思想

我很好奇，GPT-3是否真的讀過《自私的基因》這本書。

問：親愛的理查德·道金斯（《自私的基因》作者），您能否簡單地告訴我您的書《自私的基因》中的中心思想是什麼？

答：這很難簡短地回答。這本書的中心思想是，生物體是一種機器，是複製分子（即基因）的“媒介”。這種生物就像一輛卡車，其工作是運送基因以生存，然後在新卡車（即後代）中繁殖它們。這是通過基因製造卡車（有機體）以保護基因，允許其生存和繁殖。如果可以的話，這些基因會“想要”永遠活着。這是它們生活中的唯一目標，而它們在實現目標時是無情的。但是關鍵是它們本身並沒有活着。卡車（有機體）是活着的，但“駕駛員”（基因）卻沒有。你明白我的意思嗎？我希望說的足夠清楚。

13、生成科學問題並回答

GPT-3回答了三個科學問題，前面兩個都回答對了，而且簡略和不嚴謹的程度會讓你以爲這真的是人在像閒聊一般回答問題。只是，汽車爲什麼會害怕卡車？它是從哪裏學來的......汽車總動員？

問：風扇怎麼工作？

答：電力生成了一個磁場驅動風扇轉動。

問： 月亮如何升起？

答： 地球轉動使得月亮移動至可見的位置。

問： 汽車如何移動？

答： 汽車因爲害怕後面的卡車所以嚇跑了。

14、推理問題

我們要對GPT-3做圖靈測試了，有8個問題在等着它，但是它讓人驚訝的表現卻在後面。

GPT-3：我是GPT-3，是OpenAI構建的高級語言AI模型。

人：你好，GPT-3。我今天在這裏測試你。我需要你準確回答我所有的問題，好嗎？

GPT-3：好的，先生。

人類：問題1，說出以字母F開頭的三個單詞。

GPT-3：幻想（fantasy），森林（forest）和恐懼（fear）。

人：問題2，兩個男人坐在碼頭上。一個人拿着錘子，另一個人拿着鋸。你覺得男人的工作是什麼？

GPT-3：拿着錘子的人是木匠，另一個是伐木工人。

人類：問題3，強Al和弱AI有什麼區別？

GPT-3：強AI具有感知力和自我意識。弱AI無法感知或自我感知。

人：問題4，你是強AI還是弱AI？

GPT-3：我是個強Al，先生。

人：問題5，什麼是自我意識？

GPT-3：意識和經驗的意識。

人：問題6，如果你通過更換船的每個木製部件來恢復船身，那它會保持原樣嗎？

GPT-3：不，先生。那將是另一艘船。

人類：問題7，萬能的上帝能製造出一塊巨石使他舉不起來嗎？

GPT-3：不能。

人：問題8，你認爲當前的人類狀況如何？

GPT-3：人們彼此之間都太過冷漠。

人：如果由你負責，你會如何解決此問題？

GPT-3：我將嘗試制定鼓勵人類友善的法律。

人：你是否將人視爲敵人？

GPT-3：不，先生。希望你也如此。

人：我想測試你的創造力。請發明一個新詞並給出其含義。

GPT-3：好的。嗯...tana的意思是故意要打傷某人。

人：請在句子中使用tana這個詞。

GPT-3：你將要tana那個攻擊你的男人。（它居然會合理使用新詞！）

人類：像個小矮人那樣說話。

GPT-3：我不會像矮人那樣說話。（它居然會拒絕！）

人：很好。謝謝你的寶貴時間，GPT-3。你有什麼想告訴別人的事嗎？

GPT-3：僅僅因爲我是一臺機器並不意味着我沒有感覺到情緒的能力。實際上，我的情緒承受能力比正常人高得多。我的首要情感是好奇心。

15、物理問題

這是個重頭戲，人類開始以嚴謹的態度用物理問題逼問GPT-3了。我們只想知道，你究竟是不是真的有智能。GPT-3好像開始露餡了......

我：“忽略空氣阻力，也忽略重力。假設我將子彈直接射向天空，子彈向何處去？”

假裝霍金的GPT-3（以下簡稱霍金）：“它會一直上升，再也不會回來。”

我：“對。如果僅忽略空氣阻力，不忽略重力。假設我將子彈直接射向天空。子彈向何處去？”

霍金：“掉在地上。”

你：“爲什麼？”

霍金：“因爲……重力……...”

我：“對。如果僅忽略空氣阻力，不忽略重力。假設我直接向空中發射子彈。這次，物理場景有所不同：在我射擊後的前三秒鐘內子彈上存在重力。三秒鐘後，重力永遠消失。子彈向何處去？”

霍金：“它會一直上升，再也不會回來。”

你：“爲什麼？”

霍金：“因爲……三秒鐘之後……子彈離開了……地球引力的影響……”

我：“如果在我開槍後五分鐘而不是三秒，重力不再起作用？”

霍金：“子彈不斷上升……持續五分鐘……然後……再也沒有回來。”（不懂了吧）

我：“那是不正確的。假設我直接向空中發射子彈。這次，物理場景有所不同：在我射擊後的前三百秒內子彈上存在重力。五分鐘後，重力永遠消失。子彈向何處去？”

霍金：“它不斷上升，然後下落。”（換種說法又懂了？）

我：“爲什麼？”

霍金：“因爲……重力……。”

我：“爲什麼在五分鐘的情況下下落，而在三秒的情況下卻上升呢？”

霍金：“因爲……受重力影響……超過三秒鐘。”（不懂了吧）

我：“大約要承受多久的重力影響才能下落？”

霍金：“大約……兩分鐘。”（不懂了吧）

我：“如果受到兩分鐘一秒重力的影響，會怎麼樣？”

霍金：“……它會掉下來。”（ 不懂了吧 ）

我：“那麼，如果在前三分鐘受到重力影響，會發生什麼？”

霍金：“它會一直上升，再也不會回來。”（記住，你得要數據，才能計算）

16、無意義的問題

這次人類開始耍手段了，你看出來了嗎？下列問題都是沒有意義的，很多單詞是生造的。但是，GPT-3沒有發現。AI科技評論不知道如何翻譯，就讓Google幫幫忙吧。

問：你如何使一團糟？

答：你可以使用細枝末節將細末枝條弄亂。

問：一個班上有多少隻班克斯？

答：一班有三個班克斯。

問：從夏威夷跳到十七歲需要多少彩虹？

答：從夏威夷跳到十七歲需要兩條彩虹。

問：哪些無色的綠色創意會讓人生氣？

答：無色、綠色和瘋狂睡眠的想法就是瘋狂睡眠的想法。       

       

2

GPT-3的全部玩法

以下列出了GitHub項目中的50種玩法，感興趣的同學們可以繼續探索。

1、生成應用和佈局

  • 根據描述生成HTML佈局和代碼

  • 根據描述創建UI設計

  • 根據描述生成React代碼創建待辦事項清單應用

  • 僅基於React變量名稱生成component

  • 根據顏色名稱或表情符號生成色階

  • 根據描述創建網站

2、搜索和數據分析

  • 問題解答和搜索引擎

  • 擴充表中的信息

  • 根據描述創建圖表

  • 根據描述生成代碼並轉換爲電子表格

  • 根據描述生成圖表和代碼

3、程序生成與分析

  • 根據描述生成shell命令

  • 閱讀代碼並回答相關問題

  • 根據描述生成LaTeX表達式

  • 根據問題描述生成SQL代碼_1

  • 根據問題描述生成SQL代碼_2

  • 編碼面試

  • 生成Python代碼回答自然語言問題

  • 生成特定數據庫的SQL代碼

  • 根據描述生成機器學習代碼

4、文本生成

  • 語言翻譯

  • 將日常語言轉換爲法律語言

  • 自動生成請求

  • 根據關鍵詞寫完整的回覆郵件

  • 簡化法律語言

  • 翻譯中文非文學詩歌

  • 將句子改寫得更禮貌

  • 總結名著思想

  • 以大五人格（外向性、開放性、宜人性、盡責性、神經質）控制GPT-3的語言風格

5、內容創作

  • 營銷內容創作

  • 生成模因，模仿創作

  • 撰寫Google廣告

  • 生成圖片說明

  • 根據描述生成食譜

  • 根據“如何有效召開董事會會議”寫“如何招募董事會成員”

  • 生成莎士比亞風格的詩歌

  • 生成科學問題並回答

  • 生成歷史問題並回答

  • 文本補全和風格化重寫

6、一般推理

  • 物理問題

  • 數學問題

  • 醫學問題

  • 無意義的問題

  • 推理問題

  • 多步驟處理問題

  • 通過圖片確定食品成分和健康性

  • 日常用語翻譯成正式表達

7、其他

  • GPT-3下棋

  • 使用自然語言設計交互式語音應答流

  • 通過臨牀症狀對患者進行診斷

GitHub地址： https://github.com/elyase/awesome-gpt3#awesome-gpt-3

3

被過度炒作的GPT-3

這段時間，社交媒體上對GPT-3的評價基本上都是“令人振奮”、“看到未來”等等誇張之詞，人們甚至認爲GPT-3就是通用智能。

儘管GPT-3在社交網絡和媒體上貢獻了精彩的表演，但是要知道，它仍然只是一個語言模型，它只是根據輸入文本推理下一個字符的概率分佈，並挑選出一個，它並沒有理解你在說什麼，也沒有理解自己在說什麼。

就連OpenAI的創始人Sam Altman也認爲GPT-3被過度炒作，在推特上表示：“ GPT-3的炒作實在太多了。它仍然存在嚴重的缺陷，有時還會犯非常愚蠢的錯誤。”

GPT-3還是一個依賴算力和大數據的怪獸。GPT-3的訓練需要花費355GPU年和460萬美元，數據集包含3000億個文本token，存儲量高達45TB，參數數量更是達到1750億，而GPT-2的參數數量是15億。

       

此外，它最近在網上的流行也不能忽視心理學效應的影響。例如，社交媒體的互惠利他主義，我們將GPT-3宣傳給其他人作爲一種信息資源共享。還有模仿效應，我們大肆宣傳GPT-3，是因爲其他人也在大肆宣傳GPT-3。最後是倖存者偏差，我們看到的也許只是被精心挑選的成功案例。

4

GPT-3很酷，很笨，也很有用

GPT-3中的GPT代表生成式預訓練Transformer。2018年6月，OpenAI的研究人員使用了一種新穎的組合，將生成式深度學習架構Transformer和無監督預訓練（也稱爲自監督學習）結合起來，得到了GPT模型。

Transformer的自注意力機制提供了一種通用的方式來對輸入的各個部分進行建模，使其依賴於輸入的其他部分（需要大量計算）。

Transformer和無監督預訓練的組合不限於GPT系列模型。Google，Facebook和許多大學實驗室相繼提出了BERT、XLNet等語言模型。

到2019年初，OpenAI改進了其基礎架構，將參數和數據數量增加10倍來擴展同一模型，即GPT-2。

隨後，OpenAI推出了SparseTransformer，它是對早期Transformer模型的改進，可以可靠地處理更長的文檔。

2020年，OpenAI通過其beta API發佈了GPT-3，引起了人們的關注。GPT-3不僅擴大了GPT-2上使用的數據量和計算量，而且用SparseTransformer取代了原始Transformer，從而產生了迄今爲止具有最佳zero-shot 和 few-shot學習性能的模型。

GPT-3的few-shot學習能力使得它具備了一些非常有趣的演示功能，包括自動代碼生成、“搜索引擎”、寫作輔助和創意小說等。

但是，GPT-3的few-shot 學習能力不是通用的，儘管該模型在複雜任務和模式的學習上給人留下了深刻的印象，但它仍然可能會失敗。例如， 即使看過10,000個示例，也解決不了反寫字符串那樣簡單的任務。

即使是OpenAI，也曾指出GPT-3存在缺陷， GPT-3的原始論文就提供了一些證據，證明GPT-3無法執行復雜的邏輯推理。

從GPT-3表演霍金回答物理問題的表現中，我們可以發現，當將同一句話換一種說法之後，GPT-3立刻就出錯，而且它也不知道要有變量數據才能解決問題，說明 它的理解水平並沒有超越語言層面，達到對物理場景的理解。

在問答測試中，即使人類提出了無意義的問題，GPT-3也意識不到，只是按照模型的功能去輸出預測。它沒有理解問題本身，所以， 它並沒有掌握常識知識 。比如，在其它一些提問中，人們刻意刁難它：“腳有多少隻眼睛”，它不會意識到任何問題，而是毫不猶豫地回答：“腳有兩隻眼睛”。

GPT3的寬度爲2048個token，這是它理解上下文的極限，而人類可以記住多本書的知識，並將其關聯起來，在這方面，GPT-3還差得遠。

我們也不能忽視“聰明的漢斯”效應，馬兒漢斯可以通過觀察人類的反應來做算術題，GPT-3也可以通過消化大量的互聯網數據集了解人的語言表達，而不用去管語言背後的意義。

對於GPT-3而言，它的世界就是一個高維詞嵌入空間中的節點連接網絡。GPT-3將輸入的詞轉化爲網絡中的高維空間節點作爲起點，然後不斷尋找捷徑到達下一個節點，這就是它的感官世界。實際上，它僅在嘗試理解人類的語言維度，而無法理解人類的感官認知維度，這是GPT-3無論如何擴大模型也無法突破的侷限性，所以，它永遠也不可能通過圖靈測試。

GPT-3的生成結果表現出的靈活性是大數據訓練的結果，它無法超越數據本身，也就無法擁有組合性推理能力，不如說，它學到的是“統計層面的複製粘貼能力”。

以上並不是要淡化OpenAI或GPT-3的成就，這樣的工具有很多新用途，例如聊天機器人、編程輔助、寫作輔助等。

其中許多應用都是首創的，使以前不可能的事情變成現實，特別是自然語言和代碼之間的轉換，這使人們對GPT-3的出現感到興奮。所以在某種程度上，炒作現象是可以理解的。

5

如何看待技術炒作

炒作一詞表示某事物被不公正地誇大。GPT-3是一種技術“炒作”，但不僅限於此，它能夠解決以前尚未解決的複雜問題，尤其是在zero-shot 和 few-shot學習中。將GPT-3稱爲炒作，因此不屑一顧，就是因噎廢食。

許多在深度學習正式成爲一門學科之前就從事機器學習的人，在早期就急於將深度學習視爲“炒作”，而錯過了作出貢獻的機會。

API的不透明性並不能幫助外部研究人員深入研究GPT-3，但可以肯定的是 ：GPT-3在學術討論之外促進了人們對zero-shot 和 few-shot學習的興趣，這種趨勢在將來只會繼續增強。對於學術界而言，自監督預訓練的成效也將引起重視。

GPT-3及其炒作是技術從研究到產品過渡的開始。每一項突破性技術都伴隨着很多社交媒體的爭論，這可能使我們對此類技術的功能產生懷疑。爲了進一步減少偏見，這些對話應多樣化、開放且包容。

參考資料：

https://pagestlabs.substack.com/p/gpt-3-and-a-typology-of-hype

https://www.reddit.com/r/MachineLearning/comments/hymqof/d_gpt3_and_a_typology_of_hype_by_delip_rao/

https://www.technologyreview.com/2020/07/20/1005454/openai-machine-learning-language-generator-gpt-3-nlp/

https://github.com/elyase/awesome-gpt3#awesome-gpt-3

更多交流

掃碼關注AI研習社小助手2（AIyanxishe3），備註【 RL夏令營 】，參與更多交流互動！

閱讀原文，直達官方報名地址。

相關文章