Sam Altman預警：AI滅絕人類！ 375+大佬簽署22字聯名信，LeCun唱反調

|本文轉自：新智元【新智元導讀】AI真的要滅絕人類嗎？ 375 大佬共同簽署了22字聯名信。

3月，千名大佬簽署暫停「超級AI」研發的聯名信，讓整個業界為之震驚。

就在昨天，一封只有22個字的聯名信再次引起軒然大波。

寥寥數語，把AI類比為了傳染病和核戰，分分鐘滅絕人類的那種。

簽名者中，有Hinton和Bengio兩位人工智慧的「教父」，還有矽谷巨頭的高階主管，Sam Altman、Demis Hassabis等在人工智慧領域工作的研究人員。

截止目前，已經有370多名從事人工智慧主管都簽署了這份聯名信。

然而，這封信並不是得到所有人的支持。

「圖靈三巨頭」中的一位LeCun直言：我不同意。

使用人工智慧可以增強人類的智力，與核武和致命病原體不同，這在本質上是一件好事。我們甚至沒有一個可靠的藍圖來創造接近人類水平的人工智慧。一旦我們做到了，我們會想出讓它安全的方法。 ”

這封聯名信究竟說了啥？

「致命」公開信

22字，言簡意賅：

「降低AI給人類帶來滅絕的風險，應該被提到全球層級的優先程度。就像我們應對傳染病、核戰這種社會危機一樣。」

而簽署這封公開信的AI界人士一眼根本望不到頭。

赫然映入眼簾的就是Geoffrey Hinton，Yoshua Bengio，GoogleDeepMind的CEO Demis Hassabis，OpenAI的CEO Sam Altman，Anthropic的CEO Dario Amodei。

這裡面Hinton的含金量不用多說，前Google副總裁、深度學習泰斗、神經網路之父，以及圖靈獎得主。

Yoshua Bengio同樣也是圖靈獎得主，和Hinton，LeCun被合稱為圖靈獎三巨頭。 （然而LeCun在這件事上和另兩個巨頭態度截然相反）

除了在科技巨頭公司任職的大佬，還不乏知名AI學者。例如UC柏克萊的Dawn Song，清華大學的張亞勤。

而在這些耳熟能詳的名字下面，就是無數的AI界人士了。

甚至，每個人都可以參與簽署這封公開信。

只要填寫姓名、信箱、職位等等訊息，就可以參與簽署了。

不過，可以選擇的身份並不多。 （狗頭）

反對：滅絕人類純扯淡

當然，Meta首席科學家LeCun還是一如既往地「唱唱反調」。

他一向的觀點都是：現在的AI發展剛哪裡到哪裡啊，就天天把威脅和安全掛在嘴邊。

他說列舉出來的威脅，根本超出了目前人工智慧發展的水平，因為這些威脅根本不存在。在我們能夠初步設計出人工智慧達到狗的水平（更不用說達到人類的水平）之前，討論如何確保其安全還為時過早。

史丹佛大學的吳恩達立場和LeCun相同，但理由卻有點不同。

他認為，不是AI會導致各種各樣的問題，而是我們將會遇到的各種各樣的問題只能靠AI來解決。

例如：下一次傳染病爆發，氣候變遷導致的人口減少，小行星撞擊地球等等。

他表示，人類想繼續生存、繁榮下去，得加速AI的發展，而不是減慢。

也有網友評論，你說的這不是AI，而是MAGIC（魔法）吧。

AI風險面面觀

那麼，這些大牛們所宣稱的足以滅絕人類的風險包括什麼呢？

他們總結了以下8個面向。

武器化

部分人可能會將AI用於帶有破壞性的地方，會導致人類生存的風險，加劇政治動盪。

比方說，現在深度強化學習的技術已經可以應用於空戰了，機器學習能用於製造化學武器（已有論文表明，GPT-4可以在實驗室中自主進行實驗、合成化學品）。

此外，近年來研究人員一直在開發用於自動進行網路攻擊的AI系統，還有軍方領導人想要讓AI控制核子發射井。

因此，未來AI強國會佔據戰略優勢，各國之間的軍備競賽會轉向AI領域。就算大部分國家都確保各自建構的系統是安全的，不會威脅他國安全，仍然可能有國家蓄意用AI做壞事，造成傷害。

這給人的感覺就像核武，有個不聽話不老實的就全白玩兒。

因為數位領域的危害傳播速度很快。

訊息誤傳

#訊息誤傳這個事情大家早就有所耳聞。遠的不說，前一陣子美國律師用ChatGPT打官司，結果舉的案例有6個都是杜撰的例子，現在還熱呼呼。

而有影響力的集體，如國家、政黨、組織，有能力用AI來影響（通常是潛移默化地）並改變普通人的政治信念、意識形態等等。

同時AI本身也有能力產生非常有煽動性（或有說服力）的觀點，激起使用者強烈的情緒。

而這些預想的可能後果是完全不可預料的，不得不防。

代理「把戲」

#AI系統根據具象的目標進行訓練，而這些目標只是我們人類所重視的東西的間接代理。

就好像AI經過訓練，就可以給用戶推送他們愛看的影片或文章。

但不代表，這種方式就是好的。推薦系​​統可能會導致人們的想法越來越極端，也更容易預測每個使用者的偏好。

而隨著未來AI的表現越來越強、影響越來越大，我們拿來訓練系統的目標也必須更仔細的確認。

人類「退化」

#如果看過「機器人總動員」這部電影，我們就能想像未來時代，機器越來越強，人類是一副什麼樣子。

大腹便便、身體素質低下、毛病一堆。

就是因為，什麼都交給AI了，人類自然就要「退化」了。

尤其是，在大量崗位被AI的自動化所取代的未來圖景下，這種場面更成為可能中的很可能。

不過，按LeCun的觀點，估計又得批駁一番。咱離「機器人總動員」想像的場景還差得遠。

科技壟斷

#與技術本身無關，這一點強調的是可能會出現的「技術壟斷」。

也許有一天，最強大的AI由越來越少的利害關係人所掌控，使用權也被他們牢牢地捏在手心。

而真到了那一步的話，剩下的普通人就只能處在一個任人擺佈的狀態，因為根本反抗不了。

想想大劉的科幻小說「贍養人類」吧。

一個終產者靠著AI統治著全球的everybody，多可怕。

不可控的發展

#這點主要想說明，AI系統發展到某一步，可能結果會超出設計者的想像，且無法再進行控制。

其實這也是主流的擔心所糾結的地方。

總是會有人擔心，AI發展到最後，會像「魔鬼終結者」裡的「天網」一樣，或是「鋼鐵人」裡的「奧創」一樣，不受掌控，試圖毀滅人類。

在發展的過程中，存在一些風險只有在進一步推進時才會顯現出來，而等到發現時，已經為時已晚。甚至還可能會出現新的目標。

欺騙

這點有一些抽象，簡單來說，就是AI系統可能會「欺騙」人類。

這種「欺騙」並不是故意的，只是因為AI為了實現代理人的目標是處的手段而已。

透過「欺騙」獲得人類的認可，要比透過正常管道獲得人類的認可更有效率，而效率才是AI首要考慮的要素。

尋求權力的行為

#這點和技術壟斷之間有相關性。

正因為會出現技術壟斷的情況，各國就會追求壟斷技術的權力。

而這種「追求」，很可能是會帶來難以預料的後果的。

參考資料：

https://www.safe.ai/statement-on-ai-risk

以上是Sam Altman預警：AI滅絕人類！ 375+大佬簽署22字聯名信，LeCun唱反調的詳細內容。更多資訊請關注PHP中文網其他相關文章！