新聞中心

EEPW首頁(yè) > 智能計(jì)算 > 業(yè)界動(dòng)態(tài) > OpenAI宣布組建新團(tuán)隊(duì) 以控制“超級(jí)智能”人工智能

OpenAI宣布組建新團(tuán)隊(duì) 以控制“超級(jí)智能”人工智能

作者: 時(shí)間:2023-07-06 來(lái)源:網(wǎng)易科技 收藏

7月6日消息,美國(guó)當(dāng)?shù)貢r(shí)間周三,初創(chuàng)公司宣布其正組建一個(gè)新的團(tuán)隊(duì),以開(kāi)發(fā)引導(dǎo)和控制“”(“superintelligent”)系統(tǒng)的方法。這個(gè)團(tuán)隊(duì)由首席科學(xué)家、聯(lián)合創(chuàng)始人伊利亞·蘇斯克維爾(Ilya Sutskever)領(lǐng)導(dǎo)。

本文引用地址:http://butianyuan.cn/article/202307/448352.htm

在博客文章中,蘇斯克維爾和協(xié)調(diào)團(tuán)隊(duì)的負(fù)責(zé)人簡(jiǎn)·萊克(Jan Leike)預(yù)測(cè),智能超過(guò)人類(lèi)的將在十年內(nèi)出現(xiàn)。他們警告稱(chēng),這種人工智能不一定對(duì)人類(lèi)抱有仁慈之心,因此有必要研究控制和限制它的方法。

蘇斯克維爾和萊克寫(xiě)道:“目前,我們還沒(méi)有任何解決方案可以用來(lái)操縱或控制潛在的人工智能,并防止它失控。我們目前調(diào)整人工智能的技術(shù),比如從人類(lèi)反饋中強(qiáng)化學(xué)習(xí),依賴(lài)于人類(lèi)監(jiān)督人工智能的能力。但人類(lèi)將無(wú)法可靠地監(jiān)督比我們聰明得多的人工智能系統(tǒng)。”

為了在“對(duì)齊”(Superintelligence Alignment)領(lǐng)域取得進(jìn)展,OpenAI正在創(chuàng)建新的超級(jí)對(duì)齊團(tuán)隊(duì),由蘇斯克維爾和萊克共同領(lǐng)導(dǎo),該團(tuán)隊(duì)將有權(quán)使用OpenAI高達(dá)20%的算力資源。這個(gè)團(tuán)隊(duì)將與OpenAI之前的對(duì)齊部門(mén)科學(xué)家和工程師以及公司其他機(jī)構(gòu)的研究人員一起,致力于在未來(lái)四年解決控制超智能人工智能的核心技術(shù)挑戰(zhàn)。

那么,我們?nèi)绾未_保比人類(lèi)聰明得多的人工智能系統(tǒng)遵循人類(lèi)的意圖? 這需要蘇斯克維爾和萊克所描述的“人類(lèi)級(jí)別的自動(dòng)對(duì)齊研究員”幫助。高級(jí)目標(biāo)是使用人類(lèi)反饋來(lái)訓(xùn)練人工智能系統(tǒng),訓(xùn)練人工智能協(xié)助評(píng)估其他人工智能系統(tǒng),并最終構(gòu)建可以進(jìn)行對(duì)齊研究的人工智能。這里的“對(duì)齊研究”指的是確保人工智能系統(tǒng)達(dá)到預(yù)期的結(jié)果,或者不會(huì)偏離研究軌道。

OpenAI的假設(shè)是,人工智能可以比人類(lèi)更快、更好地進(jìn)行對(duì)齊研究。

“隨著我們?cè)谶@方面取得進(jìn)展,我們的人工智能系統(tǒng)可以接管越來(lái)越多的對(duì)齊工作,并最終構(gòu)思、實(shí)施、研究和開(kāi)發(fā)比我們現(xiàn)在更好的對(duì)齊技術(shù),”萊克和他的同事約翰·舒爾曼(John Schulman)、杰弗里·吳(Jeffrey Wu)在之前的一篇博客文章中假設(shè)?!八鼈儗⑴c人類(lèi)共同努力,以確保它們自己的繼任者與人類(lèi)始終保持一致。人類(lèi)研究人員將越來(lái)越多地把精力集中在審查人工智能系統(tǒng)完成的對(duì)齊研究上,而不是自己進(jìn)行這類(lèi)研究?!?/p>

當(dāng)然,沒(méi)有任何方法是萬(wàn)無(wú)一失的,萊克、舒爾曼以及杰弗里·吳在他們的文章中承認(rèn),OpenAI的方法存在許多局限性。他們說(shuō),使用人工智能進(jìn)行評(píng)估有可能擴(kuò)大人工智能中的不一致、偏見(jiàn)或漏洞。結(jié)果可能是,對(duì)齊問(wèn)題中最困難的部分可能根本與工程無(wú)關(guān)。

但蘇斯克維爾和萊克認(rèn)為值得一試。他們寫(xiě)道:“從根本上說(shuō),超級(jí)智能對(duì)齊是一個(gè)機(jī)器學(xué)習(xí)問(wèn)題,我們認(rèn)為優(yōu)秀的機(jī)器學(xué)習(xí)專(zhuān)家(即使他們還沒(méi)有開(kāi)始研究對(duì)齊)對(duì)解決這個(gè)問(wèn)題也至關(guān)重要。我們計(jì)劃廣泛分享這一努力的成果,并將促進(jìn)非OpenAI模型的一致性和安全性視為我們工作的重要組成部分?!?/p>



評(píng)論


相關(guān)推薦

技術(shù)專(zhuān)區(qū)

關(guān)閉