OpenAI聯(lián)合創(chuàng)始人兼前首席科學家Ilya Sutskever今年早些時候離開OpenAI并創(chuàng)辦了人工智能實驗室Safe Superintelligence Inc，近日其在加拿大溫哥華舉行的神經(jīng)信息處理系統(tǒng)會議 （NeurIPS）上罕見公開露面。

“我們所熟知的預訓練無疑將會結束，”Sutskever表示，這指的是人工智能模型開發(fā)的第一階段，大型語言模型從大量未標記的數(shù)據(jù)（通常是來自互聯(lián)網(wǎng)、書籍和其他來源的文本）中學習模式。

Sutskever指出，雖然他認為現(xiàn)有數(shù)據(jù)仍可推動AI進一步發(fā)展，但業(yè)界正在挖掘新數(shù)據(jù)進行訓練。他說，這種動態(tài)最終將迫使人們改變目前模型的訓練方式，他將這種情況與化石燃料進行了比較：就像石油是一種有限的資源一樣，互聯(lián)網(wǎng)包含的人類生成內(nèi)容也是有限的。

“我們的數(shù)據(jù)已經(jīng)達到峰值，不會再有更多了，”Sutskever說?！拔覀儽仨毺幚砦覀儞碛械臄?shù)據(jù)，互聯(lián)網(wǎng)只有一個?！?/p>

他預測，下一代模型將“真正具有代理性”。代理已成為人工智能領域的一個流行詞。雖然 Sutskever在演講中沒有對代理進行定義，但人們普遍認為代理是一種自主的人工智能系統(tǒng)，可以自行執(zhí)行任務、做出決策并與軟件交互。

他說，未來的系統(tǒng)除了具備“代理性”之外，還將具備推理能力。與當今的人工智能不同，未來的人工智能系統(tǒng)將能夠以更接近思考的方式一步步解決問題，而當今的人工智能主要是根據(jù)模型之前看到的內(nèi)容進行模式匹配。