首頁 區(qū)塊鏈 > 正文

螞蟻集團副總裁徐鵬:開源是大模型未來趨勢,英偉達完全可被取代

出品|搜狐科技

編輯|漢雨棣

9月7日晚的外灘大會上,螞蟻集團副總裁、螞蟻集團基礎(chǔ)大模型負責(zé)人徐鵬在與搜狐科技等媒體對話時提出,大模型為行業(yè)帶來的革新在短期內(nèi)很容易被高估,但其長期效應(yīng)又可能被低估。


(資料圖片僅供參考)

徐鵬預(yù)測,開源生態(tài)是大模型的未來趨勢。開源大模型的發(fā)展給應(yīng)用的更新提供了更便利的技術(shù)支持,反之,應(yīng)用的創(chuàng)新也可以倒逼大模型的進步。

徐鵬同時從應(yīng)用方的視角對算力與硬件進行了分析。他表示英偉達并非不可替代,螞蟻進行硬件采購主要考慮的是性價比與是否能被購買到。

以下為訪談實錄,經(jīng)編輯。

媒體:大家從哪些維度判斷使A公司和B公司大模型的發(fā)展有雷同?如果說中國的企業(yè)里面做了很多雷同的大模型,美國那么多公司是不是也處于這樣的階段做重復(fù)的?中美之間大模型技術(shù)的差距是拉大還是在縮小?

徐鵬:雷同這個事情要分開看。不管是中國還是美國,實際上是有不少大模型出來,技術(shù)上面沒有本質(zhì)的區(qū)別,但是側(cè)重點不一樣,像Llama就是做一個通用的技術(shù)模型開源出去都可以獲益,GPT本身是閉源的,主要是做Chat GPT對話能力,在對齊方面要做的很好,上下文長度可以做的很長,每個既有雷同的地方又有自己的特色在里面。

中國還處于追趕的階段,很多東西在這個方面也是投入比較大,比如說百度、騰訊、阿里等等這些都是在這些方面先做到一個跟GPT做到類似的水平,但是我相信在這之后可以有很多創(chuàng)新的點,可以做到不一樣的東西,只是現(xiàn)在這個階段還是處在追齊GPT能力的階段。

媒體:目前的大模型相似之處有哪些是必要的嗎?可以通過哪些思路去創(chuàng)新,或者去拉開差異?

徐鵬:現(xiàn)在因為開源的發(fā)展,尤其是LIama和Llama2,以及國內(nèi)也有一些開源模型,給大家?guī)砹藙?chuàng)新上面的一些便利,它的應(yīng)用可以做得更容易一些,不用從頭開始浪費大量的財力去訓(xùn)練基礎(chǔ)的模型。如果大家都把力量放在大模型應(yīng)用的創(chuàng)新上面,我覺得是會反過來讓我們看到大模型還有什么做得不到位的地方,反而能促進大模型技術(shù)的發(fā)展。

媒體:怎么看開源閉源這樣的生態(tài),大模型在哪一種生態(tài)里面發(fā)展的更好一點?

徐鵬:我覺得開源肯定是趨勢,是未來。因為從操作系統(tǒng)發(fā)展的歷史上可以看出來,早期windows是閉源的,但是linux是開源的,linux是越來越多的被采納,甚至是后邊都被蘋果采納,所以后來發(fā)展就證明windows也開源了,所以我覺得各自都有各自發(fā)展的周期,但是最終像這樣的非?;A(chǔ)底層的東西應(yīng)該還是開源。

媒體:(大模型創(chuàng)業(yè)方面)越是大企業(yè)越有優(yōu)勢,而中小型的初創(chuàng)企業(yè)就越來越被擠壓掉?

徐鵬:剛才我們提到開源的模型,現(xiàn)在越來越多,質(zhì)量也越來越好,實際上對小公司是非常有利的,不用浪費大量的資源訓(xùn)練它,只是要找到一個比較好的應(yīng)用,如果能找到真正能給你帶來商業(yè)價值的應(yīng)用,那你就可以更快的,可能比大公司在這方面更快的轉(zhuǎn)身,更快的做出來商業(yè)價值,這樣的話對小公司來說也是更有一個自己存活的空間。

媒體:目前的發(fā)展而言兩位覺得未來這種國民級的爆款,或者是有突破性的應(yīng)用可能會出現(xiàn)在哪些領(lǐng)域?是像妙鴨那樣的嗎?還是某一些更實用的產(chǎn)品出現(xiàn)?

徐鵬:出現(xiàn)爆款這件事情對AI來說,我自己的感覺還是可遇不可求的東西。所謂的爆款就像ChatGPT這樣的爆款,實際上也會有一定的審美疲勞,包括像其它的一些短時間突然之間沖上很大用戶量的產(chǎn)品能夠維持,而且能夠持續(xù)增長的其實是非常少的,我自己對于應(yīng)用的發(fā)展我自己是持著“潤物細無聲”的感覺,真正好的東西一定會出現(xiàn),但是有可能不會突然之間成為爆款,但是它的發(fā)展在擅長的領(lǐng)域里面一直在發(fā)展,一直帶來一些改變,這些改變積累到一定程度之后會成為所謂的爆款。

我觀察下來自己的感覺,微軟去年和今年的發(fā)展實際上是非常令人贊嘆的,因為他既有C端的用戶,也有很強的B端的用戶,他實際是在兩條腿走路,而且他的B端在我看來是更成功的,微軟云借著大模型的發(fā)展帶來了非常可觀的用戶和收入增長,這一點非常難得。

媒體:在算力方面有感覺到緊缺嗎?

徐鵬:我自己的感覺算力永遠是緊缺的。大模型還有很多值得我們探索的東西。

Open AI可以通過數(shù)據(jù)量的變化看到模型效果的變化,但是數(shù)據(jù)配比的變化對模型到底帶來多大的影響,那個要探索起來是更困難的事情,如果是有充足的算力肯定可以有更多這方面的探索可以做,能夠做出來更多,指導(dǎo)以后開發(fā)更好大模型的工作,現(xiàn)在遠遠沒有到那個時候,所以大模型算力現(xiàn)在還是緊缺的。

媒體:從算力資源緊俏的情況來看怎么看英偉達的不可替代性?從應(yīng)用方的角度去采用這些硬件的話,會考慮哪些因素?

徐鵬:我沒有覺得(英偉達)是有非常強的不可替代性,更多的還是一個效率的問題,但是你用其它的也可以做,所以并沒有一個完全不可替代性。只是它發(fā)展最快最迅猛,因為他現(xiàn)在是馬上開箱可用,而且效率畢竟在那里,其它的公司并不是說沒有機會。英偉達有很強的軟件優(yōu)勢,我覺得是其它公司現(xiàn)在也在追趕的,除了硬件本身的能力外,軟件銜接的能力現(xiàn)在應(yīng)該是努力追趕的。

從我們來看采購硬件,一個是性價比高,另外一個是能不能買到?這兩個因素我覺得是影響我們?nèi)Q策應(yīng)該買哪些硬件,應(yīng)該買多少。

責(zé)任編輯:

關(guān)鍵詞:

最近更新

關(guān)于本站 管理團隊 版權(quán)申明 網(wǎng)站地圖 聯(lián)系合作 招聘信息

Copyright © 2005-2023 創(chuàng)投網(wǎng) - www.mallikadua.com All rights reserved
聯(lián)系我們:39 60 29 14 2@qq.com
皖I(lǐng)CP備2022009963號-3