-
Meta推“最強(qiáng)開(kāi)源模型”,扎克伯格稱(chēng)用閉源防中國(guó)行不通
北京時(shí)間7月24日,F(xiàn)acebook母公司Meta Platforms Inc.發(fā)布了全新人工智能模型“Llama 3.1”,這是該公司目前為止推出的最強(qiáng)大開(kāi)源模型,號(hào)稱(chēng)能夠比肩最好的閉源模型。
與此同時(shí),Meta的CEO馬克·扎克伯格發(fā)表公開(kāi)信,闡述了他為何支持AI開(kāi)源。
扎克伯格稱(chēng)其為“藝術(shù)的起點(diǎn)”,表示Llama 3.1擁有大范圍新的能力,包括改善推理以幫助處理復(fù)雜的數(shù)學(xué)問(wèn)題或即時(shí)合成一整本書(shū)。
Meta公司在150多個(gè)涵蓋多種語(yǔ)言的基準(zhǔn)數(shù)據(jù)集上評(píng)估了性能,Llama 3.1模型在各個(gè)基準(zhǔn)上皆有不錯(cuò)的表現(xiàn)。此外,還進(jìn)行了廣泛的人工評(píng)估,在真實(shí)場(chǎng)景中將Llama 3.1與競(jìng)爭(zhēng)模型進(jìn)行了比較。實(shí)驗(yàn)評(píng)估表明,Llama 3.1能夠在一系列任務(wù)中與領(lǐng)先的基礎(chǔ)模型相媲美,包括GPT-4、GPT-4o和Claude3.5Sonnet。
Llama 3.1 405B與其它模型多個(gè)基準(zhǔn)的評(píng)估對(duì)比Meta官網(wǎng)
官方稱(chēng),開(kāi)發(fā)人員提高了模型對(duì)用戶(hù)指令的響應(yīng)能力、質(zhì)量和詳細(xì)指令遵循能力,同時(shí)確保高水平的安全性,使其能夠跨功能擴(kuò)展微調(diào)數(shù)據(jù)量。
根據(jù)Meta發(fā)布信息,Llama 3.1模型包含4050億個(gè)參數(shù),是近年來(lái)參數(shù)規(guī)模最大的模型之一。這些模型支持多種語(yǔ)言,上下文長(zhǎng)度顯著增加,達(dá)到128K,使用最先進(jìn)的工具,推理能力也更強(qiáng)。這使得我們的最新模型能夠支持高級(jí)用例,例如長(zhǎng)篇文本摘要、多語(yǔ)言對(duì)話(huà)代理和編碼助手。
Llama 3.1模型對(duì)比Meta官網(wǎng)文件
作為Meta迄今為止最大的模型,Llama 3.1從16位(BF16)量化為8位(FP8)數(shù)字,有效降低了所需的計(jì)算要求并允許模型在單個(gè)服務(wù)器節(jié)點(diǎn)內(nèi)運(yùn)行,使用超過(guò)16000個(gè)H100 GPU進(jìn)行訓(xùn)練,這是全球迄今為止性能最強(qiáng)大、參數(shù)規(guī)模最大的開(kāi)源模型。
該模型主要用于為Meta內(nèi)部和外部開(kāi)發(fā)人員的聊天機(jī)器人提供支持,具備廣泛的新功能,包括改進(jìn)的推理能力,幫助解決復(fù)雜的數(shù)學(xué)問(wèn)題或瞬間綜合整本書(shū)的文本。它還具有生成式AI功能,可以通過(guò)文本提示生成圖像。
同時(shí),扎克伯格發(fā)表公開(kāi)信《Open Source AI Is the Path Forward》,闡述了“開(kāi)源為何對(duì)開(kāi)發(fā)者、對(duì)Meta和對(duì)世界都有好處”。
自ChatGPT爆火以來(lái),將其開(kāi)源的呼聲未曾斷絕??删驮贑hatGPT2發(fā)布之后,OpenAI選擇了閉源發(fā)展。阿里云、智譜和清華EKG、百川智能等,選擇了開(kāi)源,華為則出于數(shù)據(jù)隱私和商業(yè)收益考慮,盤(pán)古大模型就選擇了閉源,在這場(chǎng)全球大模型軍備賽中,有關(guān)開(kāi)源發(fā)展和閉源深耕的爭(zhēng)論不止不休。
扎克伯格公開(kāi)信中提出,Llama需要發(fā)展成為一個(gè)完整的生態(tài)系統(tǒng),包括工具、效率提高、芯片優(yōu)化和其他集成,這是僅依靠Meta自己使用做不到的;Llama有信心在高度競(jìng)爭(zhēng)中保持優(yōu)勢(shì),而成為行業(yè)標(biāo)準(zhǔn)的道路是一代又一代地保持競(jìng)爭(zhēng)力、高效和開(kāi)放;最后,出售AI模型訪(fǎng)問(wèn)權(quán)限不是公司的商業(yè)模式。這意味著公開(kāi)發(fā)布Llama不會(huì)削弱企業(yè)的收入、可持續(xù)性或投資研究的能力。
扎克伯格還指出,開(kāi)源將確保全世界更多的人能夠享受AI帶來(lái)的好處和機(jī)會(huì),權(quán)力不會(huì)集中在少數(shù)公司手中,并且該技術(shù)可以更均勻、更安全地應(yīng)用于整個(gè)社會(huì)。
扎克伯格認(rèn)為最好的策略是建立一個(gè)強(qiáng)大的開(kāi)放生態(tài)系統(tǒng),使得行業(yè)龍頭公司與政府和盟友密切合作,以確保他們能夠最好地利用最新進(jìn)展,并在長(zhǎng)期內(nèi)實(shí)現(xiàn)可持續(xù)的先發(fā)優(yōu)勢(shì)。
關(guān)于中國(guó),他在文中提到,“有些人認(rèn)為,美國(guó)必須采用閉源,以防止中國(guó)獲得這些模型”,但“這是行不通的,只會(huì)讓美國(guó)及其盟友處于不利地位”。
據(jù)彭博社報(bào)道,扎克伯格還補(bǔ)充說(shuō),認(rèn)為美國(guó)在人工智能方面會(huì)領(lǐng)先中國(guó)數(shù)年也是不現(xiàn)實(shí)的。但他指出,即使是數(shù)月的小幅領(lǐng)先,也可以隨著時(shí)間的推移“累積”,讓美國(guó)占據(jù)明顯優(yōu)勢(shì)。
本文系觀察者網(wǎng)獨(dú)家稿件,未經(jīng)授權(quán),不得轉(zhuǎn)載。
- 責(zé)任編輯: 李亞麗 
-
?對(duì)華壁壘、千億補(bǔ)貼都沒(méi)用,破產(chǎn)潮席卷美國(guó)光伏
2024-07-24 12:01 觀網(wǎng)財(cái)經(jīng)-宏觀 -
中國(guó)出海商家,可能是第一批吃到AI螃蟹的人
2024-07-24 11:53 人工智能 -
河南省長(zhǎng):希望富士康進(jìn)一步擴(kuò)大在豫產(chǎn)業(yè)布局
2024-07-24 11:42 富士康 -
華誼兄弟10億買(mǎi)來(lái)的馮小剛公司股權(quán),如今3.5億賣(mài)掉抵債
2024-07-24 11:27 中國(guó)電影 -
華為面向全球招募天才少年:不限學(xué)校、專(zhuān)業(yè)、學(xué)歷
2024-07-24 11:19 華為 -
面對(duì)“全球過(guò)剩”危機(jī),今天的中國(guó)需要什么樣的資本?
2024-07-24 07:51 -
云計(jì)算洗牌:運(yùn)營(yíng)商云兇猛,百度真的開(kāi)始發(fā)力了
2024-07-23 18:03 -
美國(guó)敦促墨西哥未來(lái)兩年擴(kuò)大芯片投資
2024-07-23 17:25 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
武漢上半年GDP同比增長(zhǎng)5.3%
2024-07-23 16:05 -
英特爾暫停投資,歐洲芯片制造雄心受阻?
2024-07-23 13:06 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
10萬(wàn)塊H100!馬斯克宣布啟動(dòng)全球最大AI集群
2024-07-23 10:40 人工智能 -
全固態(tài)電池新突破!中科大開(kāi)發(fā)出新型硫化物固態(tài)電解質(zhì)
2024-07-23 10:12 -
三中全會(huì)剛開(kāi)完,美企高管組團(tuán)來(lái)華
2024-07-23 09:19 -
英偉達(dá)閹割版H20芯片也將對(duì)華禁售?
2024-07-22 18:11 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
財(cái)政部:上半年全國(guó)稅收收入同比下降5.6%
2024-07-22 17:50 金融觀察 -
長(zhǎng)江存儲(chǔ)再次在美國(guó)起訴美光
2024-07-22 17:04 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
人工智能往事:大模型的理論基礎(chǔ),曾一度被判死刑
2024-07-22 16:56 -
中央金融紀(jì)監(jiān)工委,首次亮相
2024-07-22 16:49 高層人事 -
對(duì)美加征關(guān)稅商品第十五次排除延期清單公布
2024-07-22 16:27 中美關(guān)系 -
央行:下調(diào)常備借貸便利利率10個(gè)基點(diǎn)
2024-07-22 14:21
相關(guān)推薦 -
美兩員“大將”施壓未果,日本反倒成了“難啃的骨頭” 評(píng)論 52美國(guó)放風(fēng):伊朗有動(dòng)作了 評(píng)論 76靠萬(wàn)斯“決勝一票”,“大而美”法案驚險(xiǎn)闖關(guān)參議院 評(píng)論 169電氣化已落后亞洲,“大而美”法案或令美國(guó)雪上加霜 評(píng)論 76為什么這支國(guó)足被普遍看好? 評(píng)論 99最新聞 Hot
-
美兩員“大將”施壓未果,日本反倒成了“難啃的骨頭”
-
白宮找補(bǔ):美國(guó)很強(qiáng),不信去問(wèn)伊朗
-
終于換了,特朗普:我很滿(mǎn)意
-
何君堯:建議給皇后大道、維多利亞公園改名
-
“美國(guó)自毀長(zhǎng)城,中企憑高性?xún)r(jià)比一路高歌猛進(jìn)”
-
兩國(guó)矛盾激化,阿媒突然發(fā)文:收到匿名材料,是俄軍擊中的
-
裝不裝空調(diào),法國(guó)政客都能吵起來(lái)
-
潛入醫(yī)院裝電詐設(shè)備,騙走30萬(wàn)!今年已發(fā)生多起
-
美報(bào)告炒作:中企占比近10%,“五角大樓供應(yīng)鏈極其脆弱”
-
“歐洲定居者對(duì)澳大利亞原住民,犯下種族滅絕罪”
-
好一個(gè)“舉賢不避親”,特朗普推薦兒媳參選
-
開(kāi)庭前妻子墜樓身亡,柯文哲前副手痛哭:臺(tái)灣怎么變成這樣
-
美國(guó)放風(fēng):伊朗有動(dòng)作了
-
“中方正考慮邀請(qǐng)李在明出席”
-
“中國(guó)洋垃圾禁令震動(dòng)全球”,馬來(lái)西亞也跟了
-
靠萬(wàn)斯“決勝一票”,“大而美”法案驚險(xiǎn)闖關(guān)參議院
快訊- 中日貨運(yùn)“主干道”迎變局, 兩大日航合并案獲中國(guó)“有條件”放行
- 國(guó)家信息中心大數(shù)據(jù)發(fā)展部主任于施洋被查
- 第十三屆吉林省政協(xié)常務(wù)委員王愛(ài)明被查
- 賽博釣魚(yú)?俄軍發(fā)明新方法擊落烏軍無(wú)人機(jī)
- 抗戰(zhàn)史上的今天:7月2日
- 特朗普參觀“鱷魚(yú)惡魔島”:拜登就想把我關(guān)在這兒,這XX養(yǎng)的
- 探訪(fǎng)首屆阿布扎比基礎(chǔ)設(shè)施峰會(huì):中國(guó)企業(yè)用“Plan X”驚喜世界
- 借中國(guó)電動(dòng)車(chē)東風(fēng),現(xiàn)代起亞欲在歐洲復(fù)刻美國(guó)的擴(kuò)張
-