-
騰訊混元文生圖大模型宣布開源,未來還將跟QQ、企微和游戲做聯(lián)動
-
周毅是故意的還是不小心?
文/觀察者網(wǎng) 周毅 編輯 張廣凱
5月14日,騰訊宣布旗下混元文生圖大模型全面升級并對外開源。據(jù)悉,這是業(yè)內(nèi)首個中文原生的DiT架構(gòu)文生圖開源模型。它支持中英文雙語輸入及理解,參數(shù)量15億。目前,該大模型已在Hugging Face平臺和Github上發(fā)布,包含模型權(quán)重、推理代碼、模型算法等完整模型,可供企業(yè)與個人開發(fā)者免費商用。
不同模型在圖文一致性等方面的表現(xiàn) 圖源Hugging Face
騰訊混元文生圖負責(zé)人蘆清林對觀察者網(wǎng)表示,提升技術(shù)能力和更廣泛的應(yīng)用,是該大模型未來的兩個方向。
“從技術(shù)能力的提升來說,如何讓圖片生成的速度更快,生成的質(zhì)量更好,是我們永遠都會追求的一個技術(shù)方向,它似乎是沒有止境的?!碧J清林表示,項目團隊也希望該大模型,能在騰訊內(nèi)外更廣泛的業(yè)務(wù)場景應(yīng)用起來。事實上,從去年開始,騰訊混元文生圖就和騰訊的廣告業(yè)務(wù)進行了一些協(xié)作。
“今年會跟社交業(yè)務(wù),包括QQ、企業(yè)微信等很多業(yè)務(wù)場景做聯(lián)動。跟他們合作做一些新的技術(shù)能力?!碧J清林透露,同時,該大模型也會跟騰訊游戲做一些深入的技術(shù)合作,希望能夠在美術(shù)場景中應(yīng)用起來。包括QQ音樂等在內(nèi),也都是該大模型未來將會提供支撐的業(yè)務(wù)場景。
大模型的優(yōu)異表現(xiàn),往往離不開先進的技術(shù)架構(gòu)。過去,視覺生成擴散模型主要基于U-Net架構(gòu),但隨著參數(shù)量的提升,基于Transformer架構(gòu)的擴散模型展現(xiàn)出了更好的擴展性,有助于進一步提升模型的生成質(zhì)量及效率。升級后的騰訊混元文生圖大模型采用了全新的DiT架構(gòu)(即Diffusion With Transformer),這也是Sora和Stable Diffusion 3的同款架構(gòu)和關(guān)鍵技術(shù),它就是一種基于Transformer架構(gòu)的擴散模型。
公開資料顯示,在DiT架構(gòu)的基礎(chǔ)之上,騰訊混元文生圖大模型還在算法層面優(yōu)化了模型的長文本理解能力,能夠支持最多256字符的內(nèi)容輸入,同時賦予其多輪生圖和對話能力:在一張初始生成圖片的基礎(chǔ)上,用戶通過自然語言描述,即可對其進行調(diào)整。
用戶通過“對話”,即可調(diào)整文生圖的具體內(nèi)容 測試截圖
此外,“中文原生”也是騰訊混元文生圖大模型的一大亮點,此前,像Stable Diffusion等主流開源模型核心數(shù)據(jù)集以英文為主,對中國的語言、美食、文化、習(xí)俗理解有限。作為首個中文原生的DiT模型,混元文生圖具備中英文雙語理解及生成能力,在古詩詞、俚語、傳統(tǒng)建筑、中華美食等中國元素的生成上表現(xiàn)出色。
混元文生圖大模型的部分能力展示 圖源Hugging Face
本文系觀察者網(wǎng)獨家稿件,未經(jīng)授權(quán),不得轉(zhuǎn)載。
- 責(zé)任編輯: 周毅 
-
搭載英特爾處理器,華為再推AI PC等10余款新品
2024-05-15 18:50 觀網(wǎng)財經(jīng)-科創(chuàng) -
“比行業(yè)便宜99.3%”,字節(jié)打響大模型價格戰(zhàn)
2024-05-15 18:06 觀網(wǎng)財經(jīng)-科創(chuàng) -
GMV兩位數(shù)增長,淘寶天貓真的在回歸用戶了
2024-05-15 17:59 觀網(wǎng)財經(jīng)-互聯(lián)網(wǎng) -
杭州市臨安區(qū):收購一批商品住房用作公共租賃住房
2024-05-15 16:19 觀網(wǎng)財經(jīng)-房產(chǎn) -
美國征收關(guān)稅翻倍,多家光伏頭部企業(yè):基本沒有影響
2024-05-15 13:31 觀網(wǎng)財經(jīng)-消費 -
成都高投集團收購鼎橋通信
2024-05-15 08:57 華為 -
深圳建筑設(shè)計新要求:減少公攤面積
2024-05-14 19:17 觀網(wǎng)財經(jīng)-房產(chǎn) -
騰訊公布2024一季報:利潤大漲62%,視頻號用戶時長增長超80%
2024-05-14 18:16 觀網(wǎng)財經(jīng)-互聯(lián)網(wǎng) -
手機巨頭激烈混戰(zhàn),vivo再推6nm芯片加碼影像
2024-05-14 14:49 觀網(wǎng)財經(jīng)-科創(chuàng) -
碧桂園楊惠妍:房地產(chǎn)行業(yè)一定會迎來春天
2024-05-13 21:31 觀網(wǎng)財經(jīng)-房產(chǎn) -
“鲇魚”來襲!特斯拉上海儲能超級工廠獲開工許可
2024-05-13 16:07 觀網(wǎng)ESG -
女子收到7年前1414元滴滴賬單,滴滴致歉
2024-05-12 23:01 觀網(wǎng)財經(jīng)-互聯(lián)網(wǎng) -
創(chuàng)始人稱創(chuàng)維汽車能治病延壽?官方回應(yīng):斷章取義
2024-05-11 16:55 觀網(wǎng)財經(jīng)-汽車 -
最快本月申請?Shein或選擇倫敦上市
2024-05-11 11:40 觀網(wǎng)財經(jīng)-海外 -
Visa難以進入中國市場,是因為中國的“科技民族主義”嗎?
2024-05-11 08:02 -
中芯國際凈利大跌68%,但當(dāng)務(wù)之急并非利潤
2024-05-10 22:30 觀網(wǎng)財經(jīng)-科創(chuàng) -
連平:釋放購房需求,接下來應(yīng)從供給端入手
2024-05-10 21:52 觀網(wǎng)財經(jīng)-房產(chǎn) -
匯率跌至歷史新低,誰背刺了越南?
2024-05-10 21:38 -
璩靜風(fēng)波后,百度資深副總裁高調(diào)談?wù)摗按髲S病”
2024-05-10 16:25 觀網(wǎng)財經(jīng)-互聯(lián)網(wǎng) -
“百度大廠病問題,管理層也急”
2024-05-10 15:39 觀網(wǎng)財經(jīng)-互聯(lián)網(wǎng)
相關(guān)推薦 -
-
沉默兩天后,法國政府承認:他是我們的人,趕緊釋放 評論 40“美國代表團‘放鴿子’,不去印度談判了” 評論 122最新聞 Hot
-
美國豆農(nóng)扛不住了!“沒有一個市場能與中國相提并論”
-
“特朗普拍到我坐在帳篷旁,然后推土機就來了”
-
“親自來看看,巴西熱愛美中俄......”
-
沉默兩天后,法國政府承認:他是我們的人,趕緊釋放
-
“特朗普出人意料地邀請,普京接受了”
-
“美國代表團‘放鴿子’,不去印度談判了”
-
怕澤連斯基再搞砸,歐洲派“特朗普最愛的對話者”出馬
-
這次會吵嗎?他們仨又要在白宮會面了
-
“特朗普轉(zhuǎn)告,澤連斯基說不”
-
“SpaceX靠美國政府合同賺錢,卻幾乎不繳納聯(lián)邦所得稅”
-
“白素貞”被聘為青城山文旅推薦官
-
李滔,跨省履新云南
-
“上海第三機場”有新進展
-
印度高官膨脹了:不想當(dāng)下一個中國
-
“普特會”談近3小時未達成協(xié)議,普京:下次去莫斯科
-
新西蘭防長咋呼:中國太讓我意外了,敲醒我
-