觀察員
-
騰訊混元文生圖大模型宣布開源，未來還將跟QQ、企微和游戲做聯動
-
周毅是故意的還是不小心？
文/觀察者網 周毅 編輯 張廣凱
5月14日，騰訊宣布旗下混元文生圖大模型全面升級并對外開源。據悉，這是業內首個中文原生的DiT架構文生圖開源模型。它支持中英文雙語輸入及理解，參數量15億。目前，該大模型已在Hugging Face平臺和Github上發布，包含模型權重、推理代碼、模型算法等完整模型，可供企業與個人開發者免費商用。
不同模型在圖文一致性等方面的表現 圖源Hugging Face
騰訊混元文生圖負責人蘆清林對觀察者網表示，提升技術能力和更廣泛的應用，是該大模型未來的兩個方向。
“從技術能力的提升來說，如何讓圖片生成的速度更快，生成的質量更好，是我們永遠都會追求的一個技術方向，它似乎是沒有止境的。”蘆清林表示，項目團隊也希望該大模型，能在騰訊內外更廣泛的業務場景應用起來。事實上，從去年開始，騰訊混元文生圖就和騰訊的廣告業務進行了一些協作。
“今年會跟社交業務，包括QQ、企業微信等很多業務場景做聯動。跟他們合作做一些新的技術能力。”蘆清林透露，同時，該大模型也會跟騰訊游戲做一些深入的技術合作，希望能夠在美術場景中應用起來。包括QQ音樂等在內，也都是該大模型未來將會提供支撐的業務場景。
大模型的優異表現，往往離不開先進的技術架構。過去，視覺生成擴散模型主要基于U-Net架構，但隨著參數量的提升，基于Transformer架構的擴散模型展現出了更好的擴展性，有助于進一步提升模型的生成質量及效率。升級后的騰訊混元文生圖大模型采用了全新的DiT架構（即Diffusion With Transformer），這也是Sora和Stable Diffusion 3的同款架構和關鍵技術，它就是一種基于Transformer架構的擴散模型。
公開資料顯示，在DiT架構的基礎之上，騰訊混元文生圖大模型還在算法層面優化了模型的長文本理解能力，能夠支持最多256字符的內容輸入，同時賦予其多輪生圖和對話能力：在一張初始生成圖片的基礎上，用戶通過自然語言描述，即可對其進行調整。
用戶通過“對話”，即可調整文生圖的具體內容 測試截圖
此外，“中文原生”也是騰訊混元文生圖大模型的一大亮點，此前，像Stable Diffusion等主流開源模型核心數據集以英文為主，對中國的語言、美食、文化、習俗理解有限。作為首個中文原生的DiT模型，混元文生圖具備中英文雙語理解及生成能力，在古詩詞、俚語、傳統建筑、中華美食等中國元素的生成上表現出色。
混元文生圖大模型的部分能力展示 圖源Hugging Face
本文系觀察者網獨家稿件，未經授權，不得轉載。
- 責任編輯: 周毅
-
搭載英特爾處理器，華為再推AI PC等10余款新品
2024-05-15 18:50 觀網財經-科創 -
“比行業便宜99.3%”，字節打響大模型價格戰
2024-05-15 18:06 觀網財經-科創 -
GMV兩位數增長，淘寶天貓真的在回歸用戶了
2024-05-15 17:59 觀網財經-互聯網 -
杭州市臨安區：收購一批商品住房用作公共租賃住房
2024-05-15 16:19 觀網財經-房產 -
美國征收關稅翻倍，多家光伏頭部企業：基本沒有影響
2024-05-15 13:31 觀網財經-消費 -
成都高投集團收購鼎橋通信
2024-05-15 08:57 華為 -
深圳建筑設計新要求：減少公攤面積
2024-05-14 19:17 觀網財經-房產 -
騰訊公布2024一季報：利潤大漲62%，視頻號用戶時長增長超80%
2024-05-14 18:16 觀網財經-互聯網 -
手機巨頭激烈混戰，vivo再推6nm芯片加碼影像
2024-05-14 14:49 觀網財經-科創 -
碧桂園楊惠妍：房地產行業一定會迎來春天
2024-05-13 21:31 觀網財經-房產 -
“鲇魚”來襲！特斯拉上海儲能超級工廠獲開工許可
2024-05-13 16:07 觀網ESG -
女子收到7年前1414元滴滴賬單，滴滴致歉
2024-05-12 23:01 觀網財經-互聯網 -
創始人稱創維汽車能治病延壽？官方回應：斷章取義
2024-05-11 16:55 觀網財經-汽車 -
最快本月申請？Shein或選擇倫敦上市
2024-05-11 11:40 觀網財經-海外 -
Visa難以進入中國市場，是因為中國的“科技民族主義”嗎？
2024-05-11 08:02 -
中芯國際凈利大跌68%，但當務之急并非利潤
2024-05-10 22:30 觀網財經-科創 -
連平：釋放購房需求，接下來應從供給端入手
2024-05-10 21:52 觀網財經-房產 -
匯率跌至歷史新低，誰背刺了越南？
2024-05-10 21:38 -
璩靜風波后，百度資深副總裁高調談論“大廠病”
2024-05-10 16:25 觀網財經-互聯網 -
“百度大廠病問題，管理層也急”
2024-05-10 15:39 觀網財經-互聯網
相關推薦 -
-
“中國在非洲真正贏得了民心，就連斯威士蘭…” 評論 48
“日企抱團是絕望之舉，中國工廠效率質量都是第一” 評論 101
“她下月訪華，盡管特朗普團隊表達了擔憂” 評論 50
“中國有能力讓夢想照進現實，將贏得史詩般競爭” 評論 116
美國政府“逃過一劫” 評論 126最新聞 Hot-
“中國在非洲真正贏得了民心，就連斯威士蘭…”
-
“日企抱團是絕望之舉，中國工廠效率質量都是第一”
-
“中國有能力讓夢想照進現實，將贏得史詩般競爭”
-
被災民暴罵到當場破防，馬克龍發飆：你該慶幸你在法國！
-
美高校敦促國際學生抓緊回來：萬一把中印拉黑名單呢
-
美國政府“逃過一劫”
-
“澤連斯基要求歐盟新外長：對華批評要降調”
-
澳大利亞來了，中國就得走人？澳總理這么回應
-
美媒感慨：基建狂魔發力，我們又要被超越了
-
英國剛公布新任大使，特朗普顧問就痛罵：傻X
-
“來自中國的老大哥能確保我們…”
-
俄羅斯的報復來了
-
澤連斯基罵普京“傻子”，俄方怒斥
-
還在扯皮中國，“涉華條款全刪了”
-
中國“光伏OPEC”發文嚴厲質問央企，怎么回事？
-
“最后一道貿易障礙，中國解除了！”
-
Copyright ? 2014-2024 觀察者 All rights reserved。
滬ICP備10213822號-2 互聯網新聞信息服務許可證：31220170001
網登網視備（滬）02020000041-1號 互聯網宗教信息服務許可證：滬（2024）0000009
廣播電視節目制作經營許可證：（滬）字第03952號
增值電信業務經營許可證：滬B2-20210968 違法及不良信息舉報電話：021-62376571
滬公網安備 31010502000027號
中國互聯網舉報中心
上海市互聯網違法與不良信息舉報中心
