中國自研視頻大模型面向全球上線

輸入文字描述或上傳圖片，就能生成一段逼真視頻。近日，中國自主研發(fā)的通用視頻大模型Vidu（www.vidu.studio）面向全球正式上線。據(jù)悉，這款視頻大模型開放文生視頻、圖生視頻兩大核心功能，提供4秒和8秒兩種時長選擇，分辨率最高達1080P，生成一段4秒的視頻片段經(jīng)實測僅需30秒。

圖為根據(jù)文字描述用Vidu生成的視頻畫面。（受訪者供圖）

Vidu由清華大學(xué)聯(lián)合北京生數(shù)科技有限公司共同研發(fā)，于今年4月在2024中關(guān)村論壇年會上首次發(fā)布。清華大學(xué)人工智能研究院副院長、北京生數(shù)科技首席科學(xué)家朱軍介紹，Vidu具有“長時長、高一致性、高動態(tài)性”的特點，可根據(jù)文字和圖片生成高清視頻，且能保持高流暢、高動態(tài)的畫面效果。截至目前，Vidu可支持一次性生成最長32秒的視頻。

“Vidu能模擬真實物理世界，生成細節(jié)復(fù)雜且符合物理規(guī)律的場景，例如合理的光影效果、細膩的人物表情等，還能創(chuàng)造出具有深度和復(fù)雜性的超現(xiàn)實主義內(nèi)容。”朱軍說，對于科幻、西部、浪漫、動畫等多類型電影，Vidu能生成符合對應(yīng)風格的畫面片段，還能生成影視級特效畫面，如煙霧、炫光等效果。

圖為根據(jù)文字描述用Vidu生成的特效畫面。（受訪者供圖）

據(jù)介紹，在動態(tài)性方面，Vidu可生成復(fù)雜動態(tài)鏡頭，支持大幅度、精準的動作生成，能在畫面里實現(xiàn)遠景、近景、中景、特寫等不同鏡頭的切換，能直接生成長鏡頭、追焦、轉(zhuǎn)場等效果。

記者從北京生數(shù)科技有限公司獲悉，除文生視頻和圖生視頻的兩大基礎(chǔ)功能外，為了給用戶提供更多樣化和個性化的視頻創(chuàng)作體驗，Vidu還上線“動漫風格”和“角色一致性”兩大新功能。在“圖生視頻”板塊中，利用“角色一致性”功能，用戶可上傳人像圖或自定義的角色圖，通過文字描述就可指定圖中角色在任意場景中做任意動作。該功能簡化了視頻制作流程，也提升了創(chuàng)作自由度。

據(jù)悉，操作Vidu無需申請，用戶直接使用郵箱注冊即可上手體驗。Vidu的技術(shù)突破源于研發(fā)團隊在機器學(xué)習和多模態(tài)大模型方面的長期積累，其核心技術(shù)架構(gòu)由團隊在2022年就提出并持續(xù)開展自主研發(fā)。（記者魏夢佳）