MediaTek 與快手共同宣布,推出高效端側視頻生成技術,共同探索并推進生成式 AI 技術的革新。作為對 2024 世界移動通信大會(MWC 2024)上亮相的視頻生成技術的延續(xù),該技術結合快手的 AI 模型 I2V(image to video)Adapter 與 MediaTek 天璣 9300、天璣 8300 移動平臺強勁的 AI 算力,在端側實現(xiàn)由靜態(tài)圖像生成動態(tài)視頻的創(chuàng)新體驗。用戶只需在設備上選取圖片,應用即可智能地識別照片中的人物和場景,生成自然流暢的視頻佳作,從而顯著提升視頻制作的創(chuàng)意表現(xiàn)和效率。
雙方的合作充分借助 MediaTek 天璣移動平臺先進的 AI 技術,攜手攻克了模型底層適配優(yōu)化及上層開發(fā)的系列技術及工程難題,為用戶帶來讓人耳目一新的端側生成式 AI 體驗,將改變用戶創(chuàng)作和分享內(nèi)容的方式。
I2V-Adapter 是快手 AI 團隊提出的一種適用于基于 Stable Diffusion 文生視頻擴散模型的輕量級適配模塊。作為即插即用的擴散模型輕量級模塊,該模塊專門用于由圖像到視頻的生成任務,能夠在不需要改變現(xiàn)有文本到視頻生成(T2V)模型原始結構和預訓練參數(shù)的情況下,將靜態(tài)圖像轉換成動態(tài)視頻。此外,其解耦設計使得該方案能夠與 DreamBooth、LoRa、ControlNet 等模塊無縫兼容,實現(xiàn)個性化和可控的圖像到視頻生成。
MediaTek 天璣 9300 和天璣 8300 移動平臺集成為生成式 AI 而設計的先進 NPU(神經(jīng)網(wǎng)絡處理單元),具備強勁算力和能效。在圖像生成視頻的應用中,它可以顯著加速 AI 模型的運算,配合與快手 I2V Adapter 模型的適配和優(yōu)化,實現(xiàn)更快的視頻生成速度,同時兼具低功耗特性。與此同時,天璣移動平臺可結合深度學習和實時渲染技術,對圖像內(nèi)容進行深度分析,捕捉關鍵幀,并據(jù)此生成流暢、逼真的視頻畫面效果。而 MediaTek 的實時渲染技術則能夠確保視頻在各類設備上均能帶來高畫質(zhì)表現(xiàn)。
全球短視頻市場正迎來高速增長期,行業(yè)對創(chuàng)新、高效的視頻生成技術的需求日益迫切。MediaTek 與快手基于對市場需求和趨勢的深刻洞察,為廣大用戶帶來更加先進、便捷的視頻生成工具,共同推動短視頻生態(tài)的繁榮發(fā)展。未來,雙方將持續(xù)深化合作,推動生成式 AI 技術的進一步發(fā)展,滿足市場不斷變化的需求,共同開創(chuàng)和探索短視頻技術的新紀元。
-
視頻
+關注
關注
6文章
1996瀏覽量
74547 -
AI
+關注
關注
88文章
37404瀏覽量
292751 -
Mediatek
+關注
關注
0文章
337瀏覽量
24587
原文標題:MediaTek 聯(lián)合快手推出高效端側視頻生成技術,先進生成式 AI 讓圖像動起來
文章出處:【微信號:mtk1997,微信公眾號:聯(lián)發(fā)科技】歡迎添加關注!文章轉載請注明出處。
發(fā)布評論請先 登錄
全球首個動漫專屬AI視頻生成平臺Animon,國內(nèi)版"萌動AI"正式發(fā)布
4K、多模態(tài)、長視頻:AI視頻生成的下一個戰(zhàn)場,誰在領跑?
《AI Agent 應用與項目實戰(zhàn)》----- 學習如何開發(fā)視頻應用
字節(jié)跳動即將推出多模態(tài)視頻生成模型OmniHuman
阿里云通義萬相2.1視頻生成模型震撼發(fā)布
MediaTek與知名游戲引擎開發(fā)商Cocos達成深度合作
華為云 Flexus 云服務器 X 實例 Windows 系統(tǒng)部署一鍵短視頻生成 AI 工具 moneyprinter

MediaTek聯(lián)合快手推出高效端側視頻生成技術
評論