阿里巴巴開源了其全新AI影片生成框架DreaMoving,該框架基於擴散模型,能夠實現對人物運動的精準控制,從而產生高度客製化的影片。使用者只需提供人物圖像和簡單的文字描述,即可產生相應的視頻,並能靈活調整人物動作、背景和服裝等細節。 DreaMoving透過Video ControlNet和Content Guider組件,實現了對運動和外觀的精確控制,展現了其強大的泛化能力和在AI視訊生成領域的突破性進展。這為創意影片製作、影視特效等領域提供了新的可能性。
阿里巴巴宣布開源DreaMoving框架,基於擴散模型實現對人物運動的理想控制。該框架允許用戶生成高度客製化的人類視頻,包括沙灘上微笑的女孩、中央公園跳舞的亞洲女孩等。透過引入Video ControlNet和Content Guider組件,實現對運動和外觀的精準控制。使用者只需提供人像圖和簡單提示,即可產生對應視頻,並支援改變提示、人物背景和服裝。 DreaMoving在AI影片生成領域展現出強大的泛化能力,能夠根據指導序列和簡單描述生成高品質影片。
DreaMoving框架的開源,標誌著AI視訊生成技術邁向新的階段,其強大的功能和易用性將為更多開發者和用戶帶來便利,推動AI視頻生成技術在各領域的應用和發展,值得期待其後續的更新與改進。