อาลีบาบาได้โอเพ่นซอร์สเฟรมเวิร์กการสร้างวิดีโอ AI ใหม่ DreaMoving ซึ่งใช้โมเดลการแพร่กระจายและสามารถควบคุมการเคลื่อนไหวของตัวละครได้อย่างแม่นยำเพื่อสร้างวิดีโอที่ปรับแต่งได้สูง ผู้ใช้เพียงแค่ต้องจัดเตรียมรูปภาพตัวละครและคำอธิบายข้อความธรรมดาเพื่อสร้างวิดีโอที่เกี่ยวข้อง และสามารถปรับรายละเอียดได้อย่างยืดหยุ่น เช่น การเคลื่อนไหวของตัวละคร พื้นหลัง และเสื้อผ้า DreaMoving บรรลุการควบคุมการเคลื่อนไหวและรูปลักษณ์ที่แม่นยำผ่านทาง Video ControlNet และส่วนประกอบ Content Guider ซึ่งแสดงให้เห็นถึงความสามารถในการวางนัยทั่วไปที่แข็งแกร่งและความก้าวหน้าที่ก้าวล้ำในด้านการสร้างวิดีโอ AI สิ่งนี้มอบความเป็นไปได้ใหม่ๆ สำหรับการผลิตวิดีโอเชิงสร้างสรรค์ สเปเชียลเอฟเฟกต์ภาพยนตร์และโทรทัศน์ และสาขาอื่นๆ
อาลีบาบาได้ประกาศเฟรมเวิร์ก DreaMoving แบบโอเพ่นซอร์สเพื่อให้บรรลุการควบคุมการเคลื่อนไหวของตัวละครตามแบบจำลองการแพร่กระจายในอุดมคติ เฟรมเวิร์กนี้ช่วยให้ผู้ใช้สามารถสร้างวิดีโอที่ปรับแต่งได้สูงของมนุษย์ รวมถึงหญิงสาวยิ้มบนชายหาด สาวเอเชียเต้นรำใน Central Park และอีกมากมาย ด้วยการแนะนำส่วนประกอบ Video ControlNet และ Content Guider ทำให้สามารถควบคุมการเคลื่อนไหวและรูปลักษณ์ได้อย่างแม่นยำ ผู้ใช้เพียงแค่ต้องจัดเตรียมภาพบุคคลและข้อความแจ้งง่ายๆ เพื่อสร้างวิดีโอที่เกี่ยวข้อง และรองรับการเปลี่ยนข้อความแจ้ง พื้นหลังของตัวละคร และเสื้อผ้า DreaMoving ได้แสดงให้เห็นถึงความสามารถในการวางภาพรวมที่แข็งแกร่งในด้านการสร้างวิดีโอ AI และสามารถสร้างวิดีโอคุณภาพสูงตามลำดับที่แนะนำและคำอธิบายง่ายๆ
เฟรมเวิร์กโอเพ่นซอร์สของ DreaMoving ถือเป็นก้าวใหม่ของเทคโนโลยีการสร้างวิดีโอ AI ฟังก์ชันอันทรงพลังและความง่ายในการใช้งานจะนำความสะดวกสบายมาสู่นักพัฒนาและผู้ใช้มากขึ้น และส่งเสริมการประยุกต์ใช้และพัฒนาเทคโนโลยีการสร้างวิดีโอ AI ในสาขาต่างๆ อย่างคุ้มค่า รอคอยที่จะได้รับการอัปเดตและการปรับปรุงในภายหลัง