บรรณาธิการของ Downcodes จะพาคุณไปทำความเข้าใจกับเทคโนโลยี ReCapture ล่าสุดที่เผยแพร่โดย Google Research! เทคโนโลยีอันน่าทึ่งนี้ตีความวิดีโอของคุณใหม่จากมุมมองใหม่ทั้งหมด ทำให้คุณได้รับประสบการณ์การรับชมที่ไม่เคยมีมาก่อน การตัดต่อวิดีโอไม่ใช่เรื่องง่าย แต่ใช้เทคโนโลยี AI เพื่อสร้างเวอร์ชันใหม่พร้อมวิถีกล้องที่ปรับแต่งตามวิดีโอที่คุณให้มา ทำให้ดูเหมือนคุณจะสามารถถ่ายจากกล้องหลายตัวได้ แม้แต่วิดีโอรายวันที่ถ่ายด้วยโทรศัพท์มือถือของคุณ นอกจากนี้ยังสามารถมีเอฟเฟ็กต์เหมือนภาพยนตร์ได้อีกด้วย คุณพร้อมหรือยัง? มาสำรวจความมหัศจรรย์ของ ReCapture ด้วยกัน!
เมื่อเร็วๆ นี้ Google Research ได้เปิดตัวเทคโนโลยีใหม่ที่เรียกว่า ReCapture ซึ่งช่วยให้คุณสัมผัสประสบการณ์วิดีโอของคุณเองอีกครั้งจากมุมมองใหม่ เทคโนโลยี ReCapture สามารถสร้างเวอร์ชันใหม่ ที่มีแทร็กกล้องที่ปรับแต่ง ตามวิดีโอที่ผู้ใช้ให้ไว้ ซึ่งหมายความว่าคุณสามารถดูเนื้อหาวิดีโอจากมุมมองที่ไม่พบในวิดีโอต้นฉบับ และยังคงรักษาการเคลื่อนไหวดั้งเดิมของตัวละครและฉากใน วิดีโอ
ReCapture เปรียบเสมือนโปรแกรมแก้ไขมหัศจรรย์ที่สามารถสร้างเวอร์ชันใหม่พร้อมมุมมองใหม่โดยอิงจากวิดีโอที่คุณจัดเตรียมไว้ ตัวอย่างเช่น หากคุณถ่ายวิดีโอสุนัขที่กำลังเล่นกับโทรศัพท์มือถือของคุณ ReCapture สามารถช่วยคุณสร้างวิดีโอที่ถ่ายจากมุมมองของสุนัขได้ น่าทึ่งมากใช่ไหม
แล้ว ReCapture บรรลุ "ความมหัศจรรย์" นี้ได้อย่างไร จริงๆ แล้วหลักการเบื้องหลังมันไม่ซับซ้อนเลย ขั้นแรกจะใช้โมเดลการแพร่กระจายหลายมุมมองหรือเทคโนโลยีการเรนเดอร์พอยต์คลาวด์เพื่อสร้างวิดีโอคร่าวๆ ตามมุมมองใหม่ที่คุณต้องการ วิดีโอคร่าวๆนี้เหมือนหยกไม่ขัด ภาพอาจไม่สมบูรณ์ เวลาอาจไม่สอดคล้องกัน และอาจจะแกว่งเหมือนคนเมา
ต่อไป ReCapture จะใช้อาวุธลับของตน นั่นคือเทคโนโลยี "การปรับแต่งมาสก์วิดีโออย่างละเอียด" เพื่อ "ขัดเกลา" วิดีโอคร่าวๆ นี้อย่างประณีต เทคโนโลยีนี้เปรียบเสมือนช่างฝีมือผู้มีทักษะซึ่งใช้เครื่องมือพิเศษสองชนิด ได้แก่ LoRA เชิงพื้นที่และ LoRA ชั่วคราวเพื่อซ่อมแซมและเพิ่มประสิทธิภาพวิดีโอ Spatial LoRA เป็นเหมือน "ช่างเสริมสวย" ที่รับผิดชอบในการเรียนรู้ข้อมูลตัวละครและฉากในวิดีโอต้นฉบับเพื่อให้ภาพชัดเจนและสวยงามยิ่งขึ้น Time LoRA คือ "ผู้เชี่ยวชาญด้านจังหวะ" ที่รับผิดชอบในการเรียนรู้การเคลื่อนไหวของฉากจากมุมมองใหม่ๆ เพื่อให้การเล่นวิดีโอราบรื่นและเป็นธรรมชาติยิ่งขึ้น
ด้วยความพยายามร่วมกันของ "ปรมาจารย์" ทั้งสองคนนี้ วิดีโอคร่าวๆ จึงกลายเป็นวิดีโอใหม่ที่ชัดเจน สอดคล้องกัน และมีชีวิตชีวา ไม่เพียงเท่านั้น เพื่อทำให้เอฟเฟ็กต์วิดีโอสมบูรณ์แบบยิ่งขึ้น ReCapture ยังใช้เทคโนโลยี SDEdit เพื่อเพิ่มสัมผัสสุดท้ายให้กับวิดีโอ เช่นเดียวกับการแต่งหน้า ทำให้วิดีโอมีความละเอียดและละเอียดอ่อนยิ่งขึ้น
นักวิจัยของ Google กล่าวว่า ReCapture สามารถจัดการวิดีโอประเภทต่างๆ และการเปลี่ยนมุมมองได้โดยไม่ต้องใช้ข้อมูลการฝึกอบรมจำนวนมาก ซึ่งหมายความว่าแม้ว่าคุณจะเป็นเพียงผู้ชื่นชอบวิดีโอธรรมดาๆ คุณก็สามารถสร้างวิดีโอ "หลายกล้อง" ระดับมืออาชีพได้อย่างง่ายดายด้วย ReCapture
ที่อยู่โครงการ: https://generative-video-cam-controls.github.io/
การเกิดขึ้นของเทคโนโลยี ReCapture ได้นำความเป็นไปได้ใหม่ๆ มาสู่การสร้างสรรค์วิดีโออย่างไม่ต้องสงสัย ช่วยให้ขั้นตอนการผลิตวิดีโอหลายมุมมองง่ายขึ้น ช่วยให้ผู้คนจำนวนมากขึ้นได้สัมผัสกับความสุขในการสร้างสรรค์ได้อย่างง่ายดาย ฉันเชื่อว่าในอนาคต ReCapture จะถูกนำไปใช้ในสาขาต่างๆ มากขึ้นและทำให้เราประหลาดใจมากขึ้น!