Adobe Research ร่วมมือกับ Northwestern University เพื่อพัฒนาระบบปัญญาประดิษฐ์ที่เรียกว่า Sketch2Sound เครื่องมือ AI นี้คาดว่าจะปฏิวัติวงการการออกแบบเสียง ช่วยให้ผู้ใช้สามารถสร้างเอฟเฟกต์เสียงระดับมืออาชีพและเสียงรอบข้างได้ง่ายๆ โดยการฮัมเพลง การเลียนแบบเสียง หรือคำอธิบายข้อความธรรมดา ทำให้กระบวนการออกแบบเสียงง่ายขึ้นอย่างมากและปรับปรุงประสิทธิภาพ Sketch2Sound วิเคราะห์ระดับเสียง ระดับเสียง และระดับเสียงของการป้อนข้อมูลของผู้ใช้ รวมกับคำอธิบายข้อความ เพื่อสร้างเสียงที่ต้องการอย่างชาญฉลาด เช่น การระบุเสียงนกร้องที่ผู้ใช้เลียนแบบ และรวมเข้ากับเอฟเฟกต์เสียง "บรรยากาศป่าไม้"
ล่าสุด Adobe Research ร่วมมือกับ Northwestern University เพื่อพัฒนาระบบปัญญาประดิษฐ์ที่เรียกว่า Sketch2Sound เครื่องมือนี้คาดว่าจะเปลี่ยนวิธีการทำงานของนักออกแบบเสียงโดยสิ้นเชิง Sketch2Sound ช่วยให้ผู้ใช้สามารถสร้างเอฟเฟกต์เสียงและบรรยากาศระดับมืออาชีพโดยการฮัมเพลง เลียนแบบเสียง และใช้คำอธิบายข้อความง่ายๆ
ระบบจะวิเคราะห์องค์ประกอบหลักสามประการของการป้อนข้อมูลเสียงของผู้ใช้: ระดับเสียง ระดับเสียง (ซึ่งเป็นตัวกำหนดความสว่างหรือความมืดของเสียง) และระดับเสียง จากนั้นจะรวมคุณสมบัติเหล่านี้เข้ากับคำอธิบายข้อความของผู้ใช้เพื่อสร้างเสียงที่ต้องการ ตัวอย่างเช่น เมื่อผู้ใช้เข้าสู่ "บรรยากาศป่าไม้" และส่งเสียงสั้นๆ ระบบจะจดจำเสียงเหล่านี้เป็นเสียงนกโดยอัตโนมัติโดยไม่มีคำแนะนำเฉพาะ
สิ่งที่ยอดเยี่ยมอีกประการหนึ่งของ Sketch2Sound คือความสามารถในการเข้าใจบริบท เมื่อสร้างเพลง ผู้ใช้สามารถป้อน "กลองเบส, กลองสแนร์" และส่งเสียงฮัมตามจังหวะได้ ระบบจะวางกลองเบสไว้ที่เสียงต่ำและกลองสแนร์บนเสียงสูงอย่างชาญฉลาด การประมวลผลอัจฉริยะนี้ทำให้กระบวนการออกแบบเสียงง่ายขึ้นอย่างมาก
เพื่อตอบสนองความต้องการของมืออาชีพ ทีมวิจัยยังได้สร้างเทคโนโลยีการกรองแบบพิเศษขึ้น ช่วยให้ผู้ใช้สามารถปรับความแม่นยำของเสียงที่สร้างขึ้นได้ตามความต้องการ นักออกแบบเสียงสามารถเลือกระหว่างการควบคุมที่แม่นยำมากหรือวิธีการโดยประมาณที่ผ่อนคลายกว่า และความยืดหยุ่นนี้อาจทำให้ Sketch2Sound เป็นที่นิยมโดยเฉพาะกับศิลปิน Foley การใช้เครื่องมือนี้ มืออาชีพที่สร้างเอฟเฟ็กต์เสียงสำหรับภาพยนตร์และรายการทีวีจะสามารถสร้างเอฟเฟ็กต์ได้รวดเร็วยิ่งขึ้นโดยใช้คำอธิบายเสียงและข้อความ แทนที่จะต้องจัดการกับวัตถุทางกายภาพเพื่อสร้างเสียง
แม้ว่านักวิจัยจะตั้งข้อสังเกตว่าบางครั้งลักษณะเสียงเชิงพื้นที่ในการบันทึกอินพุตอาจส่งผลเสียต่อเสียงที่ได้ แต่พวกเขากำลังดำเนินการเพื่อแก้ไขปัญหานี้ ปัจจุบัน Adobe ยังไม่ได้ประกาศว่า Sketch2Sound จะเปิดตัวเป็นผลิตภัณฑ์เชิงพาณิชย์หรือจะออกเมื่อใด
ทางเข้าโครงการ : https://hugofloresgarcia.art/sketch2sound/
ไฮไลท์:
Sketch2Sound เป็นเครื่องมือ AI ที่พัฒนาขึ้นใหม่ซึ่งสร้างเอฟเฟกต์เสียงผ่านการฮัมเพลงและคำอธิบายข้อความ
ระบบจะวิเคราะห์ระดับเสียง โทนเสียง และระดับเสียงสูงต่ำ โดยผสมผสานอินพุตเสียงของผู้ใช้เข้ากับข้อความเพื่อสร้างเอฟเฟกต์เสียงที่ตรงเป้าหมาย
เหมาะอย่างยิ่งสำหรับศิลปิน Foley โดยสามารถสร้างเอฟเฟกต์เสียงภาพยนตร์และโทรทัศน์ได้อย่างรวดเร็ว และปรับปรุงประสิทธิภาพการทำงาน
โดยรวมแล้ว ด้วยความชาญฉลาดและความสะดวกสบาย Sketch2Sound มีศักยภาพที่จะกลายเป็นผู้ช่วยอันทรงพลังสำหรับนักออกแบบเสียงและศิลปิน Foley ซึ่งช่วยปรับปรุงประสิทธิภาพการทำงานอย่างมาก แม้ว่าจะยังอยู่ในขั้นตอนการวิจัยและพัฒนา แต่การพัฒนาในอนาคตก็คุ้มค่าที่จะรอคอย ลิงก์โครงการจัดทำขึ้นเพื่อให้ผู้ใช้ที่สนใจเรียนรู้เพิ่มเติม