Приложение Tongyi от Alibaba недавно запустило привлекательную новую функцию: замену персонажей в видео одним щелчком мыши. Эта функция основана на модели Motionshop, выпущенной Alibaba Tongyi Lab в начале года, которая получила широкое внимание во всем мире, была интегрирована в приложение Tongyi и открыта для всех пользователей бесплатно. Этот шаг значительно снижает порог создания видео и анимации, предоставляя больше возможностей для создания творческого контента. В статье подробно будут представлены технические особенности модели Motionshop и планы на будущее Tongyi App.
Приложение Tongyi недавно запустило инновационную ролевую функцию, которая позволяет пользователям легко заменять персонажей в видео одним щелчком мыши. Эта функция используется в модели Motionshop, запущенной Alibaba Tongyi Lab в начале этого года. С момента своего выпуска модель привлекла большое внимание создателей по всему миру.
В настоящее время Motionshop коммерциализирован и интегрирован в приложение Tongyi, он бесплатен и открыт для всех пользователей, что открывает больше инновационных возможностей в области создания видео и анимации. Чтобы еще больше обогатить творческий опыт пользователей, приложение Tongyi планирует запустить функцию создания пользовательских персонажей в сентябре.
Motionshop — это модель искусственного интеллекта, разработанная лабораторией Tongyi и принадлежащая к популярной в настоящее время области AIGC (контент, генерируемый искусственным интеллектом). Эта модель объединяет множество передовых технологий, таких как обработка видео, отслеживание/сегментация персонажей, оценка позы, рендеринг с отслеживанием пути и т. д., что позволяет пользователям легко реализовать переход между реальностью и виртуальностью в динамических видеороликах.
До появления Motionshop традиционные спецэффекты замены персонажей в основном полагались на технологию рендеринга с трассировкой пути. Хотя эффект был реалистичным, эффективность была низкой. Если вы используете традиционное решение для растеризации в реальном времени, которое жертвует качеством рендеринга, хотя производительность будет улучшена, качество рендеринга будет значительно снижено.
Приложение Tongyi использует модель Motionshop, чтобы не только повысить эффективность редактирования видео, но и снизить порог создания, предоставляя пользователям более удобный и богатый творческий опыт. Я считаю, что в будущем, благодаря запуску функции создания пользовательских персонажей и непрерывному обновлению технологии моделей Motionshop, приложение Tongyi будет играть более важную роль в области AIGC и преподносить пользователям больше сюрпризов.