В последнем уроке YouTube, выпущенном мастером Джерри Давосом, подробно объясняется, как использовать Comfy UI для изменения светового эффекта видео и его рендеринга. В руководстве рассматриваются установка программного обеспечения, рабочий процесс, настройка параметров и расширенные методы, а также приводятся подробные шаги и снимки экрана для облегчения обучения и практики пользователей. Независимо от того, являетесь ли вы новичком или опытным пользователем, вы можете получить от этого большую пользу и быстро освоить методы настройки видеоосвещения Comfy UI для повышения эффективности постобработки видео. В руководстве также тщательно представлены ссылки для загрузки файлов рабочего процесса и онлайн-адреса запуска RunComfy, что снижает порог обучения и позволяет пользователям легко приступить к работе.
Установка и подготовка
Для начала вам необходимо скачать файл рабочего процесса Джерри Давоса, ссылка есть в конце статьи. После загрузки перетащите его прямо в пользовательский интерфейс Comfy, и вам будет предложено указать недостающие узлы. Не волнуйтесь, используйте менеджер, чтобы установить его одним щелчком мыши, это быстро и легко.
Если в процессе установки у вас возникнут проблемы, Джерри Давос также предоставит ссылку на помощь, нажмите, чтобы получить решение. Ниже приводится подробное руководство Джерри Давоса:
Обзор рабочего процесса
Рабочий процесс умело разделен на несколько групп, каждая из которых имеет свою уникальную функциональность: от настроек ввода до сохранения вывода, и все это с первого взгляда.
Настройки входа: включая настройки входного кольца и настройки источника видео.
Группа различий анимации: используется для настройки световых эффектов.
Группа композиции: композиция IC и световой мэппинг.
Группа Case Sampler: контролирует количество шагов при рендеринге изображения.
Уточнение: Увеличение разрешения рендеринга.
Запрос на ввод: Опишите свое изображение и новые условия освещения.
Введите настройки
Здесь есть 5 настроек:
Шаги сэмплера: определяет общее количество шагов, предпринятых KSampler для рендеринга изображения. Его не следует менять. [по умолчанию 26]
Detail Enhancer: улучшает мелкие детали окончательного рендеринга. [Используйте значения от 0,1 до 1]
Начальное число: оно управляет начальным числом генерации каждого KSampler.
Sampler CFG: управляет значением CFG KSampler.
Усовершенствованное обновление: работает как ремонтная стоимость с высоким разрешением. [Для достижения наилучших результатов используйте 1,1–1,6]
Запрос на ввод
Положительный совет: введите совет, который лучше всего описывает изображение в новом освещении.
Отрицательное примечание: настроено для достижения наилучших результатов. Пожалуйста, не стесняйтесь редактировать.
Узел кодирования текста клипа: помогает кодировать текст для достижения максимального качества. Оставьте значение «Полный».
Модели и Лоры
Контрольная точка: выберите любую реалистичную модель SD1.5 для получения точных результатов. Выберите любую модель SD1.5 для получения стилизованных результатов.
Лорас: [опционально] При желании из списка можно выбрать любой лорас. Не используйте полную силу. Для достижения наилучших результатов используйте около 0,5–0,7.
Анализ базовых настроек
Каждый параметр имеет свою цель, например, этапы Case Sampler определяют, насколько детализировано визуализированное изображение, а Detail Enhancer улучшает мелкие детали при окончательном рендеринге.
Начальное значение: управляет начальным значением генерации каждого пробоотборника.
Уточнение: аналогично восстановлению с высоким разрешением, улучшает качество изображения.
Запрос на ввод: Опишите свое изображение, система настроена для достижения наилучших результатов.
Выбор модели и видео
Выберите свою модель V, реалистичная она или мультяшная, не имеет значения. Для достижения наилучших результатов рекомендуется устанавливать интенсивность Loras от 50% до 70%.
Загрузка видео и настройки
Загрузите исходное видео, убедившись, что размер файла не превышает 100 МБ, а продолжительность должна составлять от 15 до 20 секунд, чтобы избежать нехватки памяти.
Видео светового маппинга
Загрузите видео с картой освещения и убедитесь, что оно не короче исходного видео, иначе вы получите ошибки.
Настройки рендеринга
Настройте разрешение рендеринга, будь то альбомная или портретная ориентация, максимальное разрешение не будет превышать установленное значение. Для достижения наилучших результатов рекомендуется использовать значение от 800 до 1200.
карта освещения
Загрузить карту освещения: нажмите и загрузите нужное видео с картой освещения.
Он автоматически масштабируется до размеров исходного видео.
Убедитесь, что он длиннее или равен размеру исходного видео, иначе вы получите сообщение об ошибке.
Light Map ControlNet: эта световая карта также используется в качестве сети управления освещением в этой модели.
Используйте модель сети управления на основе света и будьте осторожны, чтобы значение интенсивности CN не было слишком высоким, чтобы избежать передержки или слишком резких переходов света.
Различия в анимации
Загрузка моделей Animatediff. Вы можете использовать любую модель для достижения различных эффектов.
Другие узлы Animatediff: вам нужно кое-что знать о Animatediff, чтобы изменить другие настройки [вы можете найти их здесь]
Настройки SMZ: этот узел используется для улучшения качества конвейера модели, все настройки предопределены для хорошей работы.
Карта освещения и композиция настройки IC
Верхний узел регулировки выше (серый) используется для управления регулировкой подсветки IC для уменьшения контрастности и управления яркостью.
Создать новый фон: если этот параметр отключен, он загружает исходное изображение и пытается сопоставить аналогичные детали с фоном исходного видео на основе «подсказки фона» (если она присутствует в поле положительной подсказки).
[1 девушка, солнечный свет, закат, белая рубашка, черные шорты, в помещении, комната]
Когда параметр «Создать новый фон» включен: он будет генерировать новый фон на основе глубины.
[1 девушка, солнечный свет, закат, природа на заднем плане, небо]
Кроме того, прочность и процент конца сетки контроля глубины уменьшены до 45%, чтобы создать открытые области на заднем плане.
Верхняя карта освещения: если установлено значение True, карта освещения будет располагаться поверх исходного видео и будет более доминирующей. Если установлено значение False, источник будет располагаться сверху, более доминирующим и ярким;
Область влияния темы: лучше всего работают 2 режима наложения.
Затемните области теней на основе верхней или нижней карты освещения.
Он осветляет теневые области на основе верхней или нижней карты освещения.
Коэффициент смешивания используется для определения интенсивности.
Глобальные настройки: регулируют яркость, контрастность, гамму и оттенок окончательно обработанной карты освещения сверху.
Переназначение изображения: используйте этот узел для управления общей яркостью и темнотой всего изображения.
Чем выше минимальное значение, тем ярче сцена.
Более низкий максимум затемнит сцену и преобразует более светлые области в морфируемые объекты, такие как QrCode Monster CN.
Обычно используется минимальное значение 0,1 или 0,2, чтобы немного осветлить сцену.
При минимальном значении 0 черные пиксели в карте освещения будут иметь черные как смоль тени.
KSamplers (оригинальные и доработанные)
IC Raw Ksampler: в отличие от других сэмплеров, он начинается с шага 8 вместо нуля из-за условий IC-Light (кадры удаляются с шумом, начиная с шага 8)
Например, завершите шаг 20.
Начните шаги с
0 не будет иметь эффекта карты освещения.
Эффект 5 составляет 50%
10 означает, что эффект 100%.
Таким образом, около 3-8 — хорошее значение для тестирования.
Если для создания нового фона установлено значение TRUE, вы можете установить значение ниже 5 для достижения лучших результатов.
Ksampler Refine: принцип работы аналогичен Img2Img Refiner после исходной выборки IC.
Для конечных шагов 25
Начните шаги с
Версии 10 и ниже будут работать как оригинальный сэмплер и предоставлять вам морфированные объекты.
15 может работать как настоящий нефтепереработчик
20 не работает должным образом
Более 20 и выше дадут запутанные результаты.
Поэтому значение по умолчанию 16 вполне подходит.
Реставрация лица
Обновите, чтобы восстановить лицо: если ваше лицо не удовлетворено после восстановления лица, вы можете обновить его примерно до версии 1,2–1,6, чтобы получить лучшее лицо.
Совет для лица: здесь можно ввести совет для лица. Настройка по умолчанию — «Улыбка». Вы можете изменить это.
Подавление шума лица: используйте значение около 0,35–0,45. На более высоких гранях может возникнуть неправильная визуализация, а также могут возникнуть проблемы со скольжением граней.
сохранять
Когда все кадры будут обработаны, они будут экспортированы в выходную папку каталога Comfy UI. Вы можете настроить положение вывода и даже отображать более длинные видео в пакетном режиме.
Передовые методы
Если вы хотите, вы можете использовать Comfy Cloud2 для запуска этого рабочего процесса. У него есть специальная страница рабочего процесса, все документы готовы, и вы можете запустить его одним щелчком мыши, не устанавливая никаких узлов или моделей.
Адрес рабочего процесса:
https://drive.google.com/drive/folders/16Aq1mqZKP-h8vApaN4FX5at3acidqPUv
Запустите этот рабочий процесс в RunComfy без установки:
https://www.runcomfy.com/comfyui-workflows/comfyui-ic-light-workflow-for-video-relighting
Адрес оригинального видео: https://www.youtube.com/watch?v=q__YTKxtQAE.
Я надеюсь, что этот урок поможет вам легко освоить методы настройки видеоосвещения Comfy UI и создавать более художественные видеоработы! Не забудьте подписаться на Джерри Давоса, чтобы получить больше практических навыков.