Лучший локальный Lip Sync в ComfyUI. Безлимитные музыкальные видео и Talking Head анимация с LTX 2.3

Описание: YouTube Description:
В этом видео я показываю, как создавать локальный lip sync прямо на вашем компьютере с помощью ComfyUI и LTX 2.3. Этот workflow позволяет делать talking head видео, музыкальные клипы, storyboard-driven сцены и более длинные lip-synced анимации, разбивая аудио на сегменты и связывая между собой несколько изображений, камер и промптов.

Я подробно показываю, как работает этот workflow, как обрабатывать длинное аудио, как использовать storyboard-изображения и как создавать более динамичные multi-camera сцены вместо одного статичного talking head. Также я показываю разные версии workflow, включая варианты с одним общим промптом и более продвинутые версии с индивидуальными промптами для каждого сегмента.

Это отличный вариант, если вы хотите создавать:

AI talking head видео
lip-synced музыкальные клипы
storyboard-based анимированные сцены
длинные анимации на основе речи или песни
локальные AI video workflows без зависимости от онлайн-сервисов

Скачать workflows можно здесь:
Patreon: https://www.patreon.com/posts/best-li...
Github: https://github.com/GeekatplayStudio/L...

Если вам нравится такой контент про ComfyUI, AI video, LTX workflows, local AI tools и продвинутые креативные пайплайны, подписывайтесь и напишите в комментариях, что вы хотите, чтобы я протестировал следующим.

Присоединяйтесь к нам в Telegram:
Чат: https://t.me/+1W-BfcGvDfQzNzAx
Новости: @geekatplayru

⚠️ AFFILIATE DISCLOSURE: We may earn a commission from purchases made through the links below at no extra cost to you.
Recommended services:
Best quality outfits: https://community.kuhl.com/s/vladimri.c
NordVPN: https://go.nordvpn.net/aff_c?offer_id...
Assets: https://1.envato.market/c/1719625/298...
https://www.amazon.com/shop/vladimirc...
Topaz AI Video and Photo processing: https://topazlabs.com/ref/1514/

My store: https://geekatplay.gumroad.com/
Patreon:   / geekatplay  
https://www.geekatplay.com

00:00 Как сделать неограниченный lip sync в LTX 2.3 на локальном компьютере
00:20 Workflow Image Audio to Video в ComfyUI 0.17.2
00:36 Базовый workflow и что в нём не хватает
00:58 Ограничения по длине рендера и проблемы после 30 секунд
01:16 Зачем понадобились изменения для музыкальных клипов
01:28 Мои версии workflow и где их скачать
01:56 Как считается длительность аудио в workflow
02:01 Ошибка в оригинальной математике и мои исправления
02:09 Почему я режу музыку на сегменты по 15 секунд
02:21 Нода сегментации и автоматическая нарезка аудио
02:36 Как сохраняются отдельные сегменты и собираются в один клип
02:52 Почему это отлично работает для говорящей головы
03:02 Проблема сброса в ту же позу каждые 15 секунд
03:29 First and Last Frame и что я ещё дорабатываю
03:45 Как использовать этот подход для мультикамерного монтажа
04:13 Монтаж кусками по 15–20 секунд для разных камер
04:27 Переход к storyboard-подходу для музыкального видео
04:40 Подключение разных кадров и углов камеры
05:03 Как задавать длительность для каждого ракурса
05:26 Ограничения, глюки и генерация до 30 секунд
05:36 Версия с одним промптом и версия с отдельными промптами
05:58 Как система генерирует анимацию по кадрам и сегментам
06:10 Исправленная калькуляция без разрывов между сегментами
06:28 Переход между разными кадрами и промптами
06:37 Упрощённый workflow для песни с одним промптом
06:47 Debugging-ноды и просмотр промежуточных результатов
06:56 Как сегменты собираются в одно итоговое видео
07:04 Очень длинная музыка и поведение последнего кадра
07:29 Использование workflow не только для музыки, но и для сказок
07:40 Storyboard по времени для текста и речи
08:00 Визуальная работа через waveform и keyframes
08:23 Как вручную ставить keyframes в нужных местах
08:33 Смена плана и камеры по временной шкале
08:49 Разница между визуальной и обычной версией workflow
09:00 Разные варианты workflow под разные задачи
09:15 Просмотр вырезанного сегмента и отключение debug
09:24 Что делать, если в середине клипа появились глюки
09:32 Workflow с range для точечной перегенерации сегмента
09:48 Использование “заплаток” в редакторе
10:01 Экспериментальные workflow для LTX 2.3
10:09 Мой тестовый мультикамерный клип и просьба написать мнение


#ComfyUI #LTX #LipSync #AIVideo #MusicVideoAI #TalkingHead #LocalAI #Storyboard #Geekatplay