Двое поют и танцуют — а в кадре уже другие люди. Движение, фон и камера остаются один в один. Пять шагов.
Все нейросети из этого гайда, кроме одной, собраны в моём телеграм-боте — не нужно заводить аккаунты и привязывать карты. Там делаешь раскадровки в GPT или Nano Banana.
Открыть ботА Genjutsu есть только на Higgsfield — его открываешь у них на сайте:
Открыть Genjutsu на HiggsfieldЛюбой ролик, где люди поют, танцуют, двигаются — и ты хочешь то же самое,
но со своими персонажами.
Что подходит: люди видны хорошо, лица не прячутся, камера спокойная.
Длина от 4 до 30 секунд — больше Genjutsu не берёт. Если ролик длиннее,
режешь его на куски.
Важно: видео грузишь без звука. Со звуком Genjutsu его не примет — из-за
авторских прав на музыку. Поэтому сначала убираешь звук в CapCut и сохраняешь видео
без него. Песню вернёшь в самом конце.
На каждого, кого ставишь в кадр, — один лист: полный рост анфас и в профиль,
и три крупных плана лица — профиль, анфас, три четверти.
Полный рост нужен, чтобы модель видела одежду и обувь целиком. Крупные планы — чтобы
держала лицо, когда человек поворачивается к камере.
Сделать лист можно из своего фото в GPT или Nano Banana — запрос ниже.
В Higgsfield выбираешь Genjutsu, вкладка Motion transfer.
· Add a reference video — сюда видео из шага 1, без звука
· Add your characters — две раскадровки. Строго по порядку: первой того,
кто в видео стоит слева, второй — того, кто справа
Открыть Genjutsu →
Переключатель Prompt по умолчанию выключен — включи. Иначе модель сама решит,
кого куда ставить, и может перепутать людей.
В запросе уже сказано главное: фон, камера и движение остаются как в видео,
меняются только люди — левый на первую раскадровку, правый на вторую.
Если у тебя наоборот — поменяй местами LEFT и RIGHT.
Отдельный блок — про рот. Без него модель открывает рот как придётся,
а тут он повторяет видео кадр в кадр.
Вот мой промпт, с которым я делала это видео:
Первый прогон делай на коротком куске, 4–5 секунд. Смотришь две вещи:
не перепутались ли лица и попадает ли рот в песню. Всё на месте — гонишь целиком.
Возвращаешь звук. Ролик придёт без звука — ты же грузила видео без него.
В CapCut извлекаешь звук из оригинального видео и накладываешь на своё.
Вот что получилось у меня:
Скорее всего, в нём есть звук. Из-за авторских прав на музыку Genjutsu такое не принимает — убери звук в CapCut и загрузи заново.
Раскадровки загружены не в том порядке. Первой — тот, кто слева, второй — кто справа. И в запросе LEFT и RIGHT должны совпадать с видео.
Включена генерация звука — модель поёт своё и подгоняет рот под себя. Выключи звук и проверь, что блок про рот вставлен целиком.
Motion transfer иногда перестраивает сцену. Тогда вкладка Objects swap: она меняет одного человека и не трогает остальное. Два прохода — сначала левого, потом правого.
Модель утащила в кадр сам лист. В запросе это запрещено — значит он вставлен не полностью.
Делюсь своим опытом: съёмка на телефон, сценарии, монтаж в CapCut и нейросети — всё, чтобы делать ролики для брендов.
Вопросы — пиши @atopesh · neuronelia.com