Как вставить себя в видео нейросетью по фото

Сгенерировать красивое видео - полдела. Куда интереснее, когда в этом видео именно вы: в фэнтези-сюжете, в рекламе, в любом образе и сцене, которую вы никогда не сняли бы вживую. Нейросеть позволяет подставить себя в ролик по обычному фото - вы даёте свой снимок как референс персонажа, и модель генерирует видео с вами в главной роли.
Разберу, как это сделать. Я работаю в студии mnogoGPT на модели Seedance - без VPN, с оплатой картой или через СБП. Что умеет Seedance, разобрано в обзорной статье.
Что такое референс персонажа
Раньше видеонейросети брали одну картинку как первый кадр и от неё плясали, поэтому вставить себя в произвольную сцену было сложно. Сильные модели вроде Seedance работают иначе: они генерируют не от первого кадра, а по референсам - примерам, которые вы даёте на вход.
Референс персонажа - это ваше фото, которое говорит модели, как выглядит главный герой. Дальше вы описываете в промпте сцену и действие, а модель собирает видео, сохраняя вашу внешность. Так вы оказываетесь в сюжете, которого в реальности не было.
Пошагово: подставляем себя в видео
- Подготовьте фото. Возьмите снимок, где лицо хорошо видно и не перекрыто. Чем чётче, тем лучше узнаваемость.
- Загрузите его как референс персонажа. В студии mnogoGPT добавьте своё фото в опорные материалы.
- Опишите сцену. В промпте задайте, что происходит, какая локация, действие, атмосфера.
- Добавьте референс одежды, если нужно. Можно дать фото нужного образа, чтобы подстроить, во что вы одеты.
- Сгенерируйте в Seedance. Запустите генерацию и получите видео с собой. Не идеально - перегенерируйте или уточните референсы.
Как добиться лучшего сходства
Узнаваемость зависит от того, что вы дадите модели. Несколько подсказок.
Берите чёткое фото с открытым лицом - анфас или в три четверти, без сильных теней и бликующих очков. Можно дать несколько фото с разных ракурсов, тогда модель лучше поймёт вашу внешность. И помните, что нейросеть не клонирует вас до пикселя - она сохраняет узнаваемые черты, но это всё-таки генерация. Чем больше и чётче референсов, тем ближе сходство.
А ещё с видео-референса модель может взять не только стиль, но и персонажа - то есть подставить героя можно и по ролику, а не только по фото. Этот приём разобран в материале про видео по референсу.
Где это пригодится
Поставить себя в вирусный формат, который выстрелил у других. Сняться в фэнтези или киношном сюжете без съёмок. Сделать рекламу с собой в главной роли. Примерить образ, в котором никогда не были. Контент для соцсетей, где вы в необычной сцене. О связке с повтором чужих роликов — в материале про то, как повторить вирусный ролик нейросетью.
Без VPN и заграничных карт
Зарубежные сервисы с такими моделями требуют VPN и иностранной карты. В mnogoGPT этого нет: Seedance работает прямо из браузера, без VPN и виртуальных зарубежных карт, оплата рублями картой или через СБП.
Часто задаваемые вопросы
Какое фото взять, чтобы вставить себя в видео?
Чёткий снимок с открытым лицом - анфас или в три четверти, без сильных теней и бликующих очков. Можно дать несколько фото с разных ракурсов - так модель лучше поймёт вашу внешность и сходство выйдет точнее.
Будет ли видео точно похоже на меня?
Модель сохраняет узнаваемые черты, но это генерация, а не клон до пикселя. Чем больше и чётче референсов вы дадите, тем ближе сходство. Несколько ракурсов помогают заметно.
Можно ли подставить себя по видео, а не по фото?
Да. С видео-референса модель может взять и персонажа, сохранив его и перенеся в новую генерацию. То есть себя или нужного героя можно задать и роликом. Об этом - в материале про видео по референсу.
Нужен ли VPN?
Нет. В студии mnogoGPT это работает из России без VPN и зарубежных карт, оплата рублями.
Окажитесь в любом сюжете, которого никогда не снимали. Загрузите своё фото в студию mnogoGPT, опишите сцену - и сгенерируйте видео с собой в главной роли на Seedance, без VPN и зарубежных карт.


