Как заменить лицо на видео нейросетью и чем это отличается от маски

Заменить лицо на видео с помощью ИИ можно онлайн и без навыков монтажа. Вы загружаете одно чёткое фото анфас, ИИ находит лицо в каждом кадре ролика и перерисовывает его под ваши черты, а мимика, поворот головы и свет сцены остаются от исходника. От маски это отличается главным. Маска лежит поверх лица как наклейка и съезжает при резком повороте. ИИ генерирует лицо заново на каждом кадре, поэтому оно моргает, улыбается и уходит в тень вместе со всей сценой.

Камера, склейки, звук и движения при этом берутся из исходного ролика. Меняется только лицо. Отсюда простое правило. Результат зависит от двух вещей: от вашего фото и от того, насколько крупно лицо стоит в кадре.

Чем замена лица через ИИ отличается от маски

Маски в камерах соцсетей работают на опорных точках. Приложение находит уголки глаз, кончик носа, линию губ и натягивает на них готовую картинку. Пока вы смотрите прямо, выглядит неплохо. Стоит отвернуться на три четверти, и края маски отстают от щёк, текстура становится плоской, а свет на ней не меняется, даже если вы шагнули из тени к окну.

ИИ устроен иначе. Он ничего не накладывает. Он рисует новое лицо, которое повторяет выражение и ракурс человека из ролика, но с вашими глазами, носом, губами и бровями. Если герой в кадре щурится от солнца, щуриться будете вы. Если по лицу проходит тень от колонны, она пройдёт и по вашему. Маска так не умеет.

Последняя строка часто удивляет. ИИ меняет черты лица, а волосы, уши и силуэт головы чаще всего оставляет исходными. Поэтому брюнет с короткой стрижкой, вставленный в ролик с длинноволосым героем, узнаётся по глазам и улыбке, но причёска на видео будет чужая. Это нормально.

Что происходит с роликом, когда ИИ меняет лицо

Снаружи всё выглядит как одна кнопка. Внутри проходит несколько этапов, и от каждого зависит, будет ли подмена заметна.

1. ИИ находит лицо в каждом кадре и отмечает, как оно повёрнуто и наклонено.
2. По вашему фото собирает описание черт - разрез и посадку глаз, форму носа, губы, линию бровей.
3. Рисует новое лицо с тем же выражением и ракурсом, что у героя в этом кадре.
4. Вписывает его обратно и подгоняет цвет кожи, резкость и освещение под картинку вокруг.
5. Сглаживает переходы между соседними кадрами, чтобы лицо не дрожало и не мерцало.

Самое сложное место - пятый пункт. Ранние модели делали каждый кадр по отдельности, и лицо слегка плавало, будто под водой. Сейчас этого почти не видно. Но артефакты всё ещё вылезают там, где лицо перекрывает рука, волосы падают на глаза или герой резко дёргает головой. Посмотрите, как это работает на готовом ролике.

На ролике с Деймоном хорошо видно, где ИИ сильнее всего. Крупная усмешка в камеру получается убедительной. Свечи дают тёплый блик на скуле, и он лежит на новом лице так же, как лежал на исходном. В быстрой нарезке, где лицо мелькает на секунду, сходство чуть слабее. Общее впечатление при этом сохраняется.

От чего зависит, будет ли лицо похоже

Главный источник - ваше фото. ИИ знает о вас только то, что увидел на нём, и всё остальное достраивает сам. Чем меньше ему приходится додумывать, тем больше на видео вас самих.

Хорошо работает снимок анфас или почти анфас, при ровном дневном свете, где лицо занимает заметную часть кадра. Подойдёт обычное селфи у окна. Профиль не подойдёт. Хуже выходят и снимки с бьюти-фильтрами: ИИ честно перенесёт кукольную кожу на видео. Тёмные очки и чёлка до бровей тоже мешают. Даже обычная оправа сбивает: непонятно, где стекло, а где глаза. Сомневаетесь в старом фото? Снимите новое, это быстрее, чем перебирать архив.

Третье - похожесть исходного героя на вас. Если угол поворота, возраст и пропорции лица близки, ИИ проще. Это не обязательное условие. Просто при большой разнице чуть чаще видна граница вокруг подбородка и линии волос.

Какой ИИ может заменить лицо на видео

Путей три, и у каждого своя цена. Первый - программы с открытым кодом на своём компьютере. Они умеют работать с любым вашим роликом и дают полный контроль. Взамен нужны видеокарта с большим объёмом памяти, установка через командную строку и терпение. Первый приличный результат обычно выходит после нескольких вечеров настройки.

Второй - зарубежные онлайн-сервисы. Там проще, но интерфейс на английском, оплата идёт иностранной картой, а сайты из России открываются не всегда. У бесплатных тарифов часто стоит водяной знак или ограничена длина.

Третий - готовые вирусные ролики, куда лицо вставляется по фото. Своё видео так не загрузить. Зато ничего не нужно настраивать, и результат предсказуем: сцена уже проверена, свет и планы подобраны.

Если нужно поменять лицо в собственном ролике с отпуска, первые два пути пока единственные. Если хочется повторить вирусное видео со своим лицом и не тратить вечер на настройку, третий заметно короче.

Можно ли заменить лицо на видео онлайн бесплатно

Совсем бесплатно и в хорошем качестве - почти никогда. Генерация видео нагружает серверы куда сильнее, чем фото. Кто-то за это платит. Без оплаты и без ограничений обычно работают только маски в приложениях камеры, но это как раз наложение, о котором шла речь выше.

Честный вариант выглядит так. Регистрация по ссылке на почту, без пароля. После неё дают приветственные кредиты, их хватает, чтобы попробовать ИИ-фото и понять, как ИИ видит ваше лицо. Ролик по тренду уже платный. Короткий тренд с выходом из аэропорта на 9 секунд стоит около 249 рублей, сцена с Деймоном на 20 секунд около 449, а самый длинный, зомби-тренд на 25 секунд, около 549 рублей. Всё работает онлайн в браузере. Ставить ничего не нужно.

Как заменить лицо в ролике через Ainaryx

Порядок одинаковый для любого тренда. Мы советуем начинать с ролика, где много крупных планов. Так сразу видно, насколько хорошо подошло фото.

1. Выберите роликОткройте каталог трендов и посмотрите превью. Обратите внимание на число фото: в сценах на двоих нужно два снимка.
2. Загрузите фотоАнфас, ровный свет, без фильтров и тёмных очков. Для второй роли - фото второго человека с теми же требованиями.
3. Дождитесь генерацииИИ пройдёт по всем кадрам и впишет лицо. Камера, музыка и склейки останутся как в оригинале.
4. Скачайте видеоГотовый ролик сохраняется к вам на устройство, его можно сразу выкладывать.

Начать проще всего, если открыть каталог трендов и выбрать сцену, которая нравится. Все ролики, где можно поменять лицо, собраны на странице замены лица в видео.

Для первого раза хорошо подходит тренд с Деймоном в церкви: одно фото и много крупных кадров. Хочется сцену на двоих? Посмотрите «Три метра над уровнем неба» с балконом и танцем в белом луче. А вот гол Озила на ночном стадионе лучше брать вторым. Там есть дальние планы, и сходство на них слабее.

Сцены для пары требуют двух фото. Здесь особенно заметно, насколько ровно подобраны снимки. Если один сделан при дневном свете, а второй вечером под лампой, лица на видео тоже будут выглядеть по-разному. Снимайте оба в одном месте.

Зомби тренд с любимым человекомСлёзы, пистолет и любимый человек-зомби в заброшенном доме, а на броске резкая склейка в золотое поле.Посмотреть ролик и повторить

Что ещё спрашивают про замену лица в видео