замена лица в фильме приложение
Приложение заменяет лица актеров в фильмах на лица пользователей
Zao — это бесплатное deepfake приложение, в котором пользователь может стать частью известных кинофильмов. Пользователь загружает фотографию лица, и нейросеть заменяет лицо актера фильма на лицо пользователя. В Китае приложение стало вирусным.
Zao позволяет стать частью сотен киносцен и вырезок из телепередач. При этом на вход необходимо загрузить одну фотографию.
In case you haven’t heard, #ZAO is a Chinese app which completely blew up since Friday. Best application of ‘Deepfake’-style AI facial replacement I’ve ever seen.
Here’s an example of me as DiCaprio (generated in under 8 secs from that one photo in the thumbnail) 🤯 pic.twitter.com/1RpnJJ3wgT
Bloomberg пишет, что приложение было опубликовано в пятницу. С конца недели Zao держится в топе китайского iOS App Store. На данный момент доступны сцены из Титаника. Приложение заменяет лицо Leonardo Dicaprio на пользователя в 30-секундной сцене. В среднем, видеозапись генерируется за 8 секунд. Помимо опции с одной фотографией, в приложении можно загрузить несколько снимком, чтобы повысить реалистичность генерируемого видео. В таком случае приложение потребует фотографии с разных ракурсов и в разных состояниях (например, с открытым ртом).
Zao предлагает ограниченный список киносцен. Разработчики не раскрывают детали обучения нейросети. Наиболее вероятно, что модель была отдельно обучена вставлять лица в конкретные сцены. Приложение не может наложить лицо пользователя на любой другой клип не из предложенных.
Использование данных пользователей
Политика работы с данными пользователей Zao вызвала волну негативных отзывов. Разработчиком приложения является компания Changsha Shenduronghe Network Technology. Документ, регламентирующий работу приложения, имеет пункт о свободном пользовании данными, которые были сгенерированы пользователями. Компания была вынуждена ответить на волну негатива и пообещала убрать этот пункт из пользовательского соглашения. После удаления приложения пользователем его данные также будут удалены из базы.
Все вставляют свое лицо в фильмы и клипы — и вы тоже так можете!
Многие уже заметили последний тренд, который бушует в социальных сетях — люди массово вставляют свое лицо в популярные клипы и отрывки из фильмов. Помогает им в этом специальное приложение Reface App: изначально там можно было вставлять свое лицо в известные гифки и мемы, но недавно появилась функция, с помощью которой можно заменить лицо в видео и добавить себя в фильм или клип. Например, сделать свое лицо вместо лица Дуэйна Джонсона, Человека-паука, Шакиры и других знаменитостей.
Хотели стать героем фильма? А клипа? Теперь у вас есть такая возможность
Как заменить лицо на видео
Создать гифку или видеоклип со своим лицом можно за несколько секунд. Загрузите приложение Reface App по этой ссылке, затем отсканируйте свое лицо. В настройках можно добавить несколько лиц, для этого достаточно нажать на плюс.
Затем выберите любой из понравившихся видеоклипов в первой вкладке или гифку, которую можно выбрать в соседней вкладке. Нажмите один раз и подождите несколько секунд, пока приложение не сопоставит ваше лицо с лицом знаменитости и после этого заменит лицо на видео. Здесь есть кадры из фильмов «Безумный Макс», «Титаник», «Пираты Карибского моря», «Человек-паук», «Халк», а также вырезки и популярных клипов Шакиры, Гарри Стайлза, Рианны, Лободы и других знаменитостей. Коллекция роликов и гифок постоянно пополняется.
Можно выбрать только из предложенных клипов и фильмов
Вжух — и я Дуэйн Джонсон
Приложение, которое меняет лицо
Я вот примерил на себя роль Конора Макгрегора, Дуэйна Джонсона и даже Рианны. Смотрится все это действительно очень смешно, особенно со звуком, однако видно, что технология еще сыровата. В отличие от того же FaceApp, где используется глубинное обучение и искусственный интеллект, и приложение действительно делает новые снимки максимально похожими на реальные, в Reface App много артефактов и видео становится «мыльным». Но все равно можно здорово поугарать с друзьями, отправить им такое видео или выложить в Instagram или другие социальные сети.
В данном случае обработка видео или гифки тоже осуществляется с помощью нейросетей, просто у разработчиков, видимо, пока не так много данных, чтобы обучить их менять лицо на видео идеально. Приложение не проводит никаких вычислений и преобразований на устройстве, обращаясь к удаленным серверам. Для этого фотография выгружается в облако, там же анализируется, меняется лицо на видео, а затем результат загружается снова на устройство.
В зависимости от скорости интернета на обработку уходит разное время
Популярность приложению принесла поддержка от известных личностей и звезд, которые активно продвигали приложение в социальных сетях и продолжают это делать до сих пор. Кстати, разработчики не скрывают, что собирают все загруженные фотографии и черты лица, чтобы обучать нейросеть и заменять лицо еще более качественно. Но ничто не мешает им использовать фото в каких-либо других целях.
Found out about that reface app the other day so here’s Daniel Farke as Rihanna for absolutely no reason at all. pic.twitter.com/W54hvafjDp
Заменить лицо на видео на свое можно бесплатно, однако некоторые функции доступны в приложении только при оформлении подписки, которая стоит от 199 рублей в месяц. В профессиональной версии разработчики предлагают замену лица с фотографии (сейчас можно брать фото, сделанное только что на камеру), отсутствие водяных знаков, приоритетную обработку видео и гифок и другие плюшки. Мне кажется, смысла платить за это нет, но дело за вами.
Название: REFACE: face swap videos
Издатель/разработчик: NEOCORTEXT, INC.
Цена: Бесплатно
Встроенные покупки: Да
Совместимость: Для iPhone
Ссылка: Установить
3 способа сделать дипфейк путем замены лиц на видео
Наверняка вы видели в интернете небольшие коротенькие видео, в которых одно лицо заменено другим. Это и есть так называемые deepfake, основанные на работе искусственного интеллекта, или нейросети.
Что такое дипфейк?
Наибольшей популярностью пользуются короткие отрывки из фильмов, где лицо главного героя заменено на лицо обычного человека. Делают такие дипфейки чаще всего ради прикола, забавы.
Согласитесь, если бы я не сказал вам, что это не реальные фотографии людей, вы никогда бы не догадались об этом. Но это статичные картинки, а как же происходит то же самое в видео?
Как заменяется лицо в видео?
Прежде чем рассказать как это делается, лучше будет наглядно посмотреть как это выглядит. Вот один из популярных роликов с лицом Илона Маска. Почему-то именно этот персонаж очень часто является героем дипфейков 🙂
Если говорить упрощенно, то в случае с видео работа нейросети заключается в объединении нескольких картинок между собой. Искусственный интеллект анализирует черты лица и характер мимики персонажа на видео, строя из него цифровой шаблон. Потом лицо на фотографии преобразуется в набор чисел, и уже он «натягивается» на шаблон.
Звучит достаточно просто, но на деле за этим стоят довольно серьезные вычислительные мощности и алгоритмы. Ведь помимо совмещения лиц надо еще «подогнать» их черты друг под друга, учесть освещение кожи в оригинальном ролике, добавить смещения из-за движений головы, туловища и пр.
Как самому сделать дипфейк?
Теория – это конечно хорошо, но не ради неё же мы собрались 🙂 Далее расскажу вам про три лучшие бесплатные программы и приложения для замены лиц в видео. Воспользоваться ими может каждый желающий.
Reface
Ранее это приложение для Андроид и iOS называлось Doublicat. Оно получило очень много положительных отзывов от пользователей из разных стран мира и имеет достаточно высокий рейтинг: 4,6 на Google Play и 4,9 на AppStore.
Работать с приложением очень просто:
В наличии есть как коротенькие видеоклипы, так и анимированные гифки. Их подборки обновляются в приложении практически ежедневно, самые популярные попадают в тренды на главном экране приложения.
Дипфейки получаются очень смешные и прикольные. Их с успехом можно послать друзьям или разместить на своей страничке в соцсети, чтобы всех повеселить. Однако не всегда стоит ожидать полной замены лица героя на своё – там скорее происходит совмещение черт, но всё равно получается очень здорово.
DeepFaceLab
Эта программа для Windows с открытым исходным кодом. Её можно бесплатно скачать с сайта GitHub. Она имеет достаточно серьезные и даже профессиональные настройки по замене лиц, поэтому является, пожалуй, лидером в своей области.
Вот пример того, как выглядел бы Терминатор, если бы его играл на Шварценеггер, а Сталлоне (создано в DeepFaceLab):
А вот как заменено лицо Джека Николсона лицом Джима Керри в знаменитом фильме «Сияние». Не чудо ли?
На YouTube и TikTok существуют даже специализированные каналы, контентом которых являются дипфейки, созданные в данной программе, и они пользуются огромной популярностью.
FaceSwap
FaceSwap – схожая с DeepFaceLab программа, но помимо Windows её можно установить на MacOS и Linux. Софт тоже полностью бесплатен и тоже свободно скачивается с GitHub.
FaceSwap имеет серьезный алгоритм замены лиц, требовательный к железу. Поэтому если компьютер у вас достаточно слабый, имеет устаревший CPU и слабую видеокарту, создание дипфейка займет очень много времени.
Программа имеет активное сообщество в сети, благодаря которому в неё постоянно привносятся какие-то новшества, фишки и улучшения. Так же есть много обучающих материалов по работе в FaceSwap, преимущественно англоязычных.
Несмотря на то, что большинство дипфейков создается с ради шутки, прикола, эту технологию можно использовать и со злым умыслом. Именно таким образом можно заставить человека говорить то, чего он никогда не говорил, или делать то, чего он никогда не делал. Вы можете легко манипулировать практически любым цифровым контентом, создавая виртуальные подделки.
Так, например, в Америке справедливо считается, что дипфейки могут представлять угрозу национальной безопасности, и их создание и распространение запрещены в ряде штатов. Поэтому призываю вас применять указанные в статье программы и приложения только в мирных целях, исключительно ради доброй шутки и лучше всего с использованием своего лица, а не лица другого человека, особенного без его разрешения.
Reface: Замена лица в видео 12+
Вставить лицо в фото, гифки
NEOCORTEXT, INC.
Снимки экрана (iPhone)
Описание
Reface — это безупречное приложение для замены лиц.
Замена лица еще никогда не была такой простой и естественной. Все, что от вас потребуется — это селфи, а наше приложение сделает все остальное! Вы сможете создавать неограниченное количество видео, гифок, менять лица звезд на свое, попробовать морфинг и множество других эффектов. Изменение лица при помощи лишь одного селфи! У вас появится целая коллекция роликов с вами в главной роли.
Возможности безграничны: вы можете заменить лица знаменитостей своим, стать участником любимого фильма, аниме или клипа. Примерьте на себя роль звезды экранов или поп-дивы! Сделайте смешное видео или фото приколы с собой в главной роли. Обмен лицами будет выглядеть совершенно естественно благодаря нашей технологии Faceswap.
Вы еще не знаете о технологии Face Swap?
Это новый виток развития в технологии смены лиц (Face Swap или Face Switch). Для создания естественного эффекта мы используем специальную технологию, которая меняет лица местами. Смена лица выглядит очень натуралистично. Как мы это делаем? Этот секрет слишком страшен, чтобы мы могли его поведать. Зато вы можете в полной мере оценить результаты нашей работы! Попробуйте вырезать и подставить лицо в любимый фильм, а потом отправьте друзьям. Они будут в восторге!
Попробуйте изменить лицо
Выйдите за рамки обыденности. Удивите друзей. Позабавьте любимых. Вы можете изменить лицо супергероя на свое и примерить его роль. А также почувствовать себя в роли певца или поменять лицо известного телеведущего на свое. Такое изменение внешности вы не забудете никогда. Reface проводит слияние лиц столь мастерски, что никто не заметит монтаж!
Какие возможности открывает перед вами Reface:
• Меняйтесь лицами со звездами при помощи технологии Round Faceswap. Какая одежда на вас будет сегодня: дорогой костюм, хиджаб или рождественский свитер? Кем вы станете: спортсменом, королевой красоты или известным мафиози из фильма? Поменяй имидж одним движением;
• Новый уровень технологии Face Swap (Фейс Своп): натуралистичная замена лиц;
• Приложение Reface сумеет вас удивить. Селфи от вас, магия от нас и готово! У вас есть смешные гифы с вашим лицом, приколы с камерой, видео открытки и забавные ролики для соцсетей. Осталось лишь поделиться с друзьями. Им тоже наверняка понравится меняться лицами;
• Новые видеоролики и гифки каждый день. Скучать не придется!
Reface входит в Топ-5 приложений для замены лиц в 100 странах мира.
Reface известный в более чем 100 странах как приложение для замены лиц премиум класса!
6 лучших Deepfake приложений и инструментов в 2021 году
Различные методы манипулирования изображениями были введены в 19 веке и позднее применялись к кинофильмам. Эти методы быстро улучшились с цифровым видео.
В начале 1990-х годов исследователи из академических институтов разработали технологию Deepfake, которая впоследствии была доработана разработчиками в онлайн-сообществах. В последнее время подделки Deepfake привлекают большое внимание за их использование в финансовых махинациях, розыгрышах и фальшивых новостях.
Это заставило правительство и промышленность выявлять и ограничивать их незаконное использование. Тем не менее технология имеет большой потенциал, если ее правильно использовать.
Что такое технология Deepfake?
Deepfakes относятся к манипулируемому визуальному контенту, генерируемому сложным искусственным интеллектом, который дает сфабрикованные изображения и звуки, которые кажутся реальными. В большинстве случаев, человек в существующем видео или изображении заменяется на чье-то подобие.
Хотя трудно создать хороший deepfake на обычном компьютере, есть много инструментов, доступных в интернете, чтобы помочь людям сделать достойные deepfakes. Технология все еще находится в зачаточном состоянии, поэтому не ожидайте идеального результата.
Мы тщательно собрали несколько хороших deepfake приложений и инструментов, которые не требуют высокого класса рабочего стола с мощными графическими картами (за исключением одного или двух). Вы можете использовать их как в исследовательских целях, так и просто для развлечения, но не нарушайте чью-либо частную жизнь.
6. Doublicat
Платформа: Android / iOS
Цена: Бесплатно
Doublicat позволяет вам сделать селфи и поместить свое лицо на мем или GIF в своей библиотеке. Это займет около 5 секунд, чтобы ваше лицо было наложено на лицо Брэда Питта, Леонардо Ди Каприо или Тейлора Свифта.
Вы будете удивлены, увидев, насколько хорошо ваше наложенное лицо принимает те же выражения, что и оригинал. Вы можете переслать результаты своей семье и друзьям или опубликовать их в Instagram.
Вывод будет довольно странным, если будет много движений лица, но в целом это интересный эксперимент. По словам разработчиков приложения, само изображение удаляется с серверов сразу после его обработки. Однако при этом сохраняется представление черт лица.
5. FaceApp
Платформа: Android / iOS
Цена: Бесплатно
FaceApp разработан российской компанией Wireless Lab. Он использует нейронные сети для генерации высокореалистичных преобразований лиц на фотографиях.
Приложение может преобразить ваше лицо, чтобы заставить его улыбаться, выглядеть старше, выглядеть моложе или просто смены пола, а также многих других захватывающих преобразований. Татуировки, виньетки, размытие объектива и наложение фона также являются частью FaceApp.
В 2018 году приложение привлекло много внимания со стороны трансгендерных и ЛГБТ-сообществ из-за его реалистичных преобразований гендерных изменений. Он также столкнулся с критикой как в социальных сетях, так и в прессе за конфиденциальность пользовательских данных.
4. Deepfakes web β
С помощью этого инструмента вы можете создавать deepfake видео в интернете. Однако кривая обучения здесь немного больше, чем то, что вы найдете в других приложениях.
Вам нужно зарегистрироваться и загрузить свои видео. Все остальное происходит в облаке, где используются мощные графические процессоры. На изучение видео/изображений и смену лиц уходит почти 4 часа. Вы также можете использовать обученную модель, чтобы менять лица, что занимает около 30 минут.
Качество выходного видео зависит от значений «потерь»: чем ниже значения потерь (при обучении из загруженных видео), тем выше качество. И, конечно, только вы можете получить доступ к своим видео и учебным данным.
3. DeepFaceLab
Платформа: Windows
Цена: Бесплатный
DeepFaceLab является ведущим программным обеспечением для создания подделок. Она использует новые нейронные сети для замены лиц в видео. Она размещена на GitHub и породила бесчисленное множество видео в интернете.
По словам его разработчиков, более 95% глубоких подделок видео создаются с помощью DeepFaceLab. Его используют несколько популярных каналов YouTube, таких, как Ctrl Shift Face, iFake и Shamook.
DeepFaceLab прекрасно работает, но для его использования необходимы технические знания. Как только вы загрузите и разархивируете инструмент, вы увидите множество папок и ряд командных файлов. Существует папка с именем «workspace», которая содержит все обучающие модели, исходные видео и выходные данные. Инструмент работает с определенными именами и местоположениями файлов, чтобы пакетный файл мог функционировать.
2. FaceSwap
Платформа: Windows | MacOS | Linux
Цена: бесплатно
FaceSwap похож на DeepFaceLab, но предоставляет больше возможностей, лучшую документацию и лучшую онлайн-поддержку. И да, он также доступен на Mac и Linux.
Это инструмент с открытым исходным кодом, наполненный функциональностью для выполнения каждого шага процесса Deepfake, от импорта первоначального видео до создания финального видео Deepfake. Чтобы запустить этот инструмент, вам нужна мощная видеокарта, так как замена лица происходит невероятно медленно.
Работая на Python, Keras и Tensorflow, Faceswap имеет активное сообщество, поддерживающее и разрабатывающее программное обеспечение. Есть много учебников, которые помогут вам начать работу.
1. Zao
Платформа: Android | iOS
Цена: бесплатно
Технология глубокой подделки Zao позволяет вам модулировать голоса знаменитостей и накладывать свое лицо на тело актера в сцене.
Просто нажмите на одну фотографию и попробуйте тысячи модных причесок, одежды и макияжа. Приложение предоставляет вам множество видеоклипов, нарядов и буквально неограниченные возможности для изучения.
В 2019 году Zao за короткое время приобрел значительную популярность, позволив пользователям обмениваться лицами с любимыми актерами в коротких клипах из телепередач и фильмов. За месяц он стал самым загружаемым бесплатным приложением в Китае. С ростом популярности, его разработчики также столкнулись с критикой политики конфиденциальности приложения.
Это займет всего несколько секунд, чтобы поменять ваше лицо, но так как алгоритм в основном обучен на китайских лицах, это может выглядеть не так естественно, как вы ожидаете.
Тем не менее все эти инструменты демонстрируют, как быстро развивался базовый ИИ: то, что раньше требовало тысячи картинок, чтобы сделать достаточно убедительное глубокое поддельное видео, теперь требует только одного изображения и дает лучшие результаты.