Что такое технология Deepfake?
Глубокие подделки — это манипулируемый визуальный контент, созданный продвинутым искусственным интеллектом, который производит сфабрикованные изображения и звуки, кажущиеся реальными. В большинстве случаев человек на существующем видео или изображении заменяется чьим-то подобием.
Глубокие подделки создаются с помощью моделей глубокого обучения — подкласса методов машинного обучения, основанных на искусственных нейронных сетях с репрезентативным обучением. Он включает обучение генеративных нейросетевых архитектур, таких как генеративные состязательные сети или автоэнкодеры.
Хотя на обычном компьютере трудно создать хороший deepfake, в Интернете есть много инструментов, которые помогут создать достойный deepfake. Технология все еще находится в стадии становления, поэтому не стоит ожидать идеальных результатов.
Мы тщательно собрали несколько хороших приложений и инструментов для deepfake, которые не требуют высококлассного настольного компьютера с мощными видеокартами (за исключением одной или двух). Вы можете использовать их в исследовательских целях или просто для развлечения, но не нарушайте ничью частную жизнь.
Как заменяется лицо в видео?
Прежде чем я расскажу вам, как это делается, лучше посмотреть, как это выглядит визуально. Вот одно из популярных видео с лицом Илона Маска. Почему-то именно этот персонаж очень часто становится героем дипфейков :).
Проще говоря, в случае с видео работа нейронной сети заключается в том, чтобы связать несколько изображений вместе. ИИ анализирует черты лица и мимику персонажа на видео, создавая на его основе цифровой шаблон. Затем лицо на изображении преобразуется в набор цифр, который затем «растягивается» в шаблон.
Звучит достаточно просто, но на самом деле за этим стоит огромное количество вычислительных мощностей и алгоритмов. Действительно, помимо выравнивания лиц, необходимо еще «подогнать» их черты друг к другу, учесть освещение кожи в исходном клипе, добавить смещение, возникающее в результате движения головы, туловища и т.д.
Лучшие приложения и их использование
Не просматривая все приложения deepfake, вы можете воспользоваться нашей подборкой. Вот список лучших программ для создания самых реалистичных изображений на самом обычном компьютере или смартфоне. Полученные изображения можно использовать только в исследовательских или развлекательных целях.
Reface
Одно из самых популярных и удобных приложений для создания моментальных снимков на мобильных устройствах под управлением Android и iOS. С помощью Reface даже неопытный пользователь может легко создать мем или дружескую карикатуру. Приложение использует универсальную нейронную сеть, которую разработчики обучили на миллионах изображений из открытых библиотек. Поскольку пользователю не нужно обучать нейронную сеть, создание видео или фото с дипшейком занимает несколько минут. Приложение, а также библиотеку анимированных GIF, можно загрузить бесплатно.
Перед сменой изображения необходимо сделать selfie или найти подходящие фотографии в галерее. Главное условие — фотография лица крупным планом.
После запуска приложения выберите GIF, на котором вы хотите изменить лицо. Библиотека приложения достаточно большая, файлы GIF рассортированы по категориям. Доступен поиск по ключевым словам. В некоторых фильмах есть несколько главных героев. В такие GIF-анимации легко вставить несколько лиц с помощью Reface. Вы можете удобно добавлять любимые GIF-файлы в «Избранное».
Затем на следующей вкладке выберите лицо (или лица, если в вашем видео несколько персонажей). Приложение быстро рассчитает параметры лица и выполнит подмену. Сама операция по обмену лицами занимает менее минуты.
В случае бесплатной версии пользователь вынужден все время смотреть рекламу, а на готовое видео накладывается водяной знак. Если вы хотите изменить лицо в GIF-файле, которого нет в библиотеке, вам придется приобрести PRO-версию. Однако в этой версии пользователь будет избавлен от рекламы и водяных знаков на видео.
Плюсы:
- Интуитивно понятный интерфейс, который легко понять неопытным пользователям.
- Быстрая скорость создания видео.
- Хорошая аутентичность видео с замененным лицом.
- Может создавать видео с несколькими персонажами.
- Бесплатная версия с большой библиотекой GIF-анимаций.
Минусы:
- В бесплатной версии много рекламы и водяных знаков на видео.
- Использование пользовательских GIF-файлов только в версии PRO.
- Можно создавать только короткие видеоролики.
Faceswap
Бесплатный проект, который можно загрузить на github.com. Приложение написано на языке Python и предназначено для компьютеров под управлением Windows, Linux и macOS. Предусмотрены функции для разделения видео на отдельные кадры и склеивания их в целое видео.
Лицо, которое будет вставлено в видео, должно быть снято с разных ракурсов. Первое обучение ИИ занимает довольно много времени (около суток). Разработчики утверждают, что в дальнейшем, используя те же модели, на обучение нейронной сети будет уходить меньше времени. После вставки изображения в видео требуется цветокоррекция. Программа предназначена для опытных пользователей, знающих основы программирования.
Плюсы:
- Кросс-платформа.
- Бесплатно.
- Возможна высокая точность изображения.
- Может создавать видеоролики продолжительностью несколько минут.
Минусы:
- Сложность обучения.
- Требуется много времени для обучения ИИ и создания клипов.
Создание дипшейков требует обработки как исходного, так и результирующего видео. Чтобы быстро вырезать фрагмент из вашего видео и превратить его в GIF-анимацию, Movavi Video Editor Plus — самый простой способ сделать это. Специально для таких случаев в приложении есть инструмент, который автоматически распознает и вырезает отдельные сцены.
Готовое видео с замененным лицом также легко отредактировать в этой программе. Movavi Video Editor Plus имеет множество фильтров для цветокоррекции. Существуют готовые к использованию шаблоны, которые позволяют пользователям с любым уровнем подготовки быстро улучшить качество своих изображений. Movavi Video Editor Plus может работать с несколькими видео- и аудиодорожками: вставлять одно видео в другое, удалять и добавлять аудиодорожки, добавлять субтитры, а при необходимости записывать речь или вокал с микрофона.
Интерфейс видеоредактора интуитивно понятен и логичен. Экспериментируя с настройками Movavi Video Editor Plus, вы можете повысить достоверность своего дипскайпа и добиться профессионального качества видео, которое будет радовать ваших друзей и близких.
DeepFaceLab
Face swapper — это проект с открытым исходным кодом. Заархивированную библиотеку можно бесплатно загрузить на сайте github.com. Компиляции доступны для Windows, Linux и отдельно для CentOS.
Процесс разработки dipfake включает этап обучения ИИ, который может занять значительное количество времени. Чем мощнее видеокарта и больше оперативной памяти в компьютере, тем быстрее будет генерироваться дипфейк. Минимальные требования — 2 ГБ оперативной памяти и видеокарта, совместимая с OpenCL. Но для стабильной работы приложения требуется 8 ГБ и видеокарта с видеопамятью не менее 6 ГБ. В зависимости от параметров видеокарты пользователь выбирает рабочую модель (SAEHD для 6 Гб+, Quick96 для 2-4 Гб видеопамяти).
Библиотека содержит тестовые видео, и пользователь может заменить их своими собственными. Приложение поддерживает файлы MP4, MKV и AVI. Максимальное разрешение — 1080p.
Чтобы обучить ИИ, необходимо заснять лицо, которое нужно вставить, с аккуратно зачесанными назад волосами, под разными углами, с открытыми и закрытыми глазами. Один из файлов BAT в проекте используется для разбиения видео на отдельные кадры, из которых пользователю нужно будет удалить ненужные.
Проект предоставляет инструменты для нарезки видео, в которое будет вставлено лицо. Необходимый фрагмент сохраняется вместе с фонограммой. Чтобы изменить лицо на видео, необходимо последовательно запустить пакетные файлы (BAT) в соответствии с инструкциями.
Обучение нейросети на отснятом материале занимает как минимум день, а зачастую и больше. Пользователь сам определяет количество итераций. Процесс может быть прерван, он будет перезапущен с того же места. Результаты отображаются в виде графика в отдельном окне.
В программе много тонких настроек. Например, можно настроить точность совмещения лиц, вручную накладывая их части. Многие параметры приходится задавать интуитивно. Готовый фильм требует цветокоррекции.
DeepFaceLab предназначен для опытных пользователей. По мнению экспертов, первое видео можно создать уже через 7-10 дней после начала использования программы. Однако для получения хороших результатов вам придется подождать не менее месяца. В дальнейшем на создание видео будет уходить несколько дней.
Плюсы:
- Кросс-платформа.
- Бесплатно.
- Способность создавать несколько минут видео высокой четкости.
- Функции редактирования видео.
Минусы:
- Высокие требования к графическому процессору.
- Длительная кривая обучения.
- Требуется дальнейшая обработка полученного видео.
Impressions
Impressions накладывает лица знаменитостей на записанные пользователями видео. Выбрав знаменитость, загрузите клип, и программа создаст дипскай версию.
Impressions также включает каталог аудиозаписей из популярных фильмов и телесериалов, которые можно синхронизировать по губам. Приложение загружает и обрабатывает видео на своих серверах, поэтому требуется подключение к Интернету.
Пока что Impressions доступна только для iPhone и iPad, но разработчик утверждает, что в скором времени появится версия для Android. Приложение является бесплатным при условии, что клипы имеют водяной знак.
Doublicat
Цена: Бесплатно.
Doublicat позволяет вам делать селфи и помещать свое лицо на мемы или GIF в вашей библиотеке. Потребуется всего 5 секунд, чтобы ваше лицо наложилось на лицо Брэда Питта, Леонардо Ди Каприо или Тейлор Свифт.
Вы будете удивлены, увидев, как хорошо наложенное лицо приобретает те же выражения, что и оригинал. Вы можете поделиться результатами с семьей и друзьями или опубликовать в Instagram.
При большом количестве движений лица результат будет довольно странным, но в целом это интересный эксперимент. По словам разработчиков приложения, само изображение удаляется с серверов сразу после его обработки. Однако представление черт лица сохраняется.
FaceApp
Цена: Бесплатно.
FaceApp разработан российской компанией Wireless Lab. Он использует нейронные сети для создания высокореалистичных трансформаций лица на изображениях.
Приложение может изменить форму вашего лица, заставив его улыбаться, выглядеть старше, моложе или просто изменить пол, а также совершить множество других захватывающих трансформаций. Татуировки, виньетки, размытие объектива и смешивание фона также являются частью FaceApp.
В 2018 году приложение привлекло большое внимание со стороны трансгендерного и ЛГБТ-сообществ благодаря реалистичным трансформациям пола. Компания также столкнулась с критикой в социальных сетях и в прессе по поводу конфиденциальности данных пользователей.
Zao
Цена: бесплатно.
Технология глубокого притворства Zao позволяет модулировать голоса знаменитостей и накладывать свое лицо на тело актера в сцене.
Просто нажмите на одну фотографию и попробуйте тысячи модных причесок, одежды и макияжа. Приложение предоставляет вам множество видеоклипов, нарядов и буквально бесконечные возможности для изучения.
Zao приобрел значительную популярность за короткий промежуток времени в 2019 году, позволив пользователям поменяться лицами с любимыми актерами в коротких клипах из телешоу и фильмов. В течение месяца оно стало самым скачиваемым бесплатным приложением в Китае. По мере роста популярности приложения его создатели также столкнулись с критикой в отношении политики конфиденциальности приложения.
Чтобы изменить лицо, требуется всего несколько секунд, но поскольку алгоритм обучен в основном на китайских лицах, это может выглядеть не так естественно, как вы ожидаете.
Тем не менее, все эти инструменты показывают, как быстро развивался базовый ИИ: то, что раньше требовало тысячи изображений для создания достаточно убедительного видео глубокой подделки, теперь требует только одного изображения и дает лучшие результаты.
Deep Art Effects
Компания Deep Art Effects уже давно ассоциируется с категорией графических редакторов, разработав ранее несколько творческих платформ для стилизации изображений в произведения искусства, а затем выпустив инструмент со встроенным искусственным интеллектом, способный изменять реальность на основе заранее заданных шаблонов. Функциональность основана на нейронных сетях: после загрузки исходных изображений меню открывает доступ к библиотеке заранее подготовленных холстов, доступных для редактирования. Некоторые из них написаны известными художниками (Пабло Пикассо, Винсент Ван Гог), другие появились на современных выставках.
Инструментов в Deep Art Effects много, а настроек еще больше: взять, к примеру, возможность перемещать ползунки, влияющие на детализацию, интенсивность художественного стиля, контрастность и яркость с миллиметровой точностью. Дополнительным плюсом является возможность загружать подготовленные работы в качестве Ultra HD без потери важной информации, водяных знаков и других ограничений, часто встречающихся у конкурентов. Однако за доступ к эксклюзивным произведениям искусства придется заплатить — стоимость сильно варьируется и напрямую зависит от региона и выбранного комплекта разблокировки.
Collage.Click Face Switch
Технологичный редактор изображений с непритязательной, но быстро развивающейся функциональностью, который в основном сосредоточен на преобразовании лиц из исходного материала в лица, добавленные из Галереи или выбранные из Collage.Click Face Switch. Идея не нова, но реализована разработчиками практически бесплатно (месячная подписка начинается от 65 рублей и включает блокировку рекламы, подробный перевод и другие мелочи, облегчающие жизнь), при этом включает инструкции для новичков.
Еще одна интересная находка — возможность вручную управлять процессом передачи «взглядов»: Collage.Click Face Switch имеет специальную систему точек лица, необходимых для создания портрета, от подбородка до бровей, ушей и других деталей. Нет необходимости экспериментировать — если это работает, вы будете довольны результатами в кратчайшие сроки.
Celebrity Face Morph
Эксклюзивное приложение для Android, предназначенное для поверхностного, но интересного редактирования оригинальных фотографий с использованием технологии Face Swap. Сценарии deepfake в Celebrity Face Morph реализованы лишь частично: разработчики из Z Mobile Apps не позволяют глобально переносить исходные изображения на те же видео, а только переносят лица с селфи или фотографий, загруженных из Галереи, на изображения, представленные в виртуальной библиотеке.
Выбор огромен: голливудские блокбастеры, сцены из рекламных роликов, заставки к фильмам, превью и трейлеры. Те, кто всегда мечтал перевоплотиться в капитана Джека Воробья или Железного человека, теперь на шаг ближе к осуществлению своей мечты. Лица в Celebrity Face Morph переданы достаточно реалистично, но иногда не хватает детализации — система периодически допускает ошибки, поэтому загрузите оригинал 3 или 4 раза и сравните результаты для загрузки в социальные сети или мессенджеры.
Carica
Deepfake — это сервис, специализирующийся на создании анимированных GIF в духе Reface и Morphin. Контент распространяется по подписке, частично организованной в виде веб-версии на официальном сайте (система автоматически перенаправляет на нужные страницы в браузере прямо из приложений для iOS и Android).
Процедура обмена лицами знакома: нужно добавить оригинал из «Галереи» или с помощью встроенной камеры и организовать селфи, а затем выбрать соответствующие иллюстрации, стикеры или GIF. На обработку контента уходит всего несколько минут, поэтому свободного времени для экспериментов не остается. Подписка также не является проблемой, поскольку 90% функций в Carica неограниченны. Жаль только, что Carica является эксклюзивом для Android — на iOS разработчики до сих пор не позволяют опробовать некоторые подделки.
Jiggy
Jiggy позволяет вам использовать технологию dipfake, чтобы повеселиться. Приложение предлагает десятки танцевальных видео, в которые вы можете втиснуть свое или чужое лицо, загрузив фотографию. Jiggy также сканирует верхнюю часть вашего тела, накладывая ее на танцующего персонажа.
Как и Reface, Jiggy анимирует выражения лица и движения.
Такие приложения, как Reface, Impressions и Jiggy, позволяют легко опробовать технологию моды, не программируя и не вникая в тонкости технологии вообще. Мы не будем останавливаться на этом и перейдем к изучению более полного руководства по созданию DeepFake на диване.
Итог
Несмотря на то, что большинство подделок делается ради забавы, технология может быть использована в злонамеренных целях. Таким образом, вы можете заставить людей говорить то, что они никогда не говорили, или делать то, что они никогда не делали. Вы можете легко манипулировать практически любым цифровым контентом для создания виртуальных подделок.
В Америке, например, подделки по праву считаются угрозой национальной безопасности, и их создание и распространение запрещено во многих штатах. Поэтому я призываю вас использовать упомянутые в статье программы и приложения только в мирных целях, только для хорошей шутки и желательно с использованием собственного лица, а не лица другого человека, особенно без его согласия.
