Deepfake становится все более популярным среди людей по всему миру. Что это? Это современная технология обработки изображений, поддерживаемая искусственным интеллектом. Само название этого метода видеомонтажа состоит из сочетания слов «глубокий» и «фальшивый».
Первое слово относится к так называемому глубокому обучению, то есть инновационной системе глубокого машинного обучения. В свою очередь, второй термин в переводе означает ложный. Обе части слова deepfake прекрасно отражают характер описываемой специальности.
Поэтому стандартное определение таково, что deepfake — это фальшивое, сфабрикованное видео. Программы, оснащенные специальными механизмами, создают такие ролики на основе реальных звуковых файлов, фотографий и коротких видео. С помощью соответствующего приложения вы можете самостоятельно разработать свой собственный deepfake.
Опытные специалисты в области искусственного интеллекта также могут использовать технологию deepfake для более сложных задач. Они часто используют эффективные устройства для получения совершенно новых, до сих пор не существовавших изображений. Благодаря этому у них есть шанс генерировать лица людей, которые никогда не рождались. Deepfake — крайне инновационный, но и опасный метод компьютерной обработки фото и видео.
Как сделать DeepFake: DeepFaceLive (применяем на видео)
Примеры дипфейковых видео
Видео, созданные с помощью специальных дизайнерских приложений deepfake, постоянно появляются в сети. В прошлом бывали случаи, когда фальшивые ролики шокировали общественность. Так было, например, в июне 2019 года, когда в Интернете было обнародовано видео Марка Цукерберга, сидящего за столом и произносящего короткую речь. Основатель Facebook говорит в нем о данных пользователей портала и возможности использования конфиденциальной информации для управления обществом.
Поначалу шокированные люди поверили словам Цукерберга, но специалисты по редактированию быстро сообщили о мошенничестве. Цифровой персонаж, сфабрикованный благодаря технологии deepfake, обманчиво похож на всемирно известного предпринимателя, но это не он. Современные компьютерные программы могут очень реалистично изменять изображение, вводя в заблуждение миллионы людей.
Интересный пример — переработанная сцена популярного сериала «Игра престолов», опубликованная на канале Eating Things. В записи большинство деталей выглядят точно так же, как и в оригинале. Вы можете увидеть разницу, когда посмотрите на рот главного героя, произносящего речь перед своими друзьями. Преобразование движений губ в совершенно новое выражения лица создает впечатление, что персонаж произносит другие слова. Таким образом, Джон Сноу вместо того, чтобы подбадривать своих союзников, приносит извинения зрителям за 8-й сезон, который подвел фанатов.
Кроме того, в Интернете можно найти тысячи сфабрикованных видео знаменитостей, политиков и актеров. В видео очень часто известные люди поют песни. В сети много клипов с Дональдом Трампом, королевой Елизаветой, Томом Крузом и Джимом Керри в главных ролях. Их лица выглядят реалистично, но это всего лишь цифровая манипуляция.
Как сделать дипфейк?
Стремительное развитие искусственного интеллекта означает, что сегодня у каждого есть возможность создать свой собственный дипфейк. Как сделать модифицированный медиафайл в домашних условиях? Во-первых, обратите внимание на производительность вашего оборудования. Создание дипфейков требует больших вычислительных мощностей, поэтому процессор должен иметь высокую тактовую частоту. Кроме того, видеокарта, отвечающая за обработку трехмерных элементов, должна быть действительно мощной. Подобрать соответствующий компьютер вам помогут на компьютерном форуме https://www.cyberforum.ru/computers/
Дипфейк, созданный с помощью слабого ПК выглядит нереалистично. Затем сфабрикованные выражения лица ясно указывают на то, что видео фальшивое.
Конечно, одного оборудования недостаточно, так как вам все еще нужно правильное приложение для создания успешного deepfake. Скачать программу для обработки изображений и видео можно прямо с сайта производителя. Существует множество версий с различными функциями. Среди наиболее узнаваемых и эффективных программ можно выделить: DeepFaceLab, Deep Video Portraits или ZAO Deepfake App.
Программы и библиотеки Python
Большинство систем модификации видео используют библиотеки Python. Python хорошо сочетается с технологией глубокого машинного обучения, что делает реалистичным использование механизмов искусственного интеллекта для изменения внешнего вида мультимедийных файлов. Когда речь заходит об инструментах, написанных на Python, внимания заслуживает FaceSwap. Причем изучить Пайтон может каждый и решении задач поможет форум https://www.cyberforum.ru/python-tasks/
Интересно выглядит приложение Deep Art Effects, которое является идеальным для творческих людей. С его помощью можно превратить фотографию или кадр из фильма в нарисованное изображение. Также очень популярна программа REFACE, созданная специально для любителей мемов. Простое и интуитивно понятное управление позволяет очень быстро создавать короткие гифки и забавные фотографии.
Работа алгоритмов в deepfake
Есть два способа создания поддельных видео. В первом программа работает на основе двух алгоритмов. Сначала приходит кодировщик и ищет общие черты в различных изображениях. Затем декодер объединяет их и переносит как единый элемент на модифицированную фотографию. Благодаря этому лица, нанесенные на уже отснятых персонажей, ведут себя очень реалистично в плане мимики.
Приложения, основанные на описанной процедуре, могут изменять мультимедийные файлы, сохраняя при этом высокое качество.
Второй метод использует генеративно-состязательную сеть. Я говорю об обширной сети структур машинного обучения, взаимодействующих с генератором и дискриминатором. Упомянутые расчетные схемы отвечают за формирование фотографии, используя для этого общую информацию без более подробных деталей. Так создаются совершенно новые видео. Этот процесс требует значительно большей вычислительной мощности из-за сложности процесса.
Распознать дипфейк очень сложно, особенно неспециалистам. В эту технологию интересно играть, но вы должны быть осторожны, чтобы не стать жертвой мошенничества. Из года в год фейковые видео кажутся более реалистичными и эффективнее вводят всех зрителей в заблуждение, поэтому сложно однозначно сказать о характере замысла deepfake. На данный момент это кажется лишь забавным развлечением, но в будущем может представлять большую опасность для каждого из нас.
Источник: earth-chronicles.ru
Дипфейк в реальном времени: на GitHub появилась нейросеть для подмены лица в видео с несложной инструкцией
Разработчик под ником iperov опубликовал на портале GitHub новую программу для создания дипфейков. Нейросеть DeepFaceLive подменяет лицо пользователя в видеозаписи на несуществующую модель и может работать в режиме реального времени. Проект создан на основе популярного искусственного интеллекта DeepFaceLab от того же автора, а для его использования не требуются знания определённых технологий или особая подкованность — инструкция по установке очень простая.
Telegram-канал создателя Трешбокса про технологии
DeepFaceLive накладывает дипфейк на человека в кадре как в прямых трансляциях, так и в видеоконференциях (например, в Zoom). В качестве дипфейка может быть установлен знаменитый актёр или собственный уникальный образ, созданный с помощью DeepFaceLab. По заверению разработчика, 95% существующих дипфейков, опубликованных на YouTube, созданы именно через DeepFaceLab.
Пример работы DeepFaceLive с правильными настройками. Лицо автоматически заменяется на Тома Круза
Минимальные системные требования для качественной работы DeepFaceLive включают 64-разрядную версию Windows 10, 4 ГБ оперативной памяти и не менее 32 ГБ свободной памяти на накопителе. Видеокарты AMD не поддерживаются, поэтому программа совместима только с NVIDIA GeForce GTX 750 или выше. Процессор должен поддерживать AVX-инструкции. Также рекомендованы последние версии графических драйверов.
Открытый исходный код DeepFaceLive, загрузка программы и инструкция по установке доступны на странице проекта.
Материалы по теме:
Источник: trashbox.ru
Технология DeepFake
DeepFake – технология, которая умеет размывать реальность. Искусственный интеллект способен сделать то, о чем многие мечтали в детстве – например, заменить лицо любимого героя на ваше собственное. Или же в фильме поменять одного актера на другого.
Описание технологии
Дипфейк – технология изменения фото и видео с помощью искусственного интеллекта. Специальные алгоритмы помогают быстро заменить лицо. Получается реалистично – не отличить. Поэтому и название технологии соответствующее: deep learning – глубокое обучение, fake – подделка.
DeepFake придумал студент Стэнфордского университета, Ян Гудфеллоу – ещё в 2014 году. Заменять лица на фотографиях и роликах пытались и ранее. Но итоги выглядели смешно: подделку легко распознавали.
Ян Гудфеллоу придумал новый способ: объединил работу двух нейронных сетей. Словно творец и критик, они работают в паре:
- Одна нейронная сеть – генератор – создаёт изображение, стараясь повторить мельчайшие детали.
- Вторая – дискриминатор – придирчиво изучает изображения: этот эксперт определяет, где сгенерированная картинка, а где реальная.
В основе DeepFake – генеративно-состязательные нейросети (GAN), создающие новый контент из заданного набора. Это алгоритмы на базе машинного обучения.
Выявляя подделку, эксперт сигнализирует копирующему – тот переделывает работу, предлагая более качественный вариант. Но технология продолжает совершенствоваться – с помощью библиотек и открытых источников – например, при помощи роликов на YouTube. GAN даже может изучить тысячу фото Барака Обамы и сделать искусственное, сохраняя его черты и мимику.
GAN создает новую виртуальную реальность, которая уже используется в разных сферах:
- В 2019 году во Флориде открыли выставку, посвященную Сальвадору Дали. Благодаря технологии DeepFake, гостей приветствовал сам гений – виртуальная копия. Очень реалистично: Сальвадор общался, шутил, разговаривал с характерным акцентом и даже делал селфи на смартфон.
- Косметическая марка Vivienne Sabо использовала для продвижения в России рекламный ролик, применив замену лиц. Загрузив селфи, зрители получали предсказание с собой в главной роли.
- DeepFake – это новые возможности и для игр, ведь персонажи смогут отображать игрока и его друзей. Противников или союзников можно будет узнавать по шагам, голосу, интонации – предугадывать поведение.
И хотя технология еще развивается, DeepFake уже доступен широкому кругу лиц – благодаря приложениям. Изменить фото или видео, используя собственное изображение, может каждый.
Скачать программу с DeepFake
Пример использования технологии в приложении – Reface. От пользователя требуется лишь селфи, а приложение сделает все остальное. Не требуется множество фото с разных ракурсов – достаточно одного в анфас. Скачать программу можно с нашего сайта.
В Reface есть разные форматы: GIF-анимации, отрывки из фильмов и игр, ролики из рекламы.
Сервис Reface уже используется в более чем 100 странах. В Google Play Reface даже выбрали лучшим развлекательным приложением 2020 года. В американском AppStore программа стала лидером в категории «Развлечения», опередив TikTok и Netflix. В разделе бесплатных приложений заняла второе место, обогнав YouTube, Instagram и Facebook.
Замена одного лица на другое в приложении происходит за несколько секунд. Скорость легко объяснима: нейросеть обучали с помощью миллионов изображений из открытых библиотек.
В других подобных программах часто используются способы попроще – CGI или 3D-моделирование. В основе Reface – именно искусственный интеллект, метод машинного обучения GAN.
Использование Deepfake в работе приложения Reface.
Что доступно пользователям:
- Можно меняться лицами со звездами – стать спортсменом, актером, известным мафиози.
- Сделать смешные гифки со своим лицом – доступна большая коллекция GIF.
- Создать необычные видео открытки или забавные ролики для соцсетей.
- Возможность создать коллекцию видео с собой в главной роли – большой перечень отрывков из фильмов и клипов.
Reface постоянно улучшается. Сначала был доступен только face swap в GIF – «обмен лицами» на изображении. Сейчас есть создание и высококачественного видео.
Как делать DeepFake
Поле для экспериментов широкое: отрывки из фильмов Тарантино, подборка про Гарри Поттера, ролики из «Властелина колец» и сериала «Друзья», тематические подборки на тему поздравлений и выражения разных эмоций. Ежедневно разработчики добавляют новую порцию 10-секундных роликов.
Как это работает:
- Нужно выбрать удачное селфи, загрузить его в программу.
- В приложении перейти в галерею GIF или видеороликов.
- Определить желаемую гифку или отрезок видео – на его основе будет создан дипфейк.
- В разделе видео есть возможность выбора из 5 категорий: избранное (самое популярное), 9gag (конкурс для пользователей), локальные (можно найти ролики из советских фильмов и со звездами из местного шоу-бизнеса), музыка, кино.
- Применить сделанное селфи к выбранной анимации – нажать кнопку «Reface».
- Замена происходит за секунды.
Сделанные GIF или видео можно сохранить и поделиться с друзьями. Возможности приложения часто используют инфлюенсеры в соцсетях.
При необходимости все загруженные фото можно удалить в профиле, выбрав карандаш. С помощью настроек – отправить запрос об удалении всей персональной информации с серверов, и это произойдет в течение 24 часов.
Примеры Дипфейков
Переворот ожидает и киноиндустрию – в будущем технология позволит сгенерировать всех актёров, необходимых для фильма. Но уже сейчас есть дипфейки со звёздами.
Том Круз
Популярность набирает сверхреалистичная копия Тома Круза. Благодаря DeepFake всё кажется реальным: мимика, голос, движение.
Но актера изображает другой человек, а лицо накладывает нейросеть, превращая автора в копию голливудскую звезду.
Скарлетт Йохансон
Технология способна даже поменять актеров в снятом кино. Например, в отрывке американского фильма «Касабланка» главную героиню заменили на Скарлетт Йохансон.
Билли Айлиш
Дипфейк позволяет использовать Билли Айлиш или даже Илона Маска. Например, перевоплотить героя для интервью.
Emma Watson
Что, если бы Эмма Уотсон сыграла роль в фильме «Завтра у Тиффани»? Дипфейк позволяет не только пофантазировать, но и увидеть это вживую.
Источник: refaceapp.ru