25.06.2019 09:25
Новости.
Просмотров всего: 1435; сегодня: 1.

Алгоритм научили точно определять подмену лиц

Алгоритм научили точно определять подмену лиц

Американские ученые представили новый способ автоматического определения подмены лиц на видео. Их алгоритм, обученный на примерах реальных видео с речью людей, определяет подделку по движениям головы и мимике лица. Система, которая была представлена на конференции CVPR 2019, пока что работает только на примере пяти американских политиков, а его точность составляет 92 процента.

Алгоритмы, которые могут эффективно переносить информацию между изображениями или видео, существуют достаточно давно. В последние несколько лет они также очень активно развиваются, из-за чего растет риск того, что подобные технологии будут использованы во вред людям. Разумеется, параллельно с алгоритмами, которые все лучше и лучше накладывают маски человеческих лиц на видео и статичные изображения, разрабатываются и алгоритмы, которые могут успешно распознать подобную подмену (при этом их результаты, разумеется, в дальнейшем используются для того, чтобы улучшить работу оригинальных алгоритмов).

При этом все уже известные способы определения подмены лиц на видео опираются на поиск внешних дефектов, которые могут появиться при наложении маски лица (например, неровные края). При сравнительно низком качестве видео такие дефекты, однако, могут остаться незаметными, из-за чего сильно снижается эффективность распознавания.

Именно поэтому для распознавания подобных подмен на фотографиях и видео эффективнее было бы использовать другие видимые признаки, перенести которые не так просто. При создании своего алгоритма исследователи под руководством Шрути Агарваль (Shruti Agarwal) из Калифорнийского университета в Беркли решили сосредоточиться на распознавании движений головы и отдельных мимических признаках. Для упрощения задачи исследователи сосредоточились на определении подмены лиц определенных людей, а именно — пяти американских политических деятелей: Хилари Клинтон, Берни Сандерса, Барака Обамы, Дональда Трампа и Элизабет Уоррен.

Для алгоритма разработчики создали датасет из схематичных мимических изменений лиц и поворота головы политиков при разговоре на видео: для этого авторы использовали открытый инструмент OpenFace2. С помощью метода опорных векторов исследователи обучили классификатор, который определяет подделку на видео. В качестве основного материала для тестирования алгоритма разработчики создали десятисекундные видео, на которых лица политиков были наложены на видеоряды со сторонними людьми с помощью генеративно-состязательных нейросетей.

В результате разработчикам удалось определять подмену лиц на видео с точностью до 92 процентов. Исследователи отмечают, что их алгоритм пока что неидеален, и хорошо справляется только с видеофрагментами, на которых говорящий смотрит прямо в камеру, и не сможет распознать подмену лиц на видео, где человек изображен, например, в профиль. Для решения этой проблемы необходимо сделать алгоритм контекстно-независимым (то есть работающим для любого положения головы) с помощью расширения датасета для обучения. Это же поможет решить и другую проблему — то, что на данный момент такое определение подмены работает только для пяти человек.

Елизавета Ивтушок.


Ньюсмейкер: Национальное деловое партнерство "Альянс Медиа" — 12077 публикаций
Поделиться:

Интересно:

Как законно снизить налоговую нагрузку
28.03.2024 17:56 Консультации
Как законно снизить налоговую нагрузку
Предприниматели имеют право и законную возможность уменьшать налоги. Одна из самых очевидных мер – подбор оптимального налогового режима. Так, многим предпринимателям доступна упрощенная система налогообложения (УСН) с простой и понятной формой отчетности, ставкой до 6 или 15% в зависимости от...
О своих мечтах об отдыхе поделились российские дети
28.03.2024 12:18 Аналитика
О своих мечтах об отдыхе поделились российские дети
В преддверии II Всероссийского конкурса юного художника «Место в России, где я мечтаю побывать», который стартует 1 апреля 2024 года, эксперты Национального туроператора Алеан рассказали, куда хотели поехать дети, исходя из анализа работ прошлого года. Дети в возрасте от 6 до 15 лет поделились...
562 года назад на престол взошёл Иван III
28.03.2024 10:44 Новости
562 года назад на престол взошёл Иван III
В историю он вошел в первую очередь как собиратель русских земель и, по сути, создатель единого государства Российского, созидатель и мудрый дипломат – при Иване III не только расширяются границы, но и создается прообраз системы управления страной – пишутся единые законы, утверждается...
Ранее неизвестные петроглифы описали российские ученые
27.03.2024 18:03 Новости
Ранее неизвестные петроглифы описали российские ученые
Группа ученых из Кемеровского государственного университета во главе с доктором исторических наук Ольгой Советовой описала ранее неизвестные петроглифы, обнаруженные в ходе экспедиций последних трех лет. Среди найденных рисунков неожиданно оказалось и крайне редкое изображение парохода. Основной...
Неизвестный объект археологического наследия найден в Подмосковье
27.03.2024 17:20 Новости
Неизвестный объект археологического наследия найден в Подмосковье
В подмосковном городе Ликино-Дулево Орехово-Зуевского городского поселения археологи провели превентивное обследование территории, прилегающей к скверу Дулевского фарфорового завода. В результате был обнаружен ранее неизвестный исторический слой, который уже признан вновь выявленным объектом...