Сердцебиение помогает выявлять deepfake-видео

Голландские исследователи разработали новый метод обнаружения дипфейков, анализируя паттерны кровотока на лице человека. Технология основана на удалённой фотоплетизмографии (RPPG), которая фиксирует малейшие изменения цвета кожи, вызванные сердцебиением. Современные инструменты создания дипфейков пока не способны воспроизводить эти естественные биологические ритмы.

Метод выявляет пульсацию в 79 точках лица, где кровеносные сосуды расположены ближе к поверхности кожи. Даже при движении или слабом освещении алгоритм коррелирует данные с показаниями умных часов и кардиомониторов. Правда, на тёмной коже контрастность снижена, что усложняет анализ.

История разработки

Идея родилась в 2012 году, когда Нидерландский институт судебной экспертизы (NFI) расследовал случаи распространения ‘снарф-фильмов’. Тогда технология не справлялась из-за потерь при сжатии видео. Сейчас алгоритмы компрессии стали точнее, сохраняя нужные для детекции детали.

Комплексный подход

NFI использует несколько методов одновременно:

• Анализ частоты электросети (ENF) по мерцанию света
• Создание ‘отпечатков’ камер через Photo Response Non-Uniformity
• Поиск артефактов в речи, мимике и границах лица

Как отмечает Зено Герадтс из NFI, ни один метод не даёт 100% гарантии, но их комбинация значительно повышает точность.

Гонка вооружений

Технология уже сейчас рискует устареть — создатели дипфейков могут начать имитировать сердцебиение в своих алгоритмах. Это классическая игра в кошки-мышки: каждое новое средство защиты стимулирует развитие инструментов обхода.

Ожидается, что научная публикация по методу выйдет в течение полугода. После валидации технологию начнут применять в реальных расследованиях — но только для видео высокого качества.