Александр Пономарёв

Текст

Американские ученые из Техасского университета в Остине провели исследование, участники которого смогли классифицировать настоящие и искусственные лица со средней точностью 48,2%

Ученые использовали для исследования 400 синтетических лиц, сгенерированных нейросетью StyleGAN2 200 женских и 200 мужских дипфейков в различных возрастных диапазонах и расах (100 чернокожих, 100 европеоидов, 100 восточноазиатских и 100 южноазиатских лиц). Алгоритм извлекал низкоразмерное представление каждого лица из своей базы для сравнения с базой данных реальных лиц и получения максимально похожего дипфейка.

В первом эксперименте 315 участников классифицировали 128 из 800 лиц как настоящие или синтезированные. Точность прогноза составила 48,2% дипфейков. При классификации реальных лиц наблюдалась значительная корреляция между полом и расой и результатами. Средняя точность была выше для лиц мужчин из Восточной Азии, чем для лиц женщин оттуда же. Также она была выше для белых лиц мужского пола, чем для белых женщин.

Во втором эксперименте 219 новых участников классифицировали 128 лиц, но с обучением и последовательной обратной связью. Средняя точность выросла до 59% (59,3% для первого набора из 64 лиц и 58,8% для второго набора из 64 лиц). Третий эксперимент был разработан, чтобы выяснить, существует ли разница в восприятии дипфейков и реальных лиц.

В общей сложности 223 участника оценили реальность 128 лиц, взятых из того же набора, по шкале от одного до семи (единица для ненадежных и семь — для заслуживающих доверия). Для реальных снимков средний коэффициент составил всего 4,48 по сравнению с 4,82 для синтетических изображений. Женские лица получили более высокий коэффициент (4,94) по сравнению с мужскими (4,36). При этом чернокожие лица также вызывали больше доверия, чем лица из Южной Азии.

Технология дипфейков продолжает непрерывно совершенствоваться:

Использованные источники: