NtechLab, мировой лидер в области решений для видеоаналитики на основе нейронных сетей и технологический партнер госкорпорации «Ростех», сообщает, что алгоритм компании занял третье призовое место по итогам международного соревнования Deepfake Detection Challenge по распознаванию дипфейков на видео. Об этом сообщается в пресс-релизе, поступившем в редакцию «Ленты.ру».
В конкурсе, проводившемся Amazon, Facebook и Microsoft, приняло участие более 2,2 тысячи команд со всего мира. Исходный код алгоритма NtechLab будет опубликован в свободном доступе для продвижения мировой борьбы с неконтролируемым производством дипфейков.
Дипфейк (deepfake) — методика синтеза изображения, основанная на технологии нейросетей. Дипфейки используются для соединения и наложения существующих изображений и видео на исходные изображения или видеоролики. Дипфейки могут быть использованы для замены определенных элементов изображения на желаемые образы, в частности, для создания роликов, которые в дальнейшем могут быть использованы для политической манипуляции, личной выгоды или мести.
Опасность неконтролируемого производства дипфейков признана на международном уровне. В частности, в США и Китае был принят ряд законов, регулирующих производство подобных видеороликов.
Конкурс Deepfake Detection Challenge проводился в течение 4 месяцев на популярной платформе для технологических соревнований в области машинного обучения Kaggle. Участники соревнования должны были представить алгоритмы, в автоматическом режиме определяющие, использовалась ли при производстве видеоролика технология Deepfake. Алгоритмы тестировались на серии 10-секундых роликов, на части из которых лица людей были заменены с помощью Deepfake. Для тестирования использовались как ролики, специально созданные организаторами для конкурса, так и реальные видео с дипфейками, которые можно встретить на интернет-площадках.
На части видеороликов специально использовались приглушенное освещение и ракурсы, осложняющие выявление Deepfake. Таким образом, определить ролики, при производстве которых использовалась технология Deepfake, без применения алгоритмов на основе нейросетей было невозможно. Общий призовой фонд конкурса составил один миллион долларов. Команда NtechLab заняла третье место со стоимостью приза в 100 тысяч долларов.
«Благодаря накопленной нашей командой экспертизе NtechLab представила в рамках конкурса одно из наиболее стабильно работающих решений, показавшее отличный результат как в роликах, созданных специально для конкурса, так и на «реальных» видео с различных интернет-площадок. Залогом нашего успеха стал талант инженера Азата Давлетшина, применившего оригинальный способ обучения нейросетей, в равной степени основанный на результатах проведенных экспериментов и творческой интуиции. В соответствии с условиями конкурса, исходный код алгоритма NtechLab будет опубликован в свободном доступе для продвижения мировой борьбы с неконтролируемым производством дипфейков», — сказал со-основатель NtechLab и директор R&D компании Артём Кухаренко.
Алгоритм, разработанный инженерами NtechLab в рамках конкурса, будет использован для дальнейшего развития технологий компании. В частности, эти наработки помогут для выявления сложных случаев мошенничества в сценариях распознавания лиц, используемых в банковско-финансовой сфере.