Разработка технологии автоматической бимодальной верификации по лицу и голосу

Разработка технологии автоматической бимодальной верификации по лицу и голосу

Разработка технологии автоматической бимодальной верификации по лицу и голосу с защитой от использования подложных биометрических образцов

Соглашение о предоставлении субсидии № 14.578.21.0189 от 03.10.2016

Научный руководитель: д.т.н. Ю.Н. Матвеев

Творческий коллектив: 44 человека, включая 4 докторов наук, 14 кандидатов наук, 2 аспирантов, 3 магистрантов

Заказчик: Министерство образования и науки Российской Федерации

Индустриальный партнер: ООО «ЦРТ»

Цель работы: Разработка технологии бимодальной верификации по лицу и голосу и программных средств защиты от использования подложных биометрических образцов.

Реализация разработанной технологии в виде перспективных программно-технических решений автоматической бимодальной верификации, обеспечивающих увеличение уровня безопасности при доступе к удаленным защищенным ресурсам, содержащим конфиденциальную информацию.

Итоги 2017 г.:

  • Проведены теоретические исследования. Разработаны алгоритмы и программные модули автоматической бимодальной верификации пользователя по лицу и голосу с защитой от попыток использования подложных биометрических образцов.
  • Разработан экспериментальный образец программного комплекса (ЭО ПК). Разработаны программная документация на ЭО ПК и программа и методики экспериментальных исследований.
  • Получен 1 РИД, опубликовано 2 статьи в научных журналах, индексируемых в Scopus. Принято участие в 2 международных конференциях по тематике ПНИЭР.

 

Итоги 2018 г.:

  • Проведены экспериментальные исследования экспериментального образца программного комплекса. Результаты экспериментальных исследований показали, что разработанные алгоритмы, соответствуют требованиям ТЗ и согласуются с результатами аналогичных работ, определяющих мировой уровень.
  • Проведены обобщение и оценка полученных результатов. Доказана эффективность полученных в рамках ПНИЭР результатов.
  • Разработаны рекомендации и предложения по использованию результатов ПНИЭР. Разработаны проект ТЗ на ОКР и ТЭО.
  • В 2018 году результаты ПНИЭР были представлены международному научному сообществу на шести международных конференциях: 15 международная конференция Image Analysis and Recognition, ICIAR 2018 (Португалия), международная конференция Speaker Odyssey 2018 (Франция), международная конференция Interspeech 2018 (Индия), международная конференция Acoustics, Speech and Signal Processing, ICASSP 2018 (Канада), 28 международная конференция по компьютерной графике и машинному зрению, ГрафиКон 2018 (Россия), международная конференция Computer Vision and Pattern Recognition Conference, CVPR Workshops 2018 (США)
  • По результатам участия было опубликовано три статьи в научных изданиях, индексируемых в базе данных Scopus:
    1. Novoselov, S., Kudashev, O., Shchemelinin, V., Kremnev, I., Lavrentyeva, G. Deep CNN based feature extractor for text-prompted speaker recognition (2018) ICASSP, IEEE International Conference on Acoustics, Speech and Signal Processing — Proceedings, 2018-April, статья № 8462358, pp. 5334-5338. DOI: 10.1109/ICASSP.2018.8462358.
    2. Lavrentyeva, G., Kudashev, O., Melnikov, A., De Marsico, M., Matveev, Y. Interactive Photo Liveness for Presentation Attacks Detection (2018) Lecture Notes in Computer Science (including subseries Lecture Notes in Artificial Intelligence and Lecture Notes in Bioinformatics), 10882 LNCS, pp. 252-258. DOI: 10.1007/978-3-319-93000-8_29.
    3. Novoselov, S., Shchemelinin, V., Shulipa, A., Kozlov, A., Kremnev, I. Triplet loss based cosine similarity metric learning for text-independent speaker recognition (2018) Proceedings of the Annual Conference of the International Speech Communication Association, INTERSPEECH, 2018-September, pp. 2242-2246. DOI: 10.21437/Interspeech.2018-1209.

 

По результатам ПНИЭР в 2018 году также было получено два свидетельства о государственной регистрации РИД:

  1. Свидетельство №2018616148 от 24.05.2018 г. о государственной регистрации программы для ЭВМ «Модуль голосовой верификации пользователя по парольной фразе с использованием детектора речевой активности». Проведены дополнительные патентные исследования в соответствии с ГОСТ Р 15.011-96;
  2. Свидетельство №2018617189 от 20.06.2018 г. о государственной регистрации программы для ЭВМ «Модуль верификации пользователя с применением оценки портретных характеристик изображения лица». Проведены дополнительные патентные исследования в соответствии с ГОСТ Р 15.011-96.

 

Таким образом, поставленная перед проектом цель, которая заключается в разработке технологии автоматической бимодальной верификации по лицу и голосу с защитой от использования подложных биометрических образцов и реализации ее в виде программно-технических решений, достигнута.