КиноПоиск начал использовать нейросеть для распознавания персонажей в кинолентах

Сервис КиноПоиск начал использовать нейросеть DeepDive, способную идентифицировать в кинофильмах и телесериалах актеров по внешности. В основу работы нейросети положены наработки «Яндекса» в сфере компьютерного зрения и машинного обучения. В качестве базы данных нейросеть использует энциклопедию КиноПоиска.
 
После постановки видео на паузу алгоритмы DeepDive начинают анализировать кадр с целью идентификации запечатленных на нем актеров. Нейросеть способна распознавать их даже в сложном гриме. В ходе тестов система без труда идентифицировала Р. Дауни-младшего в кинолентах «Железный человек» и «Мстители: Война бесконечности», а также З. Салдану в фильме «Стражи Галактики», где она играет в зеленом гриме.
 
После идентификации актера нейросеть сообщает имя персонажа, дает справочную информацию о герое и т. п. Это может быть полезно, если зритель не видел прошлого сезона или смотрел фильм давно. Составлением описаний персонажей фильмов занимаются сотрудники редакции КиноПоиска.
 
На данный момент система работает в более чем 150 кинофильмов и телесериалов, которые доступны зрителям на условиях подписки. Среди прочего, речь идет о таких картинах, как «Перевал», «Чудотворцы», «Проект «Синяя книга», «Манифест», «Академия смерти» и др. С 11 апреля технология распознавания актеров стала доступна в мобильной версии КиноПоиска.