Алгоритм напоминает поисковую систему, которая работает внутри отдельно взятого видео, например, на записи с камер видеонаблюдения. Нейросеть может найти на видеозаписи человека по запросу «женщина ростом около 150 см в красном».

Точность распознавания системы составляет примерно 60% — во время тестирования она обнаружила 28 из 41 человек, которых описывали создатели. В основе разработки лежат сверточная нейросеть и технология компьютерного зрения.

В будущем исследователи планируют расширить критерии поиска человека. После этого нейросеть, например, упростит поиск пропавшего человека по камерам видеонаблюдения. Искусственный интеллект сможет составить карту передвижений и определить, в какое время он побывал в определенных местах.

Ранее инженеры из Университета Цинхуа создали приложение, способное на основе искусственного интеллекта распознавать беззвучную речь по движениям губ.