Новая технология Ego4D для AR-очков Facebook поможет тем, кто часто теряет вещи.
Идея проекта в том, чтобы использовать искусственный интеллект для лучшего взаимодействия с окружающим миром. В первую очередь разработчики хотят усовершенствовать с ее помощью очки дополненной реальности. Функция «эпизодической памяти» поможет ответить на вопрос «где я оставил ключи?», а аудиовизуальный дневник напомнит, кто и что сказал. На сегодняшний день еще не существует устройств, которые обладали бы такими возможностями.
Ожидается, что ИИ сможет помочь таким устройствам как AR и VR взять на себя часть функционала смартфонов. В настоящее время для обучения алгоритмов компьютерного зрения используют большие наборы изображений и видео, снятых от третьего лица. Facebook планирует сместить фокус, использовав видео от первого лица.
Как сказано в официальном блоге Facebook, «Искусственный интеллект следующего поколения должен будет учиться по видео, которое демонстрирует окружающий мир из центра действия, а не из задворок».
Facebook не первый год интересуется технологиями VR. Например, компания выпускала гарнитуру виртуальной реальности совместно с производителем гарнитур Oculus. Эксперты ожидают выхода полноценных AR-очков Facebook. В настоящий момент они находятся в разработке.
Планируется, что Ego4D будет собирать массив видеоданных, которые могут помочь в разработке систем компьютерного зрения и искусственного интеллекта. В проекте участвуют 13 университетов и лабораторий в девяти странах. На сегодняшний момент исследователи получили больше 3000 часов видео из повседневной жизни, которые снимали от первого лица. Сюда входят кадры, на которых люди занимаются бытовыми делами, работают в саду или в офисе, занимаются хобби и спортом и т. д. Для съемок использовали 855 камер.
Специалисты Facebook разработали пять вопросов, на которые должен уметь отвечать искусственный интеллект, чтобы быть полезным в быту:
- Что и когда случилось?
- Что делать дальше?
- Что я делаю?
- Кто что сказал?
- Кто с кем взаимодействует?
Возможно, в ближайшем будущем роботы действительно будут помогать искать ключи и напоминать имена новых знакомых. Однако сложность состоит в том, что технологии, которые настолько плотно интегрированы в жизнь, могут угрожать ее конфиденциальности.