Компания Microsoft запатентовала идею по наложению живого изображения поверх системы смешанной реальности. Фактически, система будет автоматически распознавать людей, присутствующих на изображениях, и в режиме реального времени отображать информацию, связанную с этими людьми.
По всей видимости, процесс мониторинга будет постоянно пытаться обнаружить изображения лиц в среде смешанной реальности. После обнаружения будет происходить идентификация контура лица и создастся холст, на который наложится информация, связанная с распознанным человеком. Это будет выглядеть как наложение или замена реального изображения в смешанной реальности.
Стоит отметить, что системы дополненной и виртуальной реальности допускают добавление информации к объектам, но область применения этой технологии пока не распространяется на изображения реальных людей. Также существующие методы расширения информация не учитывают личную связь пользователя с каким-либо распознанным объектом на фотографии. Выданный патент реализует обе эти идеи.
Источниками информации о человеке могут являться различные приложения, социальные сети, поисковые системы и многое другое. При желании, поиск может быть ограничен локальной базой контактов.
Не исключено, что эта система может быть реализована в следующем поколении гарнитуры дополненной реальности HoloLens.