Становится всё более очевидным, что Apple работает над гарнитурой AR/VR для потребительского рынка. Первоначально ожидалось, что она будет выпущена уже в 2020-м году, по последним слухам, ее выпуск состоится в 2021-м или 2022-м году.
При использовании iPhone или iPad в качестве AR, пользователь обычно нажимает на экран, чтобы взаимодействовать с объектами, показанными на экране. При использовании гарнитуры AR эта же задача будет трудоемкой. Предыдущие попытки прямого взаимодействия со средой AR требовали дополнительных устройств, таких как перчатки или датчики пальцев. Между тем, попытки визуального обнаружения контакта пальцев с поверхностью не достаточно точны, чтобы быть полезными.
Но что было менее понятно, так это точный набор функций, которые будут предоставлены AR/VR очками от Apple. Издание AppleInsider, недавно раскрыло патентную заявку от Apple, демонстрирующая некоторые интригующие исследования, проводимые в этой области еще в 2016 году.
Apple, в патентной заявке рассматривает вопрос о том, каким образом пользователи, носящие гарнитуру, смогут взаимодействовать с виртуальной и реальной средами одновременно, и каким образом, компания может более элегантно выполнить эту задачу. Так, при использовании инфракрасного теплового сканирования, можно будет определить, когда пользователь касается объекта реального мира.
The present disclosure is related to a method and device for detecting a touch between at least part of a first object and at least part of a second object, wherein the at least part of the first object has a different temperature than the at least part of the second object. The method includes providing at least one thermal image of a portion of the second object, determining in at least part of the at least one thermal image a pattern which is indicative of a particular value or range of temperature or a particular value or range of temperature change, and using the determined pattern for detecting a touch between the at least part of the first object and the at least part of the second object.
Если сказать на более понятном языке, то настоящее открытие относится к методу обнаружения касания объектов в пространстве, где температура объектов и пальца отличается. Метод включает в себя обработку теплового изображения объектов и пальца. Для обнаружения места прикосновения пальца к объекту, определяется изменение температуры и ее разница.

Этот метод может позволить Apple Glasses визуально проецировать элементы управления на реальные объекты и реагировать, когда пользователь прикасается к ним.
Как и в случае со всеми патентными заявками, мы не можем быть уверены в том, что компания Apple включит эту функцию в свои будущие гарнитуры AR/VR, но почти наверняка компания планирует выпустить саму гарнитуру.