Apple Glass может превратить любую поверхность в дисплей с сенсорным управлением

Сенсорные экраны становятся непрактичными, когда этот экран находится рядом с вашим глазом в чем-то вроде «Apple Glass», поэтому Apple изучает, как можно манипулировать виртуальными элементами управления в реальном мире.

Недавно обнародованная патентная заявка показала, что Apple предлагает способ использования Apple AR для отображения информации о том, что будет отображаться для всех, кроме владельца, в виде пустого экрана. Теперь в отдельном приложении он пытается сделать любую поверхность видимой для пользователей «Apple Glass» в виде панели управления с кнопками и дисплеем.

«Метод» и устройство для обнаружения касания между первым объектом и вторым объектом «, поданное в 2016 году, но раскрытое только на этой неделе, указывает на то, что такой способ представления элементов управления, наложенных на объекты реального мира, будет необходим.

«Для людей естественным способом взаимодействия с (реальными) объектами является прикосновение к ним руками», — говорится в нем. «[Экраны], которые позволяют обнаруживать и локализовать прикосновения к своей поверхности, обычно известны как сенсорные экраны и в настоящее время являются обычной частью, например, смартфонов и планшетных компьютеров».

«[Однако] текущая тенденция состоит в том, что дисплеи для AR становятся меньше и/или они приближаются к сетчатке глаза пользователя», — продолжает он. «Это, например, случай с дисплеями, закрепленными на голове, и поэтому использование сенсорных экранов затруднено или даже невозможно».

Ваш «Apple Glass» может показать вам Значит, это информация, но вы не сможете многое с ней поделать, если не снимете очки и не ткните линзу пальцем. Однако, поскольку AR уже отображает виртуальные объекты в реальном мире вокруг вас, его можно расширить, чтобы он выглядел так, как будто есть кнопки и элементы управления, удобно расположенные там, где вы могли бы их коснуться или коснуться.

В этом случае ваши глаза будут видеть виртуальный объект, потому что «Apple Glass» показывает его вам, но ваше пальцы могут касаться всего, что действительно находится в этом месте в реальном мире. Если AR может определить, что вы коснулись того, что, по вашему мнению, является кнопкой, он может отреагировать так, как если бы вы действительно нажали элемент управления.

К сожалению, это сложнее, чем кажется. Идея экрана конфиденциальности Apple может работать потому, что реальный объект похож на iPad. Даже если этот iPad на самом деле ничего не показывает вам на своем экране, он может распознать, куда вы нажимаете.

Новое предложение Apple включает в себя распознавание таких касаний или касаний на любой поверхности вообще. И чтобы сделать это, не заставляя пользователя носить датчики на кончиках пальцев или не использовать окклюзию.

«Самый распространенный подход — физически оснастить объект или тело человека (например, кончик пальца) с датчиком, способным распознавать прикосновения «, — говорится в приложении.. Но его не впечатляет это или электрические версии, которые делают тело частью цепи: «Ограничение такого рода подходов состоит в том, что они требуют модификации объекта или человеческого тела».

Деталь из патента, показывающая, как плоский квадрат объект может быть преобразован в калькулятор

С окклюзией камера может наблюдать, куда касаются пальцы пользователя. Это вполне может сработать, особенно в AR, потому что система отобразит всю среду и знает, что, например, под пальцами пользователя есть поверхность стола.

Следовательно, он может отображать кнопки на этой поверхности. Однако в заявке на патент фактически указано, что это должны быть довольно большие кнопки. По словам Дэниела Курца, автора патентной заявки Apple, проблема-убийца в том, что окклюзия никогда не может быть точно точной.

«С виртуальными кнопками это действительно так. невозможно активировать кнопку, например № 5 из массива соседних кнопок на цифровой клавиатуре, без активации какой-либо другой кнопки до этого, «утверждает он», потому что кнопка № 5 не может быть достигнута без перекрытия любой из окружающих кнопок . «

Вы можете обойти это, используя кнопки еще большего размера или, возможно, их меньше, но даже в этом случае такие системы действительно обнаруживают окклюзию. Они определяют, прошел ли палец перед «кнопкой», а не то, действительно ли была нажата эта кнопка.

Предлагаемое Apple решение — тепло. «Если два объекта с разной температурой соприкасаются, — говорится в приложении, — температура в области, в которой они касаются, изменится, а затем медленно вернется к исходной температуре, как до касания».

«Следовательно, для пикселей, соответствующих точке в окружающей среде, где недавно произошло прикосновение, — продолжает он, — наблюдается медленное, но четко измеримое снижение или повышение температуры».

Итак, чего бы ни коснулся ваш палец, произойдет передача тепла. Это крохотно, но определенно есть. «Плавные изменения температуры могут указывать на прикосновение между двумя объектами, которое недавно произошло в выбранной позиции», — говорится в патенте.

В приложении обсуждаются различные методы обнаружения тепловых изменений, например, с помощью тепловизора, но в основном это связано с достижимой точностью.

«Он может различать прикосновения или окклюзии, вызванные человеческим телом (что произошло намеренно) от прикосновений или окклюзий чем-либо еще (что могло произойти случайно) », — говорится в нем. «Он способен точно локализовать прикосновение и может идентифицировать события прикосновения после того, как они произошли (т. Е.. даже если в момент касания не было камеры, компьютера или чего-либо еще) «.

Последнее зависит от того, что обнаружение выполняется довольно быстро после касания, но, например, может случиться так, что пользователь касается поверхности, и тепловое изображение происходит, когда он убирает палец. Приложение включает в себя пример фотографии, показывающей недавнее касание кончиком пальца поверхности.

Наряду со связанной идеей отображения данных только для владельца «Apple Glass», все это является частью широкомасштабной работы Apple над AR. Это показывает, что компания пристально смотрит — и на долгое время. время, поскольку эта заявка на патент была подана четыре года назад, — в практическое применение дополненной реальности, а не только в визуальной части.

Среди множества связанных патентов Apple в В области AR существует еще одно, написанное тем же Дэниелом Курцем, которое занимается точным взаимодействием с реальными и виртуальными объектами.

Оцените статью
futurei.ru
Добавить комментарий