Apple Vision Pro может распознавать знакомые жесты и позволять назначать их задачам
У Apple есть планы сделать Apple Vision Pro еще более доступным и разрешить управлять им с помощью настраиваемых жестов.
Представьте, что вы звоните по Zoom и можете отключить звук, как это делает радио-диджей, сделав разрезающий жест перед своим горлом. Или, может быть, сделайте старый как мир жест рукой, означающий «позвони мне», и Apple Vision Pro отправит ваши контактные данные тому, на кого вы смотрите.
Это подразумевает недавно выданный Apple патент «Метод и устройство для определения пользовательских жестов рук». Это метод назначения любого жеста любой функции Apple Vision Pro, и хотя он исходит из специальных возможностей гарнитуры, он имеет широкое применение.
В демонстрациях Apple Vision Pro Apple иногда говорит, что гарнитура — самое доступное устройство из всех. Даже для короткой демонстрации есть опции, которые помогут использовать ее людям с ограниченными физическими возможностями, например.
«В различных реализациях электронное устройство распознает предопределенные жесты руки, выполняемые пользователем, и в ответ выполняет соответствующую функцию», — говорится в патенте. «Однако в различных реализациях пользователь может быть физически не в состоянии выполнить предопределенный жест руки или может желать, чтобы жест руки выполнял другую функцию».
Это похоже на то, как функции вроде Back Tap на iPhone могли быть введены как функции доступности, но предлагают такое удобство, что любой пользователь может их использовать. И так же, как и в случае с Back Tap, то, что описывает этот патент, предполагает, что жест может запустить Shortcut.
Это открывает все. Самый маленький жест может запустить любую команду, то есть вы можете заставить ее запустить целую последовательность опций.
Как всегда, патент в основном касается того, как что-то можно сделать, а не того, для чего технология может быть использована. Но в своих 6000 словах и 48 рисунках он шаг за шагом описывает, как эти будущие жесты могут быть обнаружены и назначены задачам или функциям.
Обучение Apple Vision Pro распознаванию жестов
Каждый из шагов использует то, что Apple называет Gesture Association Tool, который начинается с вопроса, для какой функции пользователь хочет создать жест. В патенте на самом деле неясно об этом этапе, но, предположительно, пользователь должен вручную выбрать функцию или сочетание клавиш.
Также есть тот факт, что если жест известен и еще не используется, Apple Vision Pro может назвать его для вас. В приведенном примере кто-то держит ладони вместе, что, как предполагает Tool, означает «Намасте».
Предполагая, что он еще не распознал жест, он запрашивает для него название. Затем он просит пользователя повторить жест — и затем сделать жест, который похож, но отличается.
С этого момента новый жест будет распознан, и будет выполнена связанная с ним задача или функция. Apple не описывает редактирование жестов позже или их удаление, но, по-видимому, будет способ сделать это — и, конечно, увидеть все пользовательские жесты.
В патенте Apple также не говорится о том, например, откажется ли Apple Vision Pro распознавать грубые жесты.
Этот патент, который, таким образом, надеется, что все будут вести себя хорошо, принадлежит двум изобретателям, Томасу Г. Солтеру и Ричарду Игнатиусу Пусалу Лосада. У обоих есть несколько предыдущих патентов, связанных с дополненной реальностью и графическими средами.
