Предлагаемые движения рук при управлении iPad

Apple Vision Pro представил новые способы управления приложениями с помощью жестов, но, судя по всему, Apple хочет распространить их на управление любым устройством, которое она выпускает.
До Apple Vision Pro, если вы жестикулировали на компьютере, это было грубостью. Однако с Apple Vision Pro Apple представила целую коллекцию жестов, от перемещения окон до изменения размера документов.
Они являются одними из лучших элементов visionOS в Apple Vision Pro, и удивительно, насколько они кажутся завершенными. Это целый набор жестов, которые, как только вам их покажут, кажутся настолько естественными, что невозможно представить себе альтернативы — или то, что они настолько новые.
Недавно раскрытая патентная заявка предполагает, что Apple тоже очень довольна этими жестами. Для использования их на большем количестве устройств и есть весь смысл «Устройств, методов и графических пользовательских интерфейсов для использования курсора для взаимодействия с трехмерными средами».
Это далеко не новость. Apple даже подала заявку на аналогичный патент еще в 2009 году, но эта новая заявка подкреплена успехом жестов в Apple Vision Pro.
Патентная заявка начинается с иллюстративных рисунков и диаграмм, из которых 36 связаны с Apple Vision Pro. Есть даже разбивка компонентов гарнитуры, и есть определенные признаки того, что Apple думает о том, как Apple Vision Pro может распознавать жесты пользователя и передавать их на Mac или другое используемое устройство.
Но есть и рисунки с фигурками, на которых пользователь держит обычный iPad или стоит перед довольно архаичным на вид компьютером в корпусе Tower с монитором. Ни в том, ни в другом случае пользователь не носит гарнитуру.
Apple утверждает, что эта патентная заявка касается устройств, «которые обеспечивают возможности, создаваемые компьютером, включая, помимо прочего, электронные устройства, которые обеспечивают возможности виртуальной реальности и смешанной реальности через дисплей».
Логично, что пользователи не должны этого делать. Сейчас iPad и iPhone оснащены датчиками Face ID, которые сканируют все лицо, так что не составит труда увидеть, как они распознают взмах руки перед собой.
И Apple уже использует датчики Face ID не только для биометрии и разблокировки устройств. С iOS 18 эти датчики — способ, которым пользователи могут полностью управлять своими iPhone, просто глядя на них.

Жесты не обязательно должны быть в воздухе, их можно выполнять на расширенном трекпаде
В новой патентной заявке основное внимание уделяется шагам, необходимым для правильного распознавания жеста, а также для отклонения ложных срабатываний, например, когда кто-то чешет нос.
Если «определено, что движение соответствующей руки удовлетворяет первому набору критериев», жест может, например, привести устройство к «изменению положения курсора на основе движения соответствующей руки». Если та же система определяет, что жест не соответствует набору критериев, система игнорирует его.
Поскольку это патентная заявка, то это все, что она может сказать о своем предназначении, потому что в патентах всегда мало вариантов использования. Этот более повторяющийся, чем большинство других, так как он отдельно работает, описывая все эти определения жестов и различные результаты от перемещения курсора до перемещения окон.
Но хотя патентная заявка даже близко не намекает на это, был бы один очевидный результат ее внедрения Apple. Компания всегда заявляла, что не будет устанавливать сенсорный экран в Mac, потому что это плохо для пользователей с точки зрения эргономики, если они постоянно тянутся к экрану.
Благодаря этой идее им не придется прикасаться к экрану, они смогут просто взмахнуть рукой, чтобы указать документу, куда его направить.
Эта патентная заявка приписывается трем изобретателям. Среди них — Евгений Криворучко, чья предыдущая работа для Apple включает патенты на использование внимания пользователей для управления элементами в 3D-среде.









