Apple хочет знать каждый раз, когда вы двигаете мышцей в любой части тела, чтобы она могла более точно построить картину вашей физической формы, а также, возможно, лучше отобразить ваше местоположение в комнате.
У Apple уже есть такие технологии, как акселерометры в Apple Watch, которые означают, что они могут автоматически определять, что вы идете, даже если вы забыли включить тренировку «Прогулка на свежем воздухе». Недавно компания также подала заявку на патент на камеру Apple Watch, которая, как и в случае с фотографией, предназначена для обнаружения движения.
Теперь были обнаружены две отдельные патентные заявки, которые, несмотря на то, что они подавались с разницей в год, обе нацелены на обнаружение каждого движения и его использование.
«Обнаружение и классификация смены позы с использованием связанной биомеханической модели» была подана в сентябре 2021 года и раскрыта только сейчас. Его 17 страниц подробностей — около 8000 слов — очень конкретно посвящены обнаружению изменения позы.
«Существующие мобильные устройства включают в себя датчики движения, которые предоставляют данные о движении, такие как ускорение и скорость вращения мобильного устройства», — говорится в этой патентной заявке Apple. «Например, цифровой шагомер может использовать данные об ускорении для подсчета шагов, чтобы определить, идет ли пользователь или бежит».
«Хотя эти широкие классификации активности полезны для многих мобильных приложений, — продолжает он, — некоторым мобильным приложениям было бы полезно знать, изменилось ли физическое положение пользователя, например, встал из сидячего положения или наоборот».
Как и всегда в патентной заявке, основное внимание уделяется тому, как чего-то можно достичь, а не тому, для чего это может быть использовано. Тем не менее, в тексте упоминаются четкие варианты использования, например, когда пользователь носит гарнитуру и перемещается как в реальной, так и в виртуальной среде.
Когда устройства, которые вы носите, могут вычислять положение всего вашего тела и предсказывать, куда вас приведет движение, они могут предупреждать вас о реальных или виртуальных препятствиях. Предположительно, эта способность может быть использована таким же образом, чтобы помочь слабовидящим людям ходить по реальному миру.
Apple мало говорит о вариантах использования, но имеет достаточно подробностей, чтобы показать, что это определение позы не просто для того, чтобы компания могла ворчать на вас из-за того, что вы не делаете приседаний.
«В варианте пространственного звука данные о движении из [a] движения гарнитуры и устройства-источника объединяются в устройстве-источнике, — говорит Apple, — так что относительное положение и положение могут быть рассчитаны устройством-источником для использования в отслеживании положения головы для определенных сценариев отслеживания, чтобы гарантировать, что пространственный звуковой звуковой слой правильно по центру».
«В частности, отслеживание положения головы с использованием относительного движения полезно для определения того, поворачивается ли голова пользователя, когда его туловище неподвижно, или же туловище пользователя двигалось», — продолжает он. «Оба типа движения будут восприниматься гарнитурой и будут неразличимы».
Это повторяющийся момент в заявке на патент, что, возможно, уже можно обнаружить движение, но невозможно правильно или полностью интерпретировать его.
Apple неоднократно заявляет, что ее предложение касается использования комбинаций устройств для определения того, что ей нужно. «Как правило, использование данных о движении как с гарнитуры, так и с сопутствующего устройства позволяет обнаруживать более сложные изменения позы пользователя», — говорится в сообщении.
Обнаружение позы всего тела
Эта комбинация устройств также играет центральную роль во втором недавно раскрытом патенте. «Оценка позы всего тела посредством извлечения признаков из нескольких носимых устройств», поданная в 2022 году, направлена на обнаружение всего возможного — с использованием каждого мыслимого устройства.
Деталь из патента, показывающая некоторую математику, лежащую в основе определения позы.
«Носимые устройства сейчас широко распространены в обществе», — говорит Apple. «Многие потребители ежедневно носят как смарт-часы, так и наушники… [and many of these wearable devices include inertial sensors that can sense the motion of the user.»
«For example, inertial sensors embedded in a smartwatch can capture a user’s arm motion which can then be used by a fitness application to compute various fitness metrics, such as the amount of calories burned by the user during exercise,» it continues. «Some ear devices (e.g., earbuds) include inertial sensors that control audio playback, provide microphone orientation data used in beamforming to reduce background noise, and head tracking for anchoring a spatial audio sound field played through the ear devices.»
«[These can together] предоставить более точную модель скелета всего тела, которая может дать подробное представление о движениях пользователя, — говорит Apple, — позволяя улучшить отслеживание прогресса для различных занятий фитнесом или мониторинга здоровья».
«Дополнительным преимуществом является то, что существующие устройства, уже принадлежащие пользователю, — продолжает патентная заявка, — могут использоваться в сочетании с недорогими компактными сенсорными модулями (инерциальные датчики, высотомер и камера), которые можно легко прикрепить к различным местам тела пользователя или одежды для создания распределенной сенсорной системы».
«Использование нескольких камер и инерциальных датчиков, размещенных в разных местах тела пользователя, в сочетании с данными о глубине для всего тела позволяет создать более точную трехмерную модель скелета», — говорит Apple.
«[This data] может использоваться в различных приложениях, — продолжает он, — таких как приложения, которые определяют, упал ли человек или болен, приложения, которые автономно обучают правильным режимам тренировок, спортивным техникам и танцевальным действиям…»
Патентные заявки всегда описывают как можно более широкий спектр приложений, и в данном случае это идет от пригодности к тому, как такие системы могут «понимать язык жестов всего тела» (например, сигналы взлетно-посадочной полосы аэропорта, сигналы дорожной полиции и т. д.). »
Эти две патентные заявки необычны тем, что они касаются создания способа соединения того, что уже существует. Но они оба правы в том, что у нас есть устройства, которые могут обнаруживать эти данные, поэтому система, которая правильно вычисляет позы всего тела, а затем использует это для нашего здоровья и физической формы, — это хорошо.
Деталь из патента, показывающая использование данных о позе всего тела.
Или, по крайней мере, до тех пор, пока эти данные остаются с нами.
Каждая из двух патентных заявок использует то, что теперь выглядит как стандартный раздел о конфиденциальности. Вместо того, чтобы комментировать какие-либо конкретные вопросы конфиденциальности, которые возникают в патентных заявках, стандартный текст предполагает, что «лица, ответственные» за такой сбор данных, «будут соблюдать общепринятые политики конфиденциальности».
Патент на осанку приписывают четырем изобретателям, в том числе Адитье Сарати, чья предыдущая работа для Apple включает патентную заявку на «Мониторинг осанки и движения с помощью мобильных устройств».
Три изобретателя работали над заявкой на патент всего тела, в том числе Уэсли В. Зубер. Его предыдущая работа включает патент на сенсорную обратную связь, такую как тактильная система в Apple Pencil.
