В будущем владельцам HomePod, возможно, даже не придется произносить слово «Siri», поскольку Apple изучает способы использования технологии распознавания взгляда, чтобы устройство могло понять, что к нему обращаются.
Если у вас есть несколько устройств Apple, то вы знаете, как сложно заставить Siri отреагировать именно на том устройстве, которое вам нужно. Когда вы находитесь в комнате, где есть iPhone, iPad и HomePod mini, у Apple есть всевозможные системы для определения, какое именно устройство вы хотите, но они регулярно дают сбой.
Кроме того, не всем удобно использовать команду «Siri», даже если она лучше, чем первоначальная «Hey Siri». Вы по-прежнему можете произносить любую из этих фраз, и ваш телевизор тоже — часто бывает, что что-то, сказанное в передаче, достаточно похоже на «Siri», чтобы вызвать запрос, о котором вы не просили.
Кроме того, существует вероятность того, что пользователям понадобится взаимодействовать с устройствами, вообще не используя голос. Конечно, могут быть ситуации, когда команду нужно отдать на расстоянии или когда разговор с устройством может быть социально неудобным.
В недавно выданном патенте под названием «Управление устройством с использованием информации о взгляде» Apple предполагает, что Siri можно будет управлять визуально. В частности, предлагается, чтобы устройства могли определять направление взгляда пользователя, чтобы понять, хочет ли он, чтобы устройство отреагировало.
Для этого потребуются HomePods или другие устройства, оснащенные камерами и другими датчиками, способными определять местоположение пользователя и направление его взгляда, чтобы понять, на что он смотрит. Эта информация может использоваться для автоматической переключения устройства, на которое смотрит пользователь, в режим приема команд, в котором оно активно слушает, ожидая, что ему будут даны инструкции.
Это будет похоже на то, как «всегда включенный» экран iPhone фактически выключается, пока вы на него не посмотрите. Таким образом, уже существует устройство, способное определять, когда на него смотрят.
Apple могла бы расширить эту функцию, чтобы интерпретировать взгляд как эквивалент голосового триггера. Пользователи по-прежнему могли бы вызывать «Siri», если бы не смотрели на устройство, но это дало бы им дополнительную возможность.
Использование взгляда в качестве индикатора того, хочет ли пользователь отдать команду цифровому помощнику, полезно и в других отношениях. Например, обнаружение взгляда, устремленного на устройство, может подтвердить, что пользователь действительно намеревается, чтобы устройство выполняло команды.
На практике это может означать разницу между тем, интерпретирует ли устройство фрагмент предложения, такой как «воспроизвести Элвиса», как команду или как часть разговора, которую оно в противном случае должно игнорировать.
В патентной заявке упоминается, что простое взглядывание на устройство не обязательно будет регистрироваться как намерение дать ему команду, так как необходимо соблюдение ряда «критериев активации». Это может заключаться просто в непрерывном взгляде в течение определенного периода времени, например секунды, чтобы исключить случайные взгляды или ложные срабатывания, вызванные поворотом головы.
Угол наклона головы пользователя также важен. Например, если устройство находится на тумбочке у кровати, а пользователь лежит в постели и спит, устройство может потенциально считать, что пользователь смотрит на него, в зависимости от того, как он лежит, но может не учитывать это, если поймет, что голова пользователя находится на боку, а не в вертикальном положении.
Это будет суждение, учитывающее, были ли глаза пользователя открыты, а также каков был угол наклона. Это позволило бы избежать непреднамеренных взглядов, запускающих Siri, но, как бы полезно это ни было, возникает сопутствующая проблема.
Вот почему, если устройство не всегда реагирует на взгляд, пользователь должен знать, сработало ли оно или нет. Не может быть так, что пользователь произносит длинную команду, а Siri в итоге говорит: «Ты со мной разговариваешь?»
Поэтому в ответ на намеренный взгляд устройство могло бы предоставлять пользователю ряд индикаторов того, что помощник был активирован взглядом, таких как звук или световой сигнал от встроенных светодиодов или дисплея.
Учитывая возможность регистрировать взгляд пользователя, система также могла бы определять, смотрит ли пользователь на объект, с которым хочет взаимодействовать, а не на устройство, в котором находится виртуальный помощник.
Например, пользователь может смотреть на одну из нескольких ламп в комнате, и устройство может использовать контекст взгляда пользователя, чтобы определить, какую именно лампу пользователь хочет включить по команде.
В патенте также описываются ситуации, когда пользователь может начать команду, прежде чем повернуться к устройству, чтобы ее завершить. Или, наоборот, он может посмотреть на устройство и отвернуться, не закончив команду.
В любом случае устройству необходимо определить, что именно к нему обращаются. Но если взгляд не обнаруживается сразу, Apple предлагает, чтобы устройство спросило пользователя, чего он хочет, и тем самым привлекло его внимание.
Это не первый раз, когда Apple подает заявки на патенты, касающиеся возможности удаленного управления устройством; подобные идеи уже несколько раз появлялись в более ранних патентных заявках. Например, патент 2015 года на «Оценку положения руки и пальцев на основе обучения» предполагал использование оптической системы 3D-картографирования для жестов рук, что вполне могло привести к появлению Apple Vision Pro.
Однако новый патент также не является первым, выданным Apple именно на эту же технологию. Его версия была первоначально подана в 2019 году, а затем выдана в 2020 году.
Apple подает сотни патентов каждый год, и нередко компания подает повторную заявку даже после того, как патент уже выдан. Причиной может быть, например, незначительное, но важное обновление в новой версии.
В данном случае тот факт, что Apple первоначально подала заявку на патент в 2019 году, означает, что было достаточно времени, чтобы увидеть, как по крайней мере некоторые его части стали серийными продуктами. Face ID уже была запущена в iPhone X 2017 года, но исключительная функция распознавания взгляда стала ключевым элементом Apple Vision Pro.
Тем не менее, по-прежнему верно, что даже наличие повторных патентов на одну и ту же технологию не является доказательством того, что эта конкретная идея когда-либо будет реализована. Но на чертежах патента постоянно фигурирует HomePod, и сейчас мы ближе к появлению похожего устройства HomeHub, которое вполне может быть оснащено камерами.
Патент, первоначально поданный 28 августа 2019 года, указывает в качестве изобретателей Шона Б. Келли, Фелипе Басима Де Араужо Э Сильву и Карлин Й. Барк.
Подписывайтесь на наш канал в Телеграм
⚡ Подписаться