Apple が噂している複合現実ヘッドセットは、視線センサーと内蔵カメラを利用して、テキストフィールドなどのオブジェクトを目で選択できるようになる可能性がある。
- アップルは、噂されている複合現実ヘッドセットのアイテム選択に使用できる特別な視線センサーとイベントカメラの特許を取得しました。
- 提案された技術は非常に洗練されており、視線の方向と視線の深さを驚くほど正確に判断できるようだ。
- この特許は、ヘッドウェア型デバイスの使用中にマウスや指を使ってテキストボックスに入力する必要がなくなることを約束している。
Appleのヘッドセットは高度な視線技術を採用している可能性がある
Appleのソリューションは、本日公開された特許（米国特許商標庁（USPTO）から特許番号11,314,396として同社に付与）に記載され、図解されています。「視線によるテキスト入力フィールドの選択」と題されたこの特許出願には、噂されているAppleのヘッドセットを彷彿とさせる、ある種のヘッドマウントディスプレイ装置と思われる図面が含まれています。
ユーザーが仮想世界においてどのオブジェクトに視線を向けたかを正確に検出するには、1つ以上の視線センサーとイベントカメラが必要になります。これにより、マウスやタッチ入力を使わずに仮想世界内のテキストボックスを入力するという問題が解決される可能性があります。PatentlyAppleによると、Appleの特許取得済みソリューションは非常に高精度で、「First Name（名）」フィールドから次の「Last Name（姓）」フィールドへのわずかな視線移動も正確に検出できるとのことです。参考記事：iPhoneの写真アプリで赤目を補正する方法
Appleは次のように書いている。
視線を用いてテキスト入力フィールドを選択する例示的なプロセスでは、テキスト入力フィールドを含むグラフィカルオブジェクトが表示される。テキスト入力フィールドは、1つ以上のディスプレイ上の1つ以上のそれぞれの位置に関連付けられる。視線の特性は視線センサーを用いて判定され、その特性を用いて視線位置が判定される。視線位置が1つ以上のそれぞれの位置に対応する場合、1つ以上のテキスト文字がテキスト入力フィールドに表示される。
視線センサーはユーザーの目の固有の特徴を捉え、ユーザー認証やFace IDの注視認識に類似した機能に利用される可能性があります。視線センサーには、検出された光強度の経時変化に基づいてユーザーの目を捉えるイベントカメラが搭載される可能性があります。システムはこのデータ（イベントデータと呼ばれます）を用いて、視線の方向と奥行きを判断します。
ユーザーの視線は、ユーザーの両目の視軸によって定義されます。視軸の方向はユーザーの視線方向を、視軸が収束する距離は視線の深さを定義します。視線方向は、視線ベクトルまたは視線方向とも呼ばれます。視線方向および／または視線の深さは、いくつかの例において視線の位置を決定するために使用される特性です。
ヘッドセットのインターフェースがどのように機能するのか、ずっと気になっていました。この特許は、仮想世界での物事の選択方法について、いくつかのヒントを与えてくれます。Appleが以前に提出した特許にも、視線追跡センサーについて記載されていました。ブルームバーグのマーク・ガーマン氏は、このデバイスは視線追跡とハンドジェスチャーのために、内蔵カメラと外付けカメラを複数搭載するだろうと述べています。参考記事：iPhoneのカメラアプリでバーストモードを使う方法
