iOS 18 および iPadOS 18 に組み込まれているEye Tracking機能を設定して使用する方法を学び、追加のハードウェアやアクセサリを必要とせずに、視線だけで iPhone または iPad を操作する方法を学びましょう。
Eye Tracking は、タッチ操作でデバイスを操作できない身体障害を持つ人々のための、iPhone および iPad の新しいアクセシビリティ機能です。
アイトラッキングは、iPhoneまたはiPadの前面カメラと人工知能を活用して、画面上のどこを見ているかを判断します。画面を見るだけで、要素のハイライト、ハイライトされた項目へのタップの登録、下へのスワイプなど、様々なアクションを実行します。
この機能は、Apple Vision Pro の視線追跡機能と不気味なほど似ています。
なお、iOS 18 と iPadOS 18 は現在ベータ段階ですが、簡単なチュートリアルに従って入手できます。
ヒント：アイトラッキングの設定と使用時は、iPhoneまたはiPadを30～60cmほど離れた安定した場所に置いてください。デバイスをスマホスタンドやiPadの折りたたみ式カバーの上に置くこともできます。
アイトラッキングを設定して有効化する
1) iPhone または iPad で設定アプリを開き、 「アクセシビリティ」をタップします。
2)リストから「Eye Tracking」を選択し、「 Eye Tracking」スイッチをオンにします。
3)セットアッププロセスを実行します。すべてのドットを一つずつ確認する必要があります。プロセス中はまばたきをしないように注意してください。
セットアップが完了したら:
- 「Dwell Control」をオンにします。これにより、選択した要素をしばらく見つめるだけでタップできるようになります。
- 「アイテムにスナップ」は、見ているアイテムをボックスで強調表示する重要な設定です。オンのままにしておくことをお勧めします。
- 自動非表示機能では、ポインターが再表示されるまでの時間を設定できます。0.10秒から4秒まで選択できます。また、ポインターを使用していないときの表示状態を調整することもできます。
アイトラッキングを有効にすると、アプリ内の要素やアイテムを見つめると、iPhoneまたはiPadがそれをハイライト表示します。その要素をしばらく見つめ続けると、タップ/タッチがトリガーされます。
AssistiveTouch ボタン (Eye Tracking を有効にすると画面に表示されます) を見てスクロールオプションを選択すると、垂直または水平のスワイプやその他のさまざまなアクションを実行できます。
AssistiveTouch にスクロールが表示されない場合は、iPhone の「設定」 > 「アクセシビリティ」 > 「タッチ」 > 「AssistiveTouch」 > 「トップレベル メニューのカスタマイズ」に移動して追加します。
AssistiveTouchはアイトラッキングの重要な補助ツールであり、iPhoneやiPadを見るだけで様々な操作が可能になります。ぜひ、AssistiveTouchをお好みに合わせてカスタマイズしてみてください。
4つのホットコーナーを設置する
Macでは、アクセシビリティ機能を有効にしなくてもホットコーナーを使用できます。ただし、iPhoneとiPadでは、アクセシビリティオプションのAssistiveTouchとDwell Controlを有効にすると、ホットコーナーを設定して使用できます。
ホットコーナーと視線追跡を有効にすると、デバイス画面の特定のコーナーを見るだけで、設定したアクションを実行できます。例えば、右下隅をホーム画面への移動に設定しました。そのため、右下隅をしばらく見ていると、自動的にホーム画面が表示されます。
iPhoneまたはiPadの「設定」 > 「アクセシビリティ」 > 「タッチ」 > 「AssistiveTouch」に移動し、「ホットコーナー」をタップします。次に、左上、右上、左下、右下の4つのコーナーに重要なアクションを割り当てます。
これらのホットコーナーは、マウスやトラックパッドでも使用できることに注意してください。
視線追跡は使いにくい
Apple Vision Proは、LEDと赤外線カメラで構成された高度な視線追跡システムにより、驚異的な視線追跡性能を実現しています。iPhoneやiPadにはこれほど高度な視線追跡カメラが搭載されていないため、前面カメラとデバイス内蔵のインテリジェンスを利用して視線追跡を行っています。
理論上は素晴らしいものの、完璧とは程遠いです。iPhoneやiPadは、ユーザーが見ている要素を認識できないことがよくあります。ユーザーが苦労して目や頭をあれこれ動かし、システムが意図した項目をハイライトしてくれるのを待つしかありません。私の経験から言うと、実際に使えるようにするには、まだまだ多くの作業が必要のようです。
アイトラッキングがひどいと感じたら（そうなるはずです）、それをオフにしてからオンに戻して、もう一度セットアップをやり直してください。
さらに、デバイスを顔から離すと視線追跡がより効果的に機能することを経験から実感しています。その際、iPhoneまたはiPadをテーブルやスタンドの上に置いて動かないようにしてください。
専用のMFi視線追跡デバイスを入手する
前述のApple内蔵のEye Trackingでは不十分な場合は、iOSデバイスで動作する専用のMade for iPhone/iPad（MFi）アイトラッカーハードウェアデバイスやアクセサリを購入することもできます。eyetuitiveやTD Pilotなどのオプションを調べて、設定から設定できます。
iPhoneミラーリングと視線追跡
視線追跡機能がオンになっている場合、MacからiPhoneのミラーリング機能を使用してiPhoneを操作できません。これは、視線追跡機能がオンになっている間、iPhoneの前面カメラが常に使用されているためです。デバイスをロックしてもカメラはオンのままです。また、iPhoneミラーリングが機能するために必要な条件の一つは、iPhoneが使用されていないことです。
視線追跡をオフにする
iPhoneまたはiPadのコントロールセンターから視線追跡を一時的にオフにする方法はありません。新しいコントロールセンターを編集しても、視線追跡ボタンは表示されません。設定アプリ>アクセシビリティ> 視線追跡で完全にオフにする必要があります。再度オンにする場合は、設定をやり直す必要があります。
すべての視線追跡データはデバイス上に保存されます
Appleによると、アイトラッキングはデバイス上の機械学習を利用しています。アイトラッキングの設定やその他の使用データはデバイス上にローカルに保存され、Appleを含む第三者と共有されることはありません。
関連して:
- 頭の動きでiPhoneやiPadを操作する方法
- Macのカメラを使って頭の動きでカーソルを制御する方法
