FaceTime のペルソナ登録や、目と手を使った visionOS ナビゲーションの基本については、流出した 2 つの Vision Pro オンボーディング ビデオで説明されています。
最新の visionOS ベータ版から公開された新しいオンボーディング ビデオでは、3,500 ドルのヘッドセットのセットアップと FaceTime ペルソナの作成について詳しく説明しています。
「ペルソナを設定するには、Apple Vision Proを取り外して外見をキャプチャします」と動画には書かれています。Appleは、顔、腕、肩を正確にキャプチャするために、ヘッドセットを目の高さに持つことを推奨しています。
もう 1 つのビデオでは、画面上の要素を見つめ、2 本の指でタップまたはピンチするなどの手のジェスチャを使用して選択やスクロールなどのアクションを実行するだけで、visionOS ユーザー インターフェイスを操作する方法をユーザーに示しています。
ペルソナはFaceTime通話用のデジタルアバターです
Persona機能は、ヘッドセットがVision Proユーザーの顔を録画できないため、FaceTimeのビデオ通話でVision Proユーザーを映すことができないという問題を解決します。この制限を克服するために、visionOSはユーザーの表情や手の動きをデジタルの自己に反映させます。通話中のユーザーは、リアルなアバターがリアルタイムでアニメーションするのを見ることができます。
visionOS ベータ 6 に追加された Apple Vision Pro のペルソナ登録を紹介する新しいビデオ チュートリアルです。
登録では、EyeSight ディスプレイを使用してユーザーをガイドします。pic.twitter.com/cGfsdTuIaY
— M1 (@M1Astra) 2023年11月14日
これはペルソナと呼ばれます。Vision Proのセットアップ中に、ユーザーはヘッドセットを使って顔をスキャンできます。Face IDの設定と同様に、頭をあらゆる方向に動かしたり、笑ったり、目を閉じたり、眉を上げたりするなどの表情を作ったりといった一連の頭の動きをガイドされます。
「終わったら、Apple Vision Pro を再び装着して自分のペルソナを確認してください」と書かれています。
目と手の追跡
visionOSオペレーティングシステムは、内蔵センサーと外付けセンサー、そしてカメラを用いて視線の向きを検知し、手振りも認識します。これはおそらく、このヘッドセットの初期レビュー担当者が最も感銘を受けた点の一つでしょう。
visionOS ベータ 6 に新しいオンボーディング ビデオが追加されました。
「入力トレーニング」 pic.twitter.com/ThKGBL4FbA
— M1 (@M1Astra) 2023年11月14日
「あなたは目で見てシステムを閲覧し、システムはあなたの目に反応します」と動画では説明されています。「要素を見て、指でタップするだけで選択できます。」ピン留めやタップ以外にも、visionOSは2本指でピンチしたり、軽くフリックしてコンテンツを任意の方向にスクロールするといったハンドジェスチャーもサポートしています。
FaceTime通話用のデジタルアバターに会おう
登録時に取得されたデータはニューラルネットワークに送られ、デジタルアバターが作成されます。AppleがWWDCで公開したデモビデオでは、ペルソナ機能のために「数千人の多様な個人集団」を対象に「高度なエンコーダー・デコーダー・ニューラルネットワーク」を学習させたことが説明されています。
