米国特許商標庁（USPTO）が木曜日に公開したアップルの新しい特許出願は、2015年の同社買収後にアップルに譲渡されたメタイオの特許の延長であり、拡張現実の潜在的用途を詳述するとともに、アップルが開発中と言われている噂のヘッドマウントディスプレイを図示した。
「モバイルデバイス上の実際の環境のビュー内の関心ポイントを表示する方法およびそのためのモバイルデバイス」と題された本発明は、拡張現実の関心ポイントを追加することで、今日の2次元マップを強化するものである。
ライブカメラ映像に近くの興味のある場所のコンピュータ画像を重ね合わせることで、ユーザーの現実世界を拡張できれば、ARKitを活用した優れたマップアプリが実現できるでしょう。これは、カメラセンサーからの高解像度データと、GPS、コンパス、その他の搭載センサーから得られる位置情報を融合することで簡単に実現できます。
緯度、経度、高度センサーのデータを使用することで、iPhone や iPad は周囲の環境に対する自身の位置と進行方向を把握することができ、システムは撮影した画像上の正しい位置にインタラクティブなマーカーを重ね合わせることができます。
ARKitの信頼性と驚異的な精度のトラッキングで見てきたように、POIアノテーションはユーザーの動きを正確に追跡し、現実世界のオブジェクトに固定されたままにすることができます。このシステムは、ユーザーがデバイスを地面に向けて傾けた場合でも機能し、バルーンインターフェースを使用してPOIを現実世界の対応するオブジェクトに接続します。
ユーザーがデバイスを地面に向けて一定の角度以上傾けると、関心地点のリスト表示に切り替わります。本発明は、カメラと画面を備えたヘッドマウントディスプレイを使用する場合に特に有用です。
Appleの特許説明より:
例えば、ヘッドマウントディスプレイはビデオシースルー型のヘッドマウントディスプレイです。通常、ユーザーがタッチスクリーンのようにヘッドマウントディスプレイの画面に触れることはできません。
しかし、実環境を撮影するカメラは、画像内におけるユーザーの指の位置を検出するためにも使用される可能性があります。ユーザーの指の位置は、タッチスクリーン上でユーザーの指が触れたタッチポイントに相当する可能性があります。
実際、特許出願では、スマートフォンのみの拡張現実と、スマートフォンとヘッドセットの両方で AR 画像をレンダリングし、iPhone がヘッドセットを通して見るシーンのインタラクティブ コントローラーとして機能するハイブリッド ソリューションの両方のアプローチについて言及されています。
「半透明の画面に溶け込んだコンピューター生成の仮想オブジェクトの少なくとも一部がユーザーの指またはユーザーが持つデバイスと重なると、モバイルデバイスは少なくとも 1 つの関心地点に関連するアクションを実行する可能性があります」と Apple は述べています。
この発明は2017年4月に初めて出願され、エンジニアのアントン・フェドソフ、シュテファン・ミスリンガー、ピーター・マイヤーが発明者として認められている。
