新型iPad Proは、深度マッピングの点ではTrueDepthカメラに似た機能を持つ、より優れたToFレーザーセンサーを搭載した初のAppleデバイスです。これは、Appleが噂している拡張現実ヘッドセットへの重要な足掛かりとなるもので、新しい動画ではその動作が紹介されています。
LiDARスキャナで捉えた深度ポイントは、内蔵カメラやモーションセンサーのデータとともに、iPadOSの新しい深度フレームワークに渡されて処理され、ユーザーの実際の環境をより詳細に把握できるようになります。そして、これは、男女問わず、私たちが今持っているものよりもはるかに優れた拡張現実体験を実現するでしょう。
新しい iPad Pro の LiDAR スキャナーの赤外線ドットが動作する様子を見るには、YouTube チャンネル iPhonedo の以下のビデオをご覧ください (面白い部分は 3:59 から始まります)。
iPad Pro の LiDAR スキャナーは、いわゆる飛行時間計算を使用して、レーザー光が物体に到達して反射するまでの時間を測定することで距離を決定します。
Appleは、LiDARスキャナが非常に先進的であるため、NASAが次期火星着陸ミッションにこのスキャナを採用していると主張していますが、このスキャナは他にも様々な用途に使用されています。例えば、Apple Mapsの車両には、周囲の環境を3Dでマッピングする高度なLiDARスキャナが搭載されています。
Apple は、Measure アプリが新しいセンサーをどのように活用しているかを次のように説明しています。
LiDAR スキャナーにより計測アプリが改良され、人物の身長をより速く簡単に自動計算できるようになりました。また、便利な垂直ガイドとエッジ ガイドが自動的に表示されるため、ユーザーはより迅速かつ正確に物体を計測できます。
計測アプリには、より詳細な計測を可能にするルーラー ビューも搭載され、すべての計測値のリストとスクリーンショットを保存して、将来使用できるようになりました。
既存のARアプリは、LiDARスキャナーのメリットをすべて「無料で」享受できます。これには、即時配置などの機能に加え、モーションキャプチャや人物遮蔽の強化も含まれます。「新しいシーンジオメトリAPIを搭載したARKitの最新アップデートを使用することで、開発者は新しいLiDARスキャナーのパワーを最大限に活用し、これまで不可能だったシナリオを実現できます」と同社は述べています。
比較のために、Apple の TrueDepth カメラの赤外線ドットを示します。
もちろん、薄くて軽いiPad Proに収まるように設計されたバージョンのセンサーは、NASAやApple Mapsの車両が使用しているものほど強力ではありませんが、それでもiPhone X以降のTrueDepthカメラよりもはるかに優れており、高速です。
より正確で信頼性が高いだけでなく、最大 5 メートル離れた周囲の物体をマッピングできます。一方、TrueDepth カメラは最大 20 インチ離れた場所からでも確実に動作します。
どちらのシステムも屋内でも屋外でも、また完全な暗闇でも動作しますが、Apple によると、LiDAR スキャナーは「光子レベルでナノ秒の速度で動作します」。