ARKit 3.5をリリース

アップルは、iOSおよびiPadOSのAR機能「ARKit」の新バージョン、「ARKit3.5」をリリースしました。3月18日に発表された新型iPad Pro 2020の「LiDARスキャナー」に対応し、さらにクオリティの高いARを実現します。

ARKit 3.5は、iPad Proの新しいLiDARスキャナと深度検出システムを利用して、新しい世代のAR Appのための強化されたシーンの理解とオブジェクトオクルージョンを実現するシーンジオメトリーをサポートします。さらに、ARでの即座な配置の実現や、強化されたモーションキャプチャとピープルオクルージョンによって、iPad ProのARエクスペリエンスは、そのすべてでコードを書き換える必要なく、さらに良いものになります。

ARKit 3.5の紹介

ARKit 3.5は、iPad Proの新しいLiDARスキャナーと深度感知システムを使用して、これまでになくAR体験をより現実的にします。新しいScene Geometry APIを使用すると、世界の3D表現をリアルタイムでキャプチャして、仮想オブジェクトのオブジェクトオクルージョンと現実世界の物理を実現できます。ARKitによって実現されるすべてのエクスペリエンスは、新しいインスタントAR配置、および改善されたモーションキャプチャと人物オクルージョンの恩恵を自動的に受けます。

・シーンジオメトリ

シーンジオメトリを使用すると、床、壁、天井、窓、ドア、座席を識別するラベルを使用して、スペースのトポロジマップを作成できます。現実世界を深く理解することで、仮想オブジェクトのオブジェクトオクルージョンと現実世界の物理学が解き放たれ、ARワークフローを強化するための詳細情報も得られます。

・インスタントAR

iPad ProのLiDARスキャナーは、信じられないほど迅速な平面検出を可能にし、スキャンせずにARオブジェクトを現実世界に瞬時に配置できるようにします。コードの変更なしで、ARKitで構築されたすべてのアプリのiPad ProでインスタントAR配置が自動的に有効になります。

・モーションキャプチャと人物のオクルージョンの改善

ARKit 3.5 iPadのプロに、モーションキャプチャの人々閉塞における奥行き推定と高さ推定は、より正確です。これら2つの機能は、コードを変更することなく、ARKitで構築されたすべてのアプリのiPad Proで向上します。

～その他のARKit機能を発見する～

・人のオクルージョン

ARコンテンツは現実世界の人々の後ろや前をリアルに通過するため、AR体験をより没入させると同時に、ほとんどすべての環境でグリーンスクリーンスタイルの効果を実現できます。

・前面と背面の同時カメラ

前面カメラと背面カメラで同時に顔と世界の追跡を使用でき、新しい可能性を切り開きます。たとえば、ユーザーは自分の顔だけを使用して、背面カメラビューでARコンテンツを操作できます。

・共同セッション

複数の人の間でのライブコラボレーティブセッションでは、コラボレーティブな世界地図を作成できます。これにより、ARエクスペリエンスを開発し、ユーザーがマルチプレイヤーゲームなどの共有されたARエクスペリエンスにすばやくアクセスできるようになります。

・モーションキャプチャ
1台のカメラで人の動きをリアルタイムでキャプチャします。身体の位置と動きを一連の関節と骨として理解することで、動きとポーズをAR体験への入力として使用できます—人をARの中心に配置します。

・複数の顔追跡
ARKit Face Trackingは、iPhone X、iPhone XS、iPhone XS Max、iPhone XR、iPad Pro のTrueDepthカメラを使用して一度に最大3つの顔を追跡し、MemojiやSnapchatなどの正面カメラエクスペリエンスを強化します。

・その他の改善
一度に最大100枚の画像を検出し、画像内のオブジェクトの物理的なサイズの自動推定を取得します。3Dオブジェクト検出は、オブジェクトが複雑な環境でよりよく認識されるため、より堅牢です。そして現在、機械学習を使用して、環境内の飛行機をさらに高速に検出しています。

（参考）Apple Developer