Vision Proの次なる飛躍：visionOS 2、3D物体トラッキングでARを強化

Appleは2024年6月10日、Worldwide Developers Conference（WWDC24）でvisionOS 2を正式に発表しました。その重要な機能強化の一つが、全く新しい機能である3D物体トラッキングです。この機能により、Vision Proはユーザーの環境にある特定の物理的なオブジェクトを識別し、操作できるようになります。これは、デバイスの発売以来利用可能だった2D画像トラッキングを超越するものです。

UploadVRによると、この高度なトラッキングは、ハンドトラッキングや全体的なシーン理解の改善と共に、WWDC24の基調講演では強調されませんでした。代わりに、詳細はAppleのエンジニアによってオンラインで公開された開発者セッションから明らかになりました。UploadVRによれば、Vision Proは以前は「マーカーやゲームボードなどの指定された2D画像」しかトラッキングできませんでしたが、visionOS 2はこれを3次元の物理的なアイテムにまで拡張します。

同メディアは開発者向けのプロセスを明確にし、トラッキングするオブジェクトの3Dモデル（USDZ形式）を提供する必要があると説明しています。これらのモデルは、Mac上でのアプリコンパイル中にAppleのCreate MLツールを通じて処理されます。このトレーニングによって各オブジェクトのニューラルネットワークが生成され、それからアプリ自体に組み込まれます。同メディアは、これはユーザーが独自の任意のオブジェクトをトラッキングできないことを意味し、新しいオブジェクトを追加するにはアプリのアップデートが必要であると述べています。

UploadVRは、この機能が「ビジネスや教育のユースケース、あるいは美術館のような展示会」にとって特に有望であると示唆しています。記事では、visionOSが認識された各オブジェクトに対して正確なスケールと向きを持つバウンディングボックスを提供し、開発者が仮想コンテンツを直接それらに固定したり、デジタルエフェクトを追加したりする方法について説明しています。同メディアは、この新機能によって「環境だけでなく、空間内の特定のオブジェクトの真のAR化」が可能になるとして、「visionOS開発者が最終的に何を構築するのか」に強い関心を示しています。

我々の見解：この3D物体トラッキングは、Vision ProのAR機能にとって極めて重要な進歩です。現在の実装では事前定義されたオブジェクトが必要であり、自発的なインタラクションに制限がありますが、産業、教育、さらには小売業におけるより洗練されたAR体験の基礎を築くものです。私たちはデジタルと物理的現実の緩やかながら着実な融合を追跡しており、このアップデートはAppleがより深く、よりインタラクティブな空間コンピューティングを実現するというコミットメントを裏付けるものです。将来のイテレーションでは、ユーザー定義の物体トラッキングの制限に対処する可能性が高いですが、当面の間は、専用のARアプリケーションのための堅牢なフレームワークを提供します。