ARスタートアップの株式会社OnePlanetにXR Engineerとして所属し、ARグラスの研究開発などを手掛けている徳山が執筆しています。Apple Vision Proの最新の動向から、開発情報など、Apple Vision Proの情報をピックアップして紹介していきます。
徳山 禎男 氏
SIerとして金融や飲料系など様々な大規模プロジェクトに参画後、2020年にOnePlanetに入社。ARグラスを中心とした最先端のAR技術のR&Dや、法人顧客への技術提供を担当。過去にMagic Leap 公式アンバサダーを歴任。
X(twitter):https://twitter.com/tokufxug
OnePlanet
AR技術とクリエイティブに特化したARテックカンパニーです。ARは「目の前の現実世界に3DCG等のバーチャルな情報や体験を表示する」というSF映画のような技術です。今後大きな発展が見込まれている一方、今はまだ黎明期ゆえに取り扱いの難しさもあります。私たちはこのワクワクする未来の技術をより身近なものにすべく、様々なAR関連ソリューションを提供しています。
https://1planet.co.jp
Object trackingとは?
Apple Vision Pro の Object tracking について
— Sadao Tokuyama (@tokufxug) June 12, 2024
現実世界にあるアイテムを「目印」にして、3Dモデルやデジタル情報を表示する機能です。例えば、日常の物を見るだけで役立つ情報が表示されたり、家電製品やデバイスにデジタルマニュアルを表示することが可能になります。 pic.twitter.com/9x14apbqi8
現実世界にあるアイテムを「目印」にして、3Dモデルやデジタル情報を表示する機能です。例えば、日常の物を見るだけで役立つ情報が表示されたり、家電製品やデバイスにデジタルマニュアルを表示することが可能になります。
Object trackingのワークフロー
Object trackingをアプリに組み込むワークフローを大きく3ステップの作業に分けることができます。
3Dモデルの準備
現実世界のアイテムによるフォトリアルなUSDZ形式の3Dモデルが必要です。Object Captureに対応したiOSアプリでスキャンして、作成することができます。
Object trackingのデータを生成
Apple社が提供している機械学習アプリ「Create ML」を使用して、3DモデルからObject trackingのデータを生成します。
生成されたデータをアプリに組み込む
生成されたObject trackingのデータを、現実世界にあるアイテムの「目印」として組み込み、それを利用してデジタルコンテンツや演出を表示するためのアプリを開発していきます。
まとめ
2024年6月28日(金)日本でApple Vision Proがリリースされました。これに伴い、2024年秋頃にvisionOS 2がリリースされます。今回、紹介したObject trackingはvisionOS 2で追加されたARKitの新機能となります。この機能を使用することで、より現実と親和性が高い体験が可能になります。Object trackingの詳細については、以下の記事をご覧いただければと思います。
https://1planet.co.jp/tech-blog/applevisionpro-oneplanet-visionos2-object-tracking
おしらせ
ウォルト・ディズニー・ジャパン様の映画『哀れなるものたち』の世界に完全に没入できる空間体験を可能にした Apple Vision Pro アプリ
2月10日、渋谷パルコで #AppleVisionPro を使用した1日限定の展示が開催!アカデミー賞11部門にノミネートされた 『哀れなるものたち』の Apple Vision Pro を使用した没入型AR/VRアプリを #OnePlanet が開発。時間終了まで人の行列が途切れることなく続くぐらい大盛況でした!https://t.co/WBPtkOxLJz pic.twitter.com/pCk7dy25c1
— Sadao Tokuyama (@tokufxug) February 13, 2024
映画『哀れなるものたち』(配給:ウォルト・ディズニー・ジャパン)の公開を記念して、2024年2月10日(土)限定で、渋谷PARCO 3F イベントスペースにて、日本初となるApple Vision Proを活用した映画作品の世界に没入できる空間体験アプリを展示しました。このアプリは、OnePlanetのApple Vision Pro専門開発チームが開発を行いました。
https://1planet.co.jp/news/Twd0qMjt
Apple Vision Proの情報や開発についてもまとめています。こちらもぜひご覧ください。
全般情報
https://ar-marketing.jp/apple-glass-release/
技術情報
https://1planet.co.jp/tech-blog/category/applevisionpro