Apple Vision Pro は間もなくあなたの写真を没入型環境に変えることができるようになります

本日の WWDC で、Apple は Apple Vision Pro VR/AR ヘッドセットの新機能を発表しました。ユーザーは間もなく、撮影したパノラマ写真から独自の環境を作成できるようになります。同社はまた、空間写真の没入感を高めることも示唆しました。どちらの改良も今秋に予定されています。

Apple Vision Pro の環境 (Vision Pro 内からオン/オフを切り替えることができる没入型で詳細な 3D 背景) は、ヘッドセットの傑出した機能の 1 つです。ライトの調光スイッチと同じように没入レベルを制御して、現実と仮想を思いどおりにブレンドできます。また、共有環境で他の Vision Pro ユーザーとのチャットで、クールだが不気味な Vision アバターを使用できます。おそらく、これらすべての機能はユーザーが作成した環境で利用できるようになるでしょう。

しかし、環境は写真の背景以上のものであるため、「機能」します。これらはサウンド要素も備えた視覚を包括する 3D シーンです。 Appleは具体的な詳細は明らかにしなかったが、パノラマ写真を没入型環境に変換することは、Appleが空間写真を改善することと密接に関係しているようだ。スナップショットを 3D 写真に変換することはすでに Vision Pro の機能ですが、制限されています。 3D はあまり「深く」なく、撮影した角度からしか見ることができません。これらの写真と完全に没入できる環境 (後ろにあるもの、地面にあるもの、空にあるものなどを見ることができる) との間のギャップは大きいです。 iOS のパノラマ写真でも、その場で回転させて撮影する風景写真では、空や地面など、埋める余地がたくさんあります。そこでAIビットが登場します。

空間リフレーミングは Apple のリアルな 3D への一歩となる可能性がある

オブジェクトや場所をさまざまな角度からキャプチャしない限り、「本物の」 3D を作成することはできませんが、Apple は今後の「空間リフレーミング」技術を披露しました。これは、同社が平面写真からより没入感のある 3D をどのように引き出すことを計画しているのか、またパノラマ写真がどのように環境になり得るのかについてのヒントを与えてくれます。プレゼンテーション中、Apple の空間リフレーミングのセールス ポイントは、スナップショットを改善する機能についてでした。しかし、生成 AI を使用して、キャプチャしなかった写真の部分を埋めることが、同社がより深い 3D 写真と 360° 環境を作成する計画であることは間違いありません。

私は Vision Pro のインスタント 3D 写真がとても気に入ったので、ガウス スプラット (本物の 3D を体験できるスキャン)、つまり仮想空間であらゆる角度から見ることができる 3D オブジェクトの作成に夢中になりました。あなたが行ったことのある場所や知っている人々の没入型でリアルな 3D バージョンを体験することは、VR ヘッドセットでできる最も素晴らしいことです。しかし、AIに「改善」させることには複雑な気持ちがあります。このテクノロジーは驚くべきものですが、ガウス スプラットの威力は、キャプチャしたシーンをいかに正確に再現するかによって決まります。私の反応は「はい、これは」です。 その通り AI で埋め尽くされた作品などあり得ませんし、個人的な記憶の記録を AI に変更させるというのは、何か不安な気持ちになります。しかし、私はそれでも試してみる列の先頭に立つつもりです。