Apple(アップル)はWorldwide Developers Conferenceで、RealityKitの大きいアップデートを発表した。デベロッパーがAR(拡張現実)体験の開発を始めるためのテクノロジー群だ。RealityKit 2の公開によって、デベロッパーはAR体験を開発する際にビジュアル、オーディオ、アニメーションをより正確にコントロールできるようになる、とAppleは述べた。しかし最も注目すべきなのは、Appleの新しいObject Capture APIがアップデートされ、iPhoneだけを使って3Dモデルを数分で作成できるようになったことだ。
Appleはデベロッパー向けの講演で、すばらしいARをアプリを作る上で最も難しいのは3Dモデルを作るプロセスだと指摘した。これまでなら数千ドル(数十万円)と何時間もかかっていた作業だ。
新ツールを使うと、デベロッパーはiPhone(またはiPad、デジタル一眼、あるいはドローンでも)だけを使い、被写体を下からを含むあらゆる角度から撮影して2D画像シリーズを作ることができる。
次にmacOS Monterey(モントレー)上でObject Capture APIを使い、わずか数行のコードで3Dモデルを作れる、とAppleは説明している。
まず、デベロッパーはReality Kitで新規のフォトグラメトリーセッションを開き、画像をキャプチャーしたフォルダーを指定する。次にプロセスファンクションを呼び出して3Dモデルを要求された精細度で生成する。Object CaptureはAR Quick Lookに最適化したUSDZファイルを生成することができる。デベロッパーがiPhoneとiPadのアプリやウェブサイトにバーチャルあるいは3Dオブジェクトを追加できるシステムだ。3Dモデルは、Xcodeを書いてReality ComposerのARシーンに追加することもできる。
Appleは、Wayfair(ウェイフェア)、Etsy(エッツィー)などのデベロッパーがObject Captureを使って現実世界に存在する物体の3Dモデルを作っていると語った。オンラインショッピングが大規模なARアップグレードを迎えつつある兆候だ。
たとえばWayfairは、Object Captureを使って同社の売り手が商品のバーチャル表現を作るためのツールを開発している。これでWayfairユーザーは今よりも多くの商品をARプレビューできるようになる。
Appleは、Maxon(マクソン)、Unity(ユニティー)などのデベロッパーが、Cinema 4DやUnity MARSのような3Dコンテンツ作成アプリの中で、Object Captureを使って3Dコンテンツを作っていることも話した。
RealityKit 2のアップデートには他に、デベロッパーがレンダリングパイプラインを厳密にコントロールしてARオブジェクトのルック・アンド・フィールを微調整するカスタムシェーダー、資源のダイナミックローディング、ARシーンの資源を管理するEntity Component System、RealityKitベースのゲームでARワールドをジャンプしたりスケーリングしたり探検したりできる機能などがある。
Shopify(ショッピファイ)のMikko Haapoja(ミッコ・ハーポヤ)氏というデベロッパーは、新しいテクノロジー(下記参照)をテスト中で、iPhone 12 Maxを使って撮影したリアルワールドのテスト結果をTwitterでシェアした。
自分でテストしてみたいデベロッパーは、Appleのサンプルアプリを、MacにMontereyをインストールして試すことができる。Object Captureに必要な写真を撮るためには、カメラアプリのQloneやApp Storeからダウンロードしたどの画像キャプチャー・アプリケーションでも使うことができる、とAppleはいう。秋にはコンパニオンアプリのQlone MacもObject Capture APIを利用するようになる。
現在、App StoreにはARKitアプリが1万4000以上あり、9000以上のデベロッパーが開発している。全世界で10億台以上AR内蔵のiPhoneとiPadが使用されていることから、Appleは世界最大のARプラットフォームを提供していることになる。
Apple's Object Capture on a Pineapple. One of my fav things to test Photogrammetry against. This was processed using the RAW detail setting.
More info in thread pic.twitter.com/2mICzbV8yY
— Mikko Haapoja (@MikkoH) June 8, 2021
Apple's Object Capture is the real deal. I'm impressed. Excited to see where @Shopify merchants could take this
Allbirds Tree Dashers. More details in thread pic.twitter.com/fNKORtdtdB
— Mikko Haapoja (@MikkoH) June 8, 2021
カテゴリー:ソフトウェア
タグ:Apple、WWDC2021、WWDC、AR、RealityKit、写真
画像クレジット:Apple
[原文へ]
(文:Sarah Perez、翻訳:Nob Takahashi / facebook )