写真にとって、ライティングはとても重要だ。ユーザーがその中を動きまわる仮想現実の静的な環境に関しては、ライティングの重要性がさらに大きい。
今日(米国時間3/14)Googleは、VRのユーザーが“ライトフィールド”(light fields)を感取経験できるための、VRデバイス用のアプリケーションをリリースした。このアプリケーションに関連する研究について、ブログ記事も発表している。
ライトフィールド(光線空間)の実際的な意味は、空間内の一つの点からのさまざまなパースペクティブ(見え方)のことで、見る角度によってライティングの見え方も変わる。スマートフォンのスクリーンに映っている画像がリアルに見えるとしたら、それはその画像が実際のライトフィールドを写し込んでいるからだ。物理的なオブジェクトの多くは、そのまわりの世界を映すクリアーな鏡を提供しているわけではないが、それでもたとえばあなたの皮膚は、見る人の角度によってテクスチャーが大きく変わる。それも、ライトフィールドの現れの一つだ。
ゲームエンジンが描画する世界では、コンピューティングの十分なパワーさえあれば、そこらのありとあらゆるものを巧拙さまざまに写し込むことができる。また、ライトフィールドをカメラで捉えるとしたら、Googleなどの企業は複数のカメラを使ってオブジェクトの複数のパースペクティブを捉え、それらのレンズの間にあるパースペクティブを計算で求める。そうやって捉えたオブジェクトのパースペクティブ集合は、頭にライトをつけたあなたが動きまわるときの、あらゆる角度と距離からのオブジェクトの見え方を表すことができる。
ライトフィールドについてもっと詳しく知りたい方は、Googleがこのアプリケーションについて書いた“Welcome to Light Fields”(ライトフィールドへようこそ)という記事とそのページを見てみよう。仮想現実の世界が本当に本物っぽくて快適な世界であるために、ライトフィールドが重要な技術であることが分かる。そのアプリケーションには、実際にユーザーが歩き回れる世界のデモが、いくつか含まれているようだ。
このアプリケーションを利用できるのは、HTC ViveとOculus Rift、そしてWindows Mixed Reality platformsだ。かんじんのGoogleのDaydreamに対応していないのは、ライトフィールドを正しく模倣〜再現するためには3Dの位置追跡機能が必要だからだ。Daydreamがその機能を持つのは、Lenovoのスタンドアロンのヘッドセット6DoFからだ。それを待つしかないね。
ライトフィールドは、それを捉えることだけでなく、ほかにもさまざまな技術的問題をデベロッパーにもたらす。そのトップが、帯域だ。空間内の、あらゆる点からの、あらゆる角度と距離の、正しいライティングによる像をVRがあらかじめ用意するためには、膨大な量のデータとストレージを要する。Googleがこのアプリケーションで捉えているのは、写真のような静止画像の世界だが、これがビデオになればほんの数分の動きのために数テラバイトを消費するだろう。それは今のところ、考えて理解するだけ、の世界だ。