【OSS】Facebook、AI搭載VRフォーカスエフェクトレンダリングフレームワーク「DeepFocus」を開発

Facebookは、VR(バーチャルリアリティ)研究コミュニティ支援のために、近接オブジェクトへのフォーカスを向上させるためのAIベースフレームワーク「DeepFocus」を開発した。

DeepFocusとは

DeepFocusは、バーチャルリアリティで自然でリアルなフォーカスエフェクトをレンダリングするための新しいAI搭載フレームワーク。

最新のプロトタイプヘッドセットを使用することで、リアルタイムでさまざまな焦点距離で「ぼかし」をレンダリングできる。

https://github.com/facebookresearch/DeepFocus

畳み込みニューラルネットワークを活用

DeepFocusの背後にあるコアテクノロジーは、新しいエンドツーエンドの畳み込みニューラルネットワークであり、眼がシーンのさまざまな部分を見るとすぐに正確な網膜ぼけを生成できる。

この点について、Facebookの研究チームは次のように説明している。『DeepFocus対応ヘッドセットを装着している人が近くのオブジェクトを見ると、背景のオブジェクトは実際と同じようにぼやけて焦点が合っています。この多重ぼけ(網膜ぼけ)は、VRのリアリズムと奥行き知覚を達成するために重要です。』

彼らはまた、DeepFocusがVRアプリケーションのためにリアルタイムでこの効果を生み出すことができる最初のシステムであるとしている。

既存VR技術との互換性

開発チームは『DeepFocusは標準のRGB-Dカラーと深度入力のみに依存しているため、ほぼすべての既存のVRゲームおよびアプリケーションで機能できる』と述べている。

また、VR研究コミュニティで現在検討されている「調節サポートヘッドセット」「マルチフォーカルディスプレイ」「ライトフィールドディスプレイ」とも互換性がある。

以上、下記URLからの要約
https://opensourceforu.com/2019/02/facebook-open-sources-deepfocus-for-more-realistic-virtual-reality-images/

この作品は クリエイティブ・コモンズ 表示 - 非営利 4.0 国際 ライセンスの下に提供されています。