AIリアルタイム2D-3D映像変換裸眼3D技術 N-Vision 3D

そもそも3D(Three Dimension)とは何か。 2D(平面)で見えているものをリアルタイムに3D化(立体的)することによって従来と何がどう変わるのか。 そして我々の生活にどう変化をもたらすのか。答えは、とてもシンプルである。物をみる視覚情報が多様化することである。思考を多様化したら、次は視覚を多様化する世界がすぐそこまできている。 さらにリアルタイム変換にすることでよりもっと我々の見る世界に近づく。 リアルタイムで状況を把握することでその後の結果が変わることさえある。 例えば医療分野はリアルタイムに3D化することで奥行(Depth)が見える。 航空機のジェットエンジンや細部点検カメラでリアルタイムに3D化することでミリ単位でのひび割れを発見し 致命傷に繋がるような事故を未然に防ぐことも可能になる。

基礎技術の特徴

リアルタイム性

最近の2Dから3Dへの変換技術開発は人工知能を多用してどこの国でも行っております。特に中国やアメリカは3DCGにおいてのリアルタイム変換が盛んに行われており医療やアニメーション制作に応用されてきました。ですがそれら既存の技術が実写映像のリアルタイム変換となるとどうでしょうか。サイドバイサイド動画を使用しAIリアルタイム2D-3D映像変換による裸眼3D技術は現時点ではNOVIUSのみが保有しております。  

アイトラッキング不使用

アイトラッキング技術は使用せずに3D映像を作り出します。そのためデバイスを装着せずに複数人で映像を共有することが可能になります。

独自のAIアルゴリズム

N-VISION3D技術はNOVIUSが独自に開発したアルゴリズムであるAIを搭載しております。AIを活用することで、モデル(学習データ)の精度が上がり、奥行きを深くすることができます。通常の2D画像からその画面内の距離を予測するAIを生成しています。この距離のことをDEPTHと呼びます。

技術応用可能例(For Solutions)

R&Dの詳細はこちら

2D-3D変換時間・世界最速実現

弊社は独自のAI 3Dアルゴリズムを開発し世界最速の2D-3Dリアルタイム変換速度を実現可能にしました。実現可能にした要因にはいくつかのファクターがあります。

具体的な変換速度として、3D映像をアプロードするまでのトータル所用時間は0.08秒前後(環境:24inch/17inch裸眼モニターの場合)以下具体的数値参照

類似”3D”技術の違い

裸眼3Dディスプレイ/サイネージ

3Dディスプレイ(3次元ディスプレイ)約10年程前に大手各社テレビメーカーが3Dディスプレイと名打って売り出しました。立体テレビの場合は視聴するコンテンツが限られていました。なぜなら裸眼3Dディスプレイは専用メガネで見れる映像コンテンツは全て放送局や映像制作会社が作成しなければいけなかったからです。さらには3D生中継に際しても機材を含めて膨大な制作費がかかることなど映像コンテンツにかかわる大きなファクターが存在した。上記技術と弊社の今回技術の大きな違いは、メガネ不要で複数人での共有が可能という点。そして何より弊社技術は変換ソフトである。

3Dホログラム

レーザーを使用して空間に立体画像を投影できるテクノロジー,イベント演出にも使用されるホログラム技術。3Dメガネ不要、裸眼で見れる、ホログラムでは物体の三次元像がそのまま記録されているため、正面からだけでなく、横や後ろに回り込んでも立体のまま見られる点が他の映像技術とは大きく異なる。ホログラムを作る技術はホログラフィーと呼ばれている。この技術本来の本質は映像表示ではなく映像記録としての特徴を生かしたもの。

3DCG

Three Dimensional Computer Graphics(3次元コンピュータ・グラフィック)立体的(3D)に描いた絵。PCで演算式を用いて作成を行った”絵、アニメーション”であるためそもそもの概念が”実写動画”3D技術とは異なる。

XR(VR/AR/MR/SR技術)

これら3つの技術(SR以外)と弊社の今回技術との類似点はリアルタイムです。AR(Augmented Reality拡張現実:現実空間に仮想世界を重ねて投影して見せる)とMR(Mixed Reality複合現実:現実空間と仮想世界を融合させて見せる)は特にリアルタイムでないと技術そのものの意味をなしていません。3Dという観点からは今はまだ人間は目からビームを出せるような人は存在せずAR、MRという技術を融合し、「Microsoft HoloLens」のその先の技術、アイデアを複合的に組み合わせリアルタイムに今いる現実世界に3D的物質を創造出来る日がくるかもしれません。