ピカチュウが現実の物体の影に隠れるようになる――Niantic、新テクノロジーと開発中のゲームをデモ

AR〔拡張現実〕空間になんらかのオブジェクト（たとえばピカチュウ）を描写することを考えてみよう。このとき現実の空間で人間や自動車が手前を通り過ぎたとする。するとAR空間のオブジェクトは現実のオブジェクトの後ろ側になる。ここで非常に厄介な問題が生じる。
仮想オブジェクトを現実のオブジェクトによって「隠す」作業は極めて複雑だ。システムは描写中のピクセルが別のピクセルの「手前」にあるのか、「向こう側」にあるのか、中間にあるのかを判断できなければならない。自動運転車のように複数のカメラやレーザーレンジファインダーを使うのは非常に役立つがスマートフォンが通常備えるようなRGB感光素子の単一カメラで、しかもリアルタイムでこうした識別を行うのは至難の技だ。ほとんどのARアプリでオブジェクトがごく近くの空中に浮かんでいるような描写になるのはこうした理由からだ。
ピカチュウが活躍するポケモンGOのテクノロジーを支えるNianticは、まさにこの問題に取り組んできたスタートアップ、Matrix Millを買収した。
2017年にロンドンのユニバーシティー・カレッジのプロジェクトからスピンアウトして企業となったMatrix MillはMonodepthと呼ばれるテクノロジーを提供する。このツールは単一のRGBカメラから得たデータをニューラルネットで処理し、リアルタイムのゲームに利用可能な速度で距離情報を

リンク元