今日(米国時間8/31)カリフォルニア州サンノゼで行われたFacebook主催のカンファレンス、Scaleの席上、同社のコンピューターフォトグラフィーチームは、ユーザーが撮影した360度写真をきれいに修正する研究プロジェクトが完了したことを報告した。チームは多層ニューラルネットワークを用いて360度写真の歪みを認識し、修正してリアルさを再現する。
スマートフォンの水平ツールを使って画像を修正したことがある人もいるだろう。しかし、プロジェクトの一員である研究者のMatt Uyttendaeleは、従来のコンピュータービジョン研究では、この問題を解決するために消失点(平行線が交差するように見える点)を利用して直線を判別していた。
しかしそのアプローチは必ずしも一般的ではない。なぜなら、多くの写真には基準となるべき平行線が十分にないからだ。そこでUyttendaeleのチームは、AlexNetというニューラルネットワークに、回転させた画像の傾き(ロールとティルト)の値を学習させた。結果的にこのデータを十分揃えることがプロジェクト全体で最大のチャレンジだった。
チームは50万枚の画像を集めると、それを人工的に回転させた。こうして360度画像修正のモデルを作るためのデータが揃った。新機能はまだ公開されていないが、修正機能のユーザーへの見せ方を決め、テストが完了すれば数か月後には提供される見込
コメント