ソニーが、興味深いハイブリッド技術を開発した。1つのICに画像センサーとAIによる処理システムを載せたハードウェアだ。画像とコードの融合がますます進んでいる現在では、その利点とアプリケーションの可能性はとても大きい。
コンセプトは比較的単純で、いまやどんなスマートフォンにでも使われているCMOSセンサーを、ロジックチップの上に載せるだけだ。これによって、CMOSセンサーからピクセル情報を取り出すだけでなく、それらのピクセルから情報を抽出する機械学習モデルを操作することができる。
つまり、写真をコンピューターのメインのロジックボードやGPUやクラウドなど外部へ送る前に、その写真に対して単一の電子回路が画層補正などのさまざまな処理を行う。
実際には、こういったイメージセンサーには、ピクセルの並べ替えやJPEGへの圧縮などの通常の作業を行うコンパニオンプロセッサがすでに搭載されている。しかし、これらのプロセッサは、ほんのひと握りの一般的なタスクを素早く実行することに特化している。。
ソニーによると同社が開発したチップは「もっと高度な処理と出力ができる」という。例えば、野原で犬を撮影した場合、チップはすぐにオブジェクトを解析し、画像全体を送信するのではなく、「犬」や「草」など認識したものを報告するだけでいい。
即興的な編集を行うこともできる。例えば、花だけを残りして茎は切り取るといった、
スポンサーリンク
ソニーがAIチップ内蔵の画像センサーを製品化
IT起業ニュース
コメント