手の動きを追跡するGoogleのアルゴリズムで手話を認識できるか

手話でコミュニケーションをとっている人は大勢いるが、手話の複雑な動きをとらえて音声言語に翻訳する取り組みはあまり成功していなかった。しかしGoogleのAIラボが研究しているリアルタイムのハンドトラッキングが進歩し、翻訳を待ち望んでいる人々にとってはこれが突破口になるかもしれない。
この新しい技術では巧みに効率化を図っている。そしてもちろん機械学習全般の効率が上がったこともあり、スマートフォンのカメラだけで手のひらとすべての指のマップをリアルタイムで正確に作成することができる。
Googleの研究者のValentin Bazarevsky（バレンティン・バザレヴスキ）氏とFan Zhang（ファン・チャン）氏はブログに次のように書いている。「現在の最先端のアプローチでは主にパワフルなデスクトップ環境に頼って推論しているが、私たちの方法では携帯電話でリアルタイムのパフォーマンスを出している。また複数の手にスケールすることもできる。手をリアルタイムで確実に認識するのは、コンピュータビジョンのタスクとしては明らかに難しい。手の一部、あるいは2つの手が重なり（指と手のひらが重なる、握手をするなど）、高コントラストのパターンでなくなることが多いからだ」。
しかも手の動きは速く、微妙だ。こうした動きをリアルタイムでとらえるのは、コンピュータは得意でない。正しく認識するのはとても難しく、速く認識

リンク元