高校生が作成した”SmartLens”アプリは、汎用ビジュアル検索への第一歩だ

数年前、私はカメラを向けるとそれが何かを教えてくれるようなアプリを熱望していた。結局その問題は、皆が期待していたものよりもはるかに困難だったが、そのことは高校生Michael Royzenのやる気を削ぐものではなかった。彼のアプリであるSmartLensは、何かを見て、それが何かを特定し、さらに詳細を知りたいという問題を解決しようとするものだ。正直なところそれは完璧な成功とは言えないが、ポケットの中に忍ばせておくことに抵抗はない。
Royzenが私に連絡してきたのは少し前のことだったが、私は興味深いと（実は正直疑わしいと）思っていた。GoogleやAppleのような企業もずっと失敗してきた（少くとも良い製品はリリースできていない）課題解決を、空き時間を使って作業している高校生ができるものだろうか。私は彼と喫茶店で会い、実際に動作するアプリを見て、嬉しい驚きと、ちょっとした困惑を感じた。
このアイデアは単純だ：携帯電話のカメラを何かに向けると、何千万枚ものイメージを使って訓練され、巨大だが高度に最適化された分類エージェントを利用して、アプリがその対象を識別しようとする。WikipediaとAmazonに接続することで、アプリが識別したものに関して、より詳細に知ったり購入したりすることができる。
それは1万7000以上の物体を認識する。多くの種類の果物や花、ランドマーク、道具などなど。

リンク元