なんていったっけな、ほら、こんなヤツ。

そう、名称が分からなかったり思い出せなかったり。あるいは上手く言葉で説明できない場合は、絵に描いて伝えるという方法がある。

Photo credit: ungard via Visualhunt / CC BY-SA

これは人から人に伝えるには手っとり早い方法だが、インターネットで調べる場合には、どうしてもキーワードといった言葉が必要だ。

しかし、AI（人工知能）に手書きの絵を学ばせれば、検索できるようになるのではないか？

そんなシステムが開発されていた。

■ 絵の特徴を把握して検索する

手書きの絵から何が描かれているのか判断し、それが写されている写真を検索してくれるシステムを研究・開発したのは米ジョージア工科大学のJames Hays氏らのチームだ。

言葉で入力しなくても、手書きの絵をスキャンすれば、コンピューターがその絵で示したかったものが映っている写真を探し出してくれる。

[youtube https://www.youtube.com/watch?v=TnU3VzXxEh4]

この検索システムが優れているのは、手書きの絵の形状を単純にマッチングさせているのではないことだ。

手書きの絵の特徴を把握し、それに似たものが映っている写真をピックアップするのだ。

例えば足を伸ばして立っているカメの絵をスキャンして、その特徴を把握してから、類似のものが写っている写真を選び出しているため、草に埋もれて足が見えていないカメや、頭部が似ている蛇の写真までピックアップすることができる。

■ 学習を続ければマッチ率を上げられるAI

この、手書きの絵に何が描かれているのかをコンピューターに解釈させるためには、ニューラルネットワークが使用された。

データベースを用意するために、Amazon Mechanical Turkというクラウドソーシングを利用して、664人にイラストを描かせた。