AmazonのiPhoneアプリの検索機能「フォト検索」を試してみた

2010.06.05

Amazon.co.jpが送り出したiPhone/iPod touch用アプリ「Amazon Mobile JP」
いつものAmazon.co.jpのお買い物ができるだけじゃなく、撮った写真で商品検索できる機能「フォト検索」というアプリ独自の検索があるのが特徴。

Amazon Mobile JP 無料

イメージマッチによる自動検索と、Amazon Mechanical Turkという人力検索（通常は有料サービスですが、アプリではAmazonが費用負担）の組み合わせによる検索なのですが、認識率が気になったので若干ヲタク的視点でチェックしてみました。

ちなみにこちらが検索結果。
今回は音楽CD、TVゲーム、DVD・Blu-ray、コミック、フィギュアの5種類をチェックしました。

写真はiPhoneで撮らずに、デジカメで撮ったものをiPadで読み込んで検索、というステップを踏んでいます。
iPhoneで直接撮ることも可能なのですが、画質がアレだったので今回はパス。

自動検索ですと結果は写真をアップロードしてすぐに反映。
人力検索だと、後ほど結果が送信されてきますが、今回は5分以内に結果が返信されてきました。通常でも30分〜1時間程度で帰ってくるそうです。さすがは24時間体制なAmazon Mechanical Turk。

で、実際の結果は以下の通り。

音楽CD

ターゲット：LotusFlow3r by Prince
LotusFlow3r　(AA)

自動検索で、正確な結果がでました。
もともとInternationalの商品なので、検索のノウハウもしっかりあるということでしょう。
ですので、ニッチなCD/レコード屋さんで輸入版チェックをしたい場合にはジャストフィットしていそうな気がします。

PS3ゲーム

ターゲット：PS3版ティーアズ・トゥ・ティアラ初回限定版
ティアーズ・トゥ・ティアラ -花冠の大地-(初回限定版:「原画設定資料集」&「オリジナルサウンドトラック」同梱) (AA)

こちらもちゃんとマッチした検索結果がでました。こちらも自動検索です。
パッケージの色合い的にコントラストが高いと自動認識率も高くなるのでしょう。

DVD(Blu-ray)

ターゲット：ヱヴァンゲリヲン新劇場版：破 Blu-ray版
ヱヴァンゲリヲン新劇場版：破　EVANGELION:2.22 YOU CAN (NOT) ADVANCE.【初回限定版】 [Blu-ray] (AA)

人力検索にまわされました。
そして、結果もマッチしてませんでした。

おそらくパッケージの色合いなどで人力検索されたのでしょう。
結果は散々ですね。日本でのBlu-ray販売のスタートダッシュ記録を塗り替えた記録的な商品なのに残念。
多分、USで売っているDVD/Blu-rayならイケるんでしょうかね。

コミック

ターゲット：ハニカム 4巻
ハニカム 4 (電撃コミックス) (AA)

こちらも散々です。やっぱり、人力検索。
パッケージの色合いもまったくマッチしていませんし、表紙を見るかぎりはどうみても数学の本にはみえないのですが。
帯の色合いが似ているんですが、そこだけでマッチさせたんでしょうか。

まさか…ねぇ…

フィギュア

ターゲット：アルターお姉チャンバラVorteX 彩
お姉チャンバラ vorteX 彩 (1/7スケールPVC塗装済み完成品) (AA)

パッケージだけでなく、フィギュアそのものでも検索できるチェック。
こちらも人力検索。
結果は、惜しいところ。エヴァのマリフィギュアがヒットしました。確かに、ポーズは似ていますし。

ともあれ、フィギュアとしてはチェックされているので、認識率もうちょっとでイケそうですね。
ということで、フィギュアパッケージだけでなく中味でもいける可能性が判明したので、外で気になるフィギュアがあった時には使える、かも、しれません。

ということで、まとめです。

自動認識率は脅威の認識率
人力検索は、まだまだ改善の余地あり

といったところでしょうか。

ということで、現状では自動認識のものはバッチリですが、人力検索モノはまだまだですね。
Amazon Mechanical Turkに日本人が増えれば劇的な改善が見込めるような気がします。
日本人でも参加できるのかな？＞Mechanical Turk

Mechanical Turkのノウハウや画像認識がもっと向上すれば、かなり使える機能になりそうです。

関連タグ：iPhone アプリ Amazon.co.jp

Posted by かん at 21:30 パーマリンクトラックバック ( 0 ) コメント ( 0 )