トップ›商品情報・タグ付けの対策›この記事
Google、AI Modeにマルチモーダル検索を追加
原題: Bringing multimodal search to AI Mode
背景
テキストだけでは伝えきれない色・素材・形状といった視覚的な検索ニーズに応えるため、Google One AI Premiumユーザー向けに先行提供されていたAI Modeを数百万人のLabs利用者へ展開したのに合わせ、Googleは画像内の物体・素材・色・形をLensとGeminiのマルチモーダル機能で理解する検索機能を追加した。
結論
- Geminiのマルチモーダル機能とLensの視覚検索能力を組み合わせ、物体同士の関係性・材質・色・形状・配置を含めたシーン全体を理解できるようになった。
- AI Modeで打ち込まれるクエリは、従来の検索と比べて平均で2倍長いというデータが示されており、より具体的で複雑な質問が寄せられている実態がうかがえる。
- 具体例として、書棚を撮影した写真から各書籍を正確に特定し、それぞれの本の情報や高評価の類似書籍を紹介した上で購入リンクまで提示するデモが示されている。
- Android・iOS双方に対応し、Google Labsでのサインアップを経てGoogle Appから利用できる。
メッセージ
書棚の写真から一冊ずつ本を識別して購入リンクまで提示するという例は、写真に写り込んだだけの商品でも発見の対象になり得ることを示している。クエリが平均2倍の長さになっているというデータも合わせて考えると、利用者はより具体的な条件を一度に伝えるようになっている。商品ページ側も、単一の特徴だけでなく素材・色・形状・用途といった複数の切り口の情報を一つの商品に紐づけておくことが、画像起点の検索でも取りこぼされないための備えになる。