Google が今年5月の I/O で発表していた Google レンズの新機能の1つである、音声と動画による検索機能を正式に展開しました。
この機能を使うことで、従来は写真を撮影してからテキストを入力して検索することしかできませんでしたが、シャッターボタンを長押しして動画を撮影しながら音声入力で質問して検索することができるようになります。検索結果には AI Overview で生成された答えが表示されます。
以下の例では、水族館の魚について詳しく知りたい場合、Google アプリからレンズを開いてシャッターボタンを押したまま、「なぜ一緒に泳いでいるの?」と声に出して質問しているシーンが挙げられています。
これにより Google のシステムは動画と質問の組み合わせを理解して、AI Overview とウェブ全体から役に立つリソースを表示します。動画は最大20秒間録音・録画することができます。これにより、言葉では言い表しづらい動きなどについて質問ができるようになりました。
現時点では Search Labs の AI Overview などに参加することが必要で、Android および iOS の Google レンズアプリで広く展開されていますが、英語でのみ使用することができます。