Google、Gemini Liveに高齢者向け「シンプルガイド」を順次提供、介護職員向け活用ガイドも公開
日本の高齢者をサポートする新しい機能と取り組み：Gemini アプリのシンプルガイドと介護ガイドブックを公開
Googleは、Gemini アプリの Gemini Live に、カメラや画面の共有でリアルタイムに音声支援を行う新機能「シンプルガイド」の順次提供を開始した。Android 9 以降の端末で利用でき、あわせて介護職員向けの「介護の現場を支える Gemini 活用ガイド」も公開した。
シンプルガイドは、Gemini Live でカメラや画面を共有すると、周囲の状況や手元の書類、リモコン、スマートフォンの画面を Gemini が把握し、音声で読み上げや要点の説明を行う機能である。カメラの向きがずれている場合は「もう少し近づけてみてください」と案内する。作業を代行するのではなく、ユーザー自身ができるようになるための伴走を目指すと説明されている。
想定される利用場面は、YouTube でストレッチ動画を探す、家族から届いた写真を保存するといったスマートフォン操作の補助、お薬手帳や処方薬の細かな文字の読み上げ補助、リモコン操作の確認、通院前の症状メモの整理などである。不審な SMS や警告画面を見せて見分け方を学ぶ使い方や、音声での画像生成や創作も挙げられている。詐欺対策は検知や判定を保証するものではなく、読み上げ補助は医療診断や服薬指導を行うものではないと注記されている。
設定は Gemini アプリのプロフィール設定で「Live で シンプルガイド を使用する」をオンにし、Gemini Live からカメラを共有する。Android のユーザー補助の「視覚支援」からは、フローティングボタン、2本指スワイプ、両方の音量キーでの起動を設定でき、TalkBack 利用時は3本指タップのメニューから選べる。Gemini Live がサポートされる地域と言語の Android 9 以降で利用でき、Gemini アプリと Android システムソフトウェアの更新が必要である。誤動作の可能性があり、医療機器や移動補助具の代替ではなく、ナビゲーションや障害物検知を目的としないとも明記されている。
出典: Google Japan ブログ · blog.google