事務所の複合機に見慣れないエラーが出た。Excelの画面で手が止まった。グループホームの給湯器が謎の点滅をしている——。そんなとき、頼りになる“詳しい人”が近くにいないと、作業がまるごと止まってしまいますよね。
今回ご紹介するのは、スマホのカメラで「見せながら」AIに教わる方法です。文字を打つ必要はありません。カメラを向けて、声でふつうに話しかけるだけ。まるで、隣に詳しい人が座ってくれたような感覚です。
コピー機にエラーが出てるんだけど、表示の意味が分からなくて…。マニュアルを探すのも大変だし、写真を撮って文字で説明するのも面倒で。
それなら、カメラで私に見せてください。Geminiアプリの Live(ライブ) という機能を使うと、カメラに映っているものを見ながら、声でリアルタイムに会話できます。「今映ってるこのボタンを押してください」というふうに、その場でご案内できますよ。
「カメラ共有」って、なに?
はじめての方のために、かんたんに。
- Gemini Live(ジェミニ・ライブ) … GoogleのAI「Gemini」と、電話のように声で会話できる機能。文字を打つ代わりに、話して・聞いて、のやり取りができます。
- カメラ共有 … そのLive中に、スマホのカメラに映っているものをAIにも見せられる機能。「これ、なに?」「どうすればいい?」と、指をささずに“見せて”聞けるのがポイントです。
- 料金は 無料。AndroidでもiPhoneでも使えます。
「写真を撮って、送って、文字で説明して…」という手間がぜんぶ消えて、かざして話すだけになる——ここが今までとの大きなちがいです。
用意するもの
- スマホ(AndroidでもiPhoneでもOK)
- Geminiアプリ(無料)… 入っていなければ、アプリストアで「Gemini」と検索して入れておきます
- Googleアカウント(=Gmailのアドレス)でログイン
やってみよう
- Geminiアプリを開く … いつものチャット画面が出ます。
- Liveを始める … 入力欄の横にある 波形のマーク(Live) をタップ。「ポン」と音がして、声の会話が始まります。
- カメラをオンにする … 画面に出てくる ビデオカメラのボタン をタップすると、カメラに映っているものがAIにも見えるようになります。
- かざして、話す … あとは困りごとに カメラを向けて、ふつうに話しかけるだけです。
すると、「それは紙づまりのサインですね。本体の右側にある緑のレバー、いま映っています。それを手前に起こしてください」——というように、映っているものを見ながら、声で案内してくれます。分からなければ「どのレバー?」と聞き返せばOK。会話なので、何度でも聞き直せます。
こんなときに
- 機器のエラー・設備の表示 … 複合機、シュレッダー、給湯器、エアコンの点滅ランプ。「これは何のサイン?」
- パソコン画面のとなりで … Excelでつまずいたら、PCの画面にスマホをかざして「この表のここに合計を出したい」。手を動かしながら、音声で教われます。
- 配線・組み立て … プロジェクターやスピーカーの配線。「この線、どこにさすの?」
- 書類の書き方 … 記入例のない申請書をかざして「この欄には何を書けばいい?」
- 作業活動の場面で … 畑の野菜の様子、備品の型番調べ。「これ、なんという部品?」
スマホの中の操作(設定とか)で困ったときも、見せられるの?
できます! カメラの代わりに 「画面を共有」 ボタンを押すと、いまスマホに表示されている画面そのものを見せられます。「この設定、どこを押せばいい?」も、画面を見ながらご案内できますよ。
うまくいくコツ
- ゆっくり、近づけて … 小さな文字やランプは、少し近づけて2〜3秒とどめると読み取りやすくなります。
- 「今映っているもの」と言う … 「これ」「それ」より、「いま映っているエラー表示」と言葉にすると、確実に伝わります。
- 聞き取りにくければ聞き返す … 「もう一度」「もっとゆっくり」「手順を1つずつ」も、ぜんぶ声でOK。
- 事務所ではイヤホンがあると安心 … 声のやり取りなので、まわりに人がいる場所ではイヤホンを使うと落ち着いて話せます。
気をつけたいこと
便利なぶん、カメラならではの注意があります。
①映り込みに注意:カメラは思った以上に広く映ります。机の上の利用者さんの名簿や記録、ホワイトボードの予定表、人の顔などが映り込まないよう、かざす前にまわりを確認してください。業務システムの画面を見せるときも、個人情報が表示されていない画面で。
- ②機器の“中身”には手を入れない … AIの案内はマニュアル的な一般論です。カバーを開ける・分解するような作業は、無理せずメーカーや業者へ。電気・ガス・水まわりの本格的な修理は、必ず専門家にお願いしてください。
- ③大事な操作は、ひと呼吸 … 「初期化してください」のような取り返しのつかない操作は、実行する前に取扱説明書や詳しい人にも確認を。AIも読み間違えることがあります。
ひとこと: この機能のいちばんの価値は、「詳しい人が来るまで止まっていた時間」が消えることかもしれません。分からないものは、かざして聞く。合言葉にできると、現場の小さな停止がずいぶん減りますよ。
「こんなこと、パソコンやAIでできる?」というギモンがあれば、お問い合わせフォームからぜひ教えてください。次の「教えてAIさん」で取り上げるかもしれません。