FUJI PRESS
メニュー
富士市×AI導入事例

音声AI・IoTの研究開発|小型端末に話してメモ・通知につなぐAI秘書の取り組み

公開日: 更新日: 著者: 渡邉 泰弘

関連テーマ: AI活用、店舗DX

この記事の要点

音声AIと小型IoT端末を組み合わせたAI秘書の研究開発を紹介。現場での部材確認タスクと、本人が確かめる家族への連絡メモの具体例2件を通じ、認識精度、通知、通信障害、プライバシーを検証する考え方を解説します。

要点

AIをパソコンやスマートフォンの中だけで使うのではなく、現場で自然に使える形へ近づけるため、音声AIと小型IoT端末を組み合わせた研究・開発を進めています。

この領域は、完成した導入事例ではなく、現在検証を続けている取り組みです。

現在取り組んでいること

小型のM5Stick系端末を使い、ボタンを押して話した内容をAIへ送る試作を進めています。

基本的な流れは、

  1. 端末のボタンを押す
  2. 音声を録音
  3. AIが音声認識
  4. メモや予定として整理
  5. バックエンドへ保存
  6. 必要な時刻に通知
  7. 管理画面から確認

という構成です。

なぜ小型端末なのか

スマートフォンは高機能ですが、アプリを開く操作が必要です。

小型端末なら、「押して話す」という一つの動作に絞れます。高齢者や現場作業者など、複雑な画面操作を減らしたい場面で使いやすくなる可能性があります。

使用している技術

今後検討している用途

ただし、これらは現時点で完成済みのサービスとして提供しているわけではありません。

特にフィジカルAIについては、現在、必要な技術や利用場面を含めて取り組みを検討している段階です。

具体例1:現場で気づいた部材の不足を、確認タスクにする

架空の修理現場で、担当者が作業中に「次回訪問までに部材の在庫を確認する」と気づいた場面です。端末のボタンを押して短く話すと、音声認識が文を文字にし、AIが「タスク候補」「次回訪問まで」「部材在庫の確認」に分けて画面に表示します。担当者が現場名や顧客名を音声に含める必要があるかは事業所のルールに従い、不要なら案件番号だけを選びます。内容を本人が確認して保存し、日時が特定できない場合は締切を推測せず「期限を選択」と返します。

この仕組みの価値は、音声を自動で完璧に理解することではなく、手がふさがっているときの気づきを、後で確認できるタスクへ変えることです。音声認識の確信度が高くても誤認識はあり得るため、部材名や数字、相手先など間違えると影響がある項目は、保存前に画面で確認します。

具体例2:家族への連絡メモを、本人が確かめてから通知する

見守り機能の可能性を検証する架空の場面として、利用者が「夕方、家族に電話する」と端末へ話したとします。AIは連絡先を勝手に推測せず、本人に登録済みの候補を選んでもらい、通知時刻を確認します。本人が取り消した場合や通知を受け取らなかった場合は、未完了として表示するだけにし、「通知が届かなかった=異常」と判断しません。緊急時の監視や医療判断を担う仕組みではないこと、通知先と連絡の範囲は本人と関係者の同意に基づいて決めることを前提にします。

試作機で確かめたい項目

  1. 騒音、距離、話す速さ、方言による認識の違い
  2. 固有名詞や数字を誤認した際に修正しやすいか
  3. 通信が切れたときに録音データをどう扱うか
  4. 誤ってボタンを押したときに取り消せるか
  5. 通知を受け取る相手、時間帯、停止方法が明確か
  6. 電池残量や端末故障を利用者が気づけるか

Google Cloudの音声認識資料では、信頼度スコアと実際の認識精度は同じ指標ではなく、認識結果を確認させる判断材料になり得ると説明されています。実用性は少数の成功例だけでなく、実際の音声サンプルと正解文字列を比べて検証します。Google Cloud「音声認識の精度を測定・改善する」

音声には氏名、住所、健康・家庭に関する情報が含まれる場合があります。録音の範囲、保存期間、アクセス権、削除手順を決め、検証では架空データを優先します。これは研究・試作中の取り組みであり、完成した見守り製品や安全を保証するサービスとして案内するものではありません。

試作から実利用へ進む前の段階

まず雑音の少ない環境で、短いメモ、数字を含む予定、固有名詞を含む例、言い直しがある会話をそれぞれ録音し、正しい文字起こしと比べます。次に、音声が途中で切れた場合、ネット接続がない場合、同じボタンを連続して押した場合の動作を試します。端末に録音中の表示や取り消し操作を設け、聞き取れない内容を無理に保存しない状態を確認してから、本人の同意を得た少人数で評価します。性能だけでなく、何を録音し、いつ消し、誰が閲覧できるかを試験項目に含めます。

見守り用途に広げるときの考え方

高齢者が使う端末では、通知が届かなかった時に「本人に何か起きた」と即断する仕組みを作らないことが重要です。端末の電池切れ、Wi-Fiの停止、音量設定、通知先の変更など、技術上の理由でも記録が途切れます。利用者・家族・支援者と、どんな時に誰が連絡するか、連絡がつかない場合の手順、サービスが担わないことを先に決めます。本人の同意なく常時録音を続けたり、家族へ位置情報を送ったりしない設計を基本とし、利用者が録音・共有を止められる操作も試作段階で確認します。

使いやすさは、操作説明より本人の試用で確かめる

ボタンの押し方を説明できても、実際に片手で押せるか、録音中と保存後の状態を区別できるかは別です。試用では、利用者本人に説明書を渡すだけでなく、記録・取消・通知確認を実際に行ってもらい、迷った箇所を設計へ戻します。文字表示が読みにくい、通知音が聞こえないといった気づきも記録し、音量・文字サイズ・振動など端末側の工夫を検討します。

何を検証しているのか

重要なのは、「AIが話せるか」だけではありません。

といった、実際に現場で使うための条件を確認しています。

よくある質問

Q. すでに製品として販売していますか?

いいえ。現在は研究・試作・検証を進めている段階です。

Q. 高齢者の見守りにすぐ使えますか?

見守り用途は構想の一つですが、安全性、通信、個人情報、通知先などの設計が必要です。完成済みの見守りサービスとしては案内していません。

Q. センサーも接続できますか?

温湿度、NFC、GPSなど各種センサーとの連携を検討しています。実装可否は端末や用途によって異なります。

Q. フィジカルAIは完成していますか?

いいえ。フィジカルAIは現在取り組みを検討している領域であり、完成済みとして扱っていません。

まとめ

音声AI・IoTでは、AIをより自然に現場へ持ち込む方法を研究しています。

「画面を操作するAI」から「話しかけて使えるAI」へ近づけることが、現在のテーマです。

関連記事と公式情報

関連記事

公式情報