工場の保全の担当が設備の巡回で録った運転音を Gemini で前回の録音と聞き比べ、異音の候補と時刻を拾って点検の記録を作る
設備の巡回で決まった位置から録った30秒の運転音を、Gemini で同じ点の前回の録音と聞き比べ、がたつきやきしみなど変わった音の候補を時刻つきで返します。自社の基準で振り分けた点検の記録の下書きを作り、保全の担当が現場で聞いて確かめます。
- 生成AI
- Gemini
- 連携・自動化
- Google Apps Script/Python
- 対象業界
- その他/物流/製造
- 対象部門
- 品質管理/生産
- 対象業務
- 内容確認・チェック/記録・議事録作成
- 主な課題
- 人手が足りない/属人化している/引き継ぎができていない
- AIで行う処理
- 判定
- 主な効果
- 判断支援/属人化解消/工数削減
- 導入難易度
- ★★★★☆
- 実装レベル
- 半自動化
- 費用感
- API連携(中)
- 人間の確認
- 条件付き
01導入前 / 導入後の業務フロー
- 担当が巡回のルートと点検表を持って回る
- 設備の前で運転音を聞き、振動に手を当て、においと漏れを見る
- 点検表の欄に丸か×を付け、気になることがあれば欄外に書く
- 音が気になれば、スマートフォンで録って班長に聞かせる
- 班長が現場で聞き、様子を見るか、振動計で測るか、修理を頼むかを決める
- 巡回が終わったら、点検表を事務所に戻し、×の点を保全台帳に転記する
- 人担当が設備の札をスマートフォンで読み込み、床の録音位置の印に立って、30秒の運転音を録る
- 人画面で運転の条件(運転中の負荷の段、回転の設定、隣の設備が動いているか)を選び、振動・におい・漏れの欄に丸か×を付けて送る
- 自動スクリプトが、同じ点・同じ条件の前回の録音と、ふつうのときの基準の録音を引く
- 自動Gemini が、基準・前回・今回の録音を聞き比べ、変わった音の候補を時刻と種類つきで返し、録音の質の問題を分けて返す
- 自動スクリプトが、候補を自社の点検基準の表で「記録だけ」「次の巡回で録り直す」「その日のうちに保全の担当が聞きに行く」に振り分ける
- 自動「その日のうちに聞きに行く」の候補は、班長と保全の当番に、点・時刻・録音のリンクを通知する
- 人班長か当番が、通知の録音の該当の時刻を聞き、現場で聞いて、必要なら振動計で測り、記録を確定する
- 自動確定した内容が点検の記録と保全台帳に書き込まれ、録音が今回分として保存される
各工程の詳しい説明を読む
- 担当が巡回のルートと点検表を持って回る
- 設備の前で運転音を聞き、振動に手を当て、においと漏れを見る
- 点検表の欄に丸か×を付け、気になることがあれば欄外に書く
- 音が気になれば、スマートフォンで録って班長に聞かせる
- 班長が現場で聞き、様子を見るか、振動計で測るか、修理を頼むかを決める
- 巡回が終わったら、点検表を事務所に戻し、×の点を保全台帳に転記する
(a)気づけるかが担当で決まる。 2番で「違う」と気づけるかは、その担当がふだんの音を知っているかで決まります。若手の巡回の日は、×がほとんど付きません。 異常が無いのか、気づけていないのかは、点検表からは分かりません。
(b)比べる材料が無い。 4番で録った音は、気になったときの音だけです。ふつうのときの音が録られていないので、 班長も記憶で比べるしかありません。班長が休みの日は、録った音を誰も評価できません。
(c)点検表が丸だけになる。 3番の丸は「聞いた」という印にすぎず、どんな音だったかは残りません。 ある日故障して振り返っても、前の週の点検表には丸が並んでいるだけで、いつから音が変わっていたのかが分かりません。
(d)×のあとの流れが人づて。 5番と6番は、班長が捕まるかと、点検表が事務所に戻るかに左右されます。気になる音の点が、班長に伝わらないまま次の巡回の日を迎えることがあります。
- 【人】 担当が設備の札をスマートフォンで読み込み、床の録音位置の印に立って、30秒の運転音を録る
- 【人】 画面で運転の条件(運転中の負荷の段、回転の設定、隣の設備が動いているか)を選び、振動・におい・漏れの欄に丸か×を付けて送る
- 【自動】 スクリプトが、同じ点・同じ条件の前回の録音と、ふつうのときの基準の録音を引く
- 【自動】 Gemini が、基準・前回・今回の録音を聞き比べ、変わった音の候補を時刻と種類つきで返し、録音の質の問題を分けて返す
- 【自動】 スクリプトが、候補を自社の点検基準の表で「記録だけ」「次の巡回で録り直す」「その日のうちに保全の担当が聞きに行く」に振り分ける
- 【自動】 「その日のうちに聞きに行く」の候補は、班長と保全の当番に、点・時刻・録音のリンクを通知する
- 【人】 班長か当番が、通知の録音の該当の時刻を聞き、現場で聞いて、必要なら振動計で測り、記録を確定する
- 【自動】 確定した内容が点検の記録と保全台帳に書き込まれ、録音が今回分として保存される
3番目で「基準の録音」を持つのが、この設計の要です。 前回とだけ比べると、毎回少しずつ変わっていく音は、前回とはいつも「ほぼ同じ」になります。 班長が「ふつうの音」と認めた録音を点ごとに基準として残し、前回との比較と、基準との比較の両方を返させます。
7番目で人が聞くのは、Gemini が示した時刻です。 30秒の録音を最初から聞き直すのではなく、「0:12から0:18のコツコツ」を、基準の録音の同じあたりと聞き比べます。 班長が休みの日でも、当番が同じ手順で確かめられます。
02今回想定するシステム構成
巡回の点(ポンプ・送風機・コンベヤ・減速機など)
▼【トリガー】担当が札を読み込み、録音位置で30秒を録り、条件を選んで「送る」を押す
Google Apps Script(ウェブアプリ)
├── 同じ点・同じ条件の前回の録音と、基準の録音を引く
├── 録音の長さと形式を確かめ、名前を付ける
▼
Gemini API(音声の理解・構造化出力)
│ 基準・前回と比べて変わった音の候補(種類・時刻)
│ 録音の質の問題(風・隣の機械・会話)
▼
Google Apps Script ── 自社の点検基準の表で振り分け
── 「その日のうちに聞きに行く」は班長と当番へ通知
▼
【人】班長か当番が該当の時刻を聞き、現場で確かめて確定 → 点検の記録・保全台帳へ| 役割 | 想定する製品 | 代替候補 |
|---|---|---|
| 処理 | Gemini API(基準・前回との聞き比べと、変わった音の候補) | 振動計・状態監視のセンサーの値による傾向の監視(音の聞き比べの代わりではなく併用) |
| 連携 | Google Apps Script(巡回の画面、録音の受け取りと保存、呼び出し、振り分け、通知) | Python |
| 点検の記録 | Google のスプレッドシート(点、日時、条件、候補、確定の内容、録音の保存先) | - |
| 録音の保管 | Google ドライブ(点ごとのフォルダ、基準の録音) | - |
新しく足すのは、スマートフォンで開く巡回の画面と、Gemini API の契約と、設備の札と録音位置の印だけです。 録音はスマートフォンの録音のアプリで録り、画面から送ります。保全台帳は今の表を使い、点ごとの番号の列を足します。
音を聞く土台は、Gemini API の音声の理解です。 公式の案内では、話し声でない音(鳥の声やサイレンなど)も理解し、 録音の中の位置を「分:秒」の形で指して聞けるとされています。対応する形式は WAV、MP3、AAC、FLAC、OGG などです。音声は1秒あたり32トークンで数えられ、1回に送れる長さは9.5時間まで、リクエスト全体は20MBまでと書かれています。
限界も、同じ案内に書かれています。 音声は 16Kbps に落とされ、複数のチャンネルは1つのチャンネルにまとめられます。 ステレオで録っても左右の違いは使えず、高い音の細かい変化は残らない前提で設計します。 このため、代替候補の欄には別の AI の製品ではなく、振動計やセンサーを併用するものとして挙げています。
出力は構造化出力で受けます。 /v1beta/interactions に送り、response_format の mime_type を application/json にし、schema にスキーマを入れます。文字列は enum で決まった値に絞れます。構文として正しい JSON でも値はアプリ側で検証するよう公式に書かれています。
つなぎは Google Apps Script で組みます。 公式の割り当ての表では、1回の実行は6分まで、外部への呼び出しは1回あたり50MBまでで、Google Workspace のアカウントでは外部への呼び出しが1日100,000回までです。1点の聞き比べは1回の呼び出しで済み、1日30点なら上限から遠いところで回ります。割り当ては予告なく変わりうるとされています。
03どうやって実装するのか
処理の起点を決める
担当が設備の札を読み込み、30秒を録って「送る」を押したときを起点にします。 巡回の点ごとに1回ずつ動かします。夕方にまとめて処理することはしません。 「その日のうちに聞きに行く」の候補が出たら、巡回の途中でも班長と当番へ知らせたいからです。
録音は、決まった録音位置から録ります。 設備ごとに、安全柵やカバーの外側の床に録音位置の印を貼り、 スマートフォンを持つ高さと向きを決めます。回転する部分に手やスマートフォンを近づけて録ることはしません。録音位置は、班長が安全を確かめて決めます。
画面を使えるのは、保全の担当のうち18歳以上の人に限ります。 Gemini API の規約は、18歳以上であることを利用の条件とし、18歳未満の人に向けた、または使う見込みのあるサービスでの利用を認めていません。 工場には18歳未満の社員がいることもあるので、巡回の画面のアカウントを配るときに確かめます。
入力データを集める
| データ | 中身 | 取得元 |
|---|---|---|
| 今回の録音 | 決まった録音位置からの30秒 | スマートフォンの録音のアプリ |
| 前回の録音 | 同じ点・同じ条件のいちばん新しい録音 | Google ドライブ |
| 基準の録音 | 班長が「ふつうの音」と認めた、同じ点・同じ条件の録音 | Google ドライブ(基準のフォルダ) |
| 運転の条件 | 負荷の段、回転の設定、隣の設備が動いているか | 巡回の画面で担当が選ぶ |
| 点の情報 | 設備の種類、録音位置、前に記録のある音(既知の音) | 点検の記録の台帳の列 |
| 点検基準の表 | 候補の種類ごとの振り分け | スプレッドシート |
質を決めるのは、条件をそろえることです。 同じポンプでも、負荷が高いときと低いときでは音が違います。 隣の送風機が動いているかどうかでも、録音に入る音が変わります。条件の違う録音を比べると、違いのほとんどが条件の違いになり、 本当に知りたい変化が埋もれます。画面で条件を選ばせ、同じ条件の録音だけを比べる相手にします。
基準の録音は、点ごと・条件ごとに班長が選びます。 修理や部品の交換の直後で、班長が聞いて「これがふつう」と認めた録音です。部品を替えたら基準を録り直します。 替えた後の音は、替える前と違って当たり前だからです。
既知の音は、毎回同じ音を候補に上げないために渡します。 古いコンベヤのチェーンの「カシャカシャ」は、ずっとある音として記録に載っています。 それが大きくなったかどうかは知りたいことですが、あること自体は毎回の候補にしません。
データの取得方法を決める
録音は巡回の画面から、スクリプトが受け取ります。 点の番号と日時の付いたフォルダに保存してから Gemini を呼びます。呼び出しに失敗しても、同じ録音で呼び直せます。
前回と基準の録音は、点の番号と条件で、ドライブのフォルダから取ります。 同じ条件の前回が無いときは、条件の近い録音ではなく基準だけと比べ、「前回の比較なし」と記録に残します。 条件の違う前回と比べた結果を、前回からの変化として読まないためです。
3つの録音を1回の呼び出しで渡します。 「基準」「前回」「今回」の名前を付けて並べます。30秒ずつなら3本で90秒で、リクエスト全体の20MBに収まるよう、録音のアプリの形式と品質を決めておきます。 公式の案内では音声は 16Kbps に落とされるので、高い品質で録っても送るときの音は同じです。
有料の利用枠で使い、store を false にします。 Gemini API の規約では、有料のサービスではプロンプトと応答が製品の改善に使われないとされています。Interactions API は既定でやり取りを保存し(有料の枠で55日、無料の枠で1日)、store=false で保存しない動きにできると案内されています。
AIへ渡す前に整形する
- 点の番号の確かめ … 札を読み込めないときは手で入れ、台帳に行があることを確かめます
- 長さの確かめ … 25秒より短い録音は録り直しを促します
- 条件の確かめ … 条件が選ばれていないと送れないようにします
- 形式をそろえる … 録音のアプリの形式が対応する形式であることを確かめ、そうでなければ変換します
- 会話の確かめ … 録っている間に話しかけられたときは、担当が「会話あり」に印を付けて録り直します
- 比べる相手の月日の記録 … 前回と基準の録音がいつのものかを付けます
5番目を軽く見ないでください。 録音に人の会話が入ると、その人の声と話した中身が社外のサービスに送られます。 巡回で録る30秒の間は話さない決まりにし、話しかけられたら録り直します。 Gemini にも、会話が聞こえたら知らせるよう指示しておきます。
2番目の長さは、周期の音を拾うためです。 減速機の歯の傷やカップリングのがたつきは、回転に合わせて一定の間隔で出ます。 短い録音では、その間隔が何回か入らず、周期の音として聞き分けられません。
AIに処理させる
させるのは、基準・前回と比べて変わった音の候補を、種類と時刻つきで返すことと、録音の質の問題を分けて返すことの2つです。
| 返させるもの | 値 | 判断できないときの扱い |
|---|---|---|
| 変わった音の種類 | がたつき、きしみ、周期的な打音、こすれ、空気の漏れのような音、うなりの高さの変わり、音の大きさの変わり | 当てはまらなければ unclear |
| 時刻 | 今回の録音の中の始まりと終わり(分:秒) | 録音の全体にわたるなら whole |
| 比べた相手 | 基準と違う/前回と違う/両方と違う | 比べられなければ not_comparable |
| 既知の音との関係 | 既知の音と同じ/既知の音が大きくなった/新しい | 決めきれなければ not_judgeable |
| 録音の質の問題 | 風の音、隣の機械の音、会話、こすれ(手やポケット) | 問題なければ空 |
| させないこと | 理由 |
|---|---|
| 設備を止めるか動かすかの判断 | 保全の担当が現場で聞き、測ってから決める |
| 故障の原因や部品の特定 | 音の候補から原因を言い切れない。軸受けか歯車かは人が調べる |
| 故障までの日数の見込み | 音から寿命は読めない |
| 「異常なし」の結論 | 候補が無いことを、設備に問題が無い根拠にしない |
| 会話の中身を書き起こす | 人の声と話の中身を記録に残さない |
原因を言わせないのは、言い切った原因が調べ方を狭めるからです。 「軸受けの傷」と返されると、担当は軸受けだけを見て、カップリングのがたつきやベルトのすべりを見落とします。 Gemini には音の種類と時刻だけを返させ、原因を調べるのは、現場で聞いて振動計を当てる保全の担当です。
「異常なし」を返させないのも、同じ理由です。 第1章のとおり、音は送られたあと低い品質に落とされ、細かい変化は拾えない前提で使っています。候補が出なかった点は、記録に「聞き比べで候補なし」と残し、「異常なし」とは書きません。
指示内容を固定する
あなたは工場の設備の巡回の点検を手伝う担当です。
同じ設備の同じ位置で、同じ運転の条件で録った3つの録音(1:基準、2:前回、3:今回)を聞き比べ、
今回の録音で変わった音の候補を JSON で返してください。
基準は {base_date}、前回は {prev_date} の録音です。設備の種類は {equipment_type} です。
【変わった音の種類】
rattle(がたつき), squeal(きしみ・キーキー), periodic_knock(周期的な打音),
rubbing(こすれ), hiss(空気の漏れのような音), pitch_change(うなりの高さの変わり),
level_change(音の大きさの変わり), unclear(当てはまらないが気になる音)
【返すもの】
候補ごとに、種類、今回の録音の中の始まりと終わり(MM:SS)、
基準と違うか、前回と違うか(vs_base, vs_prev)、聞こえたことの短い説明。
【既知の音】
次の音は前からある音です。同じ音なら known_same、大きくなったなら known_louder とし、
新しい音なら new にしてください。
{known_sounds}
【録音の質】
風の音、隣の機械の音、人の会話、手やポケットのこすれが聞こえたら、quality_issues に並べ、
その時刻を書いてください。
【厳守事項】
- 設備を止めるべきか、修理が要るかを書かないでください。
- 故障の原因や部品の名前を書かないでください。
- 「異常なし」「問題なし」と書かないでください。変わった音が無ければ candidates を空にしてください。
- 録音の質の問題を、変わった音の候補に入れないでください。
- 人の会話が聞こえても、その中身を書き起こさないでください。quality_issues に conversation とだけ書いてください。
- 3つの録音の長さや音の大きさが大きく違い、比べられないときは comparable を false にしてください。
「録音の質の問題を候補に入れない」を書くのは、巡回の録音でいちばん多い誤りだからです。 屋外の送風機は風の音が入り、隣の設備が動き出すと別の音が重なります。それを「新しい音」として返されると、班長への通知が空振りします。 質の問題は別の欄に分けさせ、質の問題がある時刻と重なる候補は、スクリプトが「次の巡回で録り直す」に回します。
「原因や部品の名前を書かない」は、例として「軸受け」「歯車」を挙げて禁じることも考えます。 名前を挙げずに禁じても、「ベアリングの摩耗の可能性」と書き添えることがあるからです。返ってきた説明に部品の名前があれば、スクリプトが画面で伏せて記録します。
出力形式を固定する
次の形の JSON で受け取ります。 kind、relation、quality_issues の種類は enum で決まった文字列に絞ります。
{
"point_id": "P2-17",
"comparable": true,
"candidates": [
{ "kind": "periodic_knock", "start": "00:12", "end": "00:18",
"vs_base": true, "vs_prev": true, "relation": "new | known_same | known_louder | not_judgeable",
"look": "一定の間隔のコツコツという音が、うなりの上に重なって聞こえる" }
],
"quality_issues": [
{ "kind": "wind | other_machine | conversation | handling", "start": "00:25", "end": "00:30" }
]
}
スクリプトは、まず時刻を確かめます。 start と end が録音の長さに収まっているか、start が end より前かを見て、外れていれば候補ごと「次の巡回で録り直す」に回します。 そのうえで、自社の点検基準の表で振り分けます。
| 振り分け | 候補の例 | 画面での扱い |
|---|---|---|
| その日のうちに聞きに行く | new の periodic_knock・rattle・squeal、known_louder、vs_base と vs_prev の両方が true のもの | 赤。班長と当番へ通知 |
| 次の巡回で録り直す | 質の問題と重なる候補、comparable が false、時刻の外れたもの | 黄。次の巡回のルートの先頭に入れる |
| 記録だけ | known_same、vs_prev だけが true の小さな level_change | 灰。点検の記録に残す |
| 担当が判断 | unclear、not_judgeable | 白。班長が録音を聞いて決める |
JSON にさせる理由は3つあります。 1つ目は、振り分けをスクリプトの基準の表で行えることです。班長と相談して基準を変えても、Gemini への指示は変わりません。
2つ目は、start と end で聞く時刻を示せることです。画面の録音の再生の位置をその時刻に合わせ、基準の録音も同じ時刻から並べて再生できます。 3つ目は、vs_base と vs_prev を分けて持てることです。基準と違うのに前回とは同じなら、少しずつ変わってきた音です。前回とだけ違うなら、急に出た音か、録り方の違いです。
システムへ連携する
| つなぎ先 | 方式 | 内容 |
|---|---|---|
| 担当のスマートフォン | Apps Script のウェブアプリを開く | 札の読み込み、録音の送信、条件の選択、結果の画面 |
| Google ドライブ | 読み取りと書き込み | 今回の録音の保存、前回と基準の録音の取り出し |
| 点検の記録 | 読み取りと書き込み | 既知の音を引き、確定した内容を足す |
| Gemini API | API呼び出し(/v1beta/interactions、store=false) | 変わった音の候補と録音の質の問題 |
| 班長と保全の当番 | チャットの通知 | 赤の候補の点・時刻・録音のリンク |
| 保全台帳 | 書き込み | 確定した内容のうち、修理や様子見にしたもの |
保全台帳に足すのは、班長か当番が「確定」にしたものだけです。 Gemini の候補をそのまま足すと、風の音や隣の機械の音が修理の記録に残ります。 台帳に載るのは、人が現場で聞いて確かめたものだけにします。
設備の制御や生産の計画のシステムには、つなぎません。 候補から設備を止める操作は作りません。止めるかどうかは、班長が現場で決め、今の手順で生産の担当に伝えます。
人が確認する
- 赤の候補を聞く … 班長か当番が、通知の録音を該当の時刻から聞き、基準の録音の同じあたりと聞き比べます
- 現場で聞いて測る … 設備の前の録音位置で聞き、必要なら携帯の振動計を当てて値を記録します
- 扱いを決める … 様子を見る、次の停止のときに調べる、すぐに止めて調べるかを決め、記録に理由を書きます
- 白の候補を決める … 班長が録音を聞いて、どの振り分けにするかを決めます
- 基準の録音を更新する … 修理や部品の交換のあと、班長が新しい基準を選びます
2番目を省かないでください。 録音で聞こえたことは、現場で聞いて初めて確かめたことになります。 録音だけで扱いを決めると、録り方の違いを設備の変化と取り違えます。
若手の担当も、1番目と2番目に立ち会います。 班長が赤の候補を聞きに行くとき、その日の巡回の担当が一緒に行き、どの音を違うと聞いたかを横で聞きます。 録音と時刻と班長の判断が記録に並ぶので、班長の耳を引き継ぐ材料が、毎日少しずつたまります。
例外に対処する
| 起きること | 対応 |
|---|---|
| 同じ条件の前回が無い | 基準だけと比べ、「前回の比較なし」と記録する |
| 基準の録音が無い(新しい設備・部品を替えた直後) | 比べずに録音を残し、班長が基準を選ぶまで「基準なし」とする |
| 風や隣の機械の音で比べられない | 「次の巡回で録り直す」。録る時刻を変えるか、録音位置を見直す |
| 録音に会話が入った | 録り直し、会話の入った録音は保存せずに消す |
| リクエストが20MBを超える | 録音のアプリの品質を下げて録り直す。長さは30秒のまま |
| Gemini が応答しない・実行が6分を超える | 録音を残したまま画面に失敗を出し、担当が今の手順で聞いて点検表に付ける |
| 時刻が録音の長さを外れる | 候補ごと「次の巡回で録り直す」に回す |
| 巡回の途中で明らかな異常音・異臭・煙 | 写真や録音を待たず、今の緊急の手順で止めて知らせる |
上の3行が大半を占めます。 どれも Gemini の問題ではなく、録る位置と条件と基準の問題です。 録音位置の印と、基準の録音の選び直しを整えるほうが、指示を直すより効きます。
明らかな異常は、この仕組みの外で扱います。 大きな打音、焦げたにおい、煙、漏れ。録って送り、結果を待つ間に設備が壊れます。 巡回の画面の最初に「明らかな異常は録らずに緊急の手順へ」と出しておきます。
記録を残す
- 録音と、録った日時・担当・点の番号・運転の条件
- 比べた前回と基準の録音の保存先と、それぞれの日付
- Gemini が返した JSON の全文
- 振り分けの結果と、班長・当番が確定した内容(現場で聞いた結果、振動計の値、扱いの理由)
- 通知を出した日時と、聞きに行った日時
- 基準の録音を更新した日と理由(修理・部品の交換)
- そのとき使った点検基準の表の版
4つ目の「現場で聞いた結果」と、録音の時刻が並ぶことが、この記録のいちばんの価値です。 「0:12のコツコツを班長が聞いて、カップリングのがたつきと判断し、次の停止で締め直した」。この並びが、若手が班長の判断を後から追える教材になります。
04実装レベルの3段階
本記事の想定は半自動化です。 録音から点検の記録への書き込みと、赤の候補の通知までがつながり、班長と当番は通知の時刻を聞いて現場で確かめるだけになります。 最小構成では件数がさばけません。 1点ずつ録音を3本貼るので、1日30点には使えません。確かめるための段階です。 本格構成は、点検の記録が数か月たまってからにします。 どの点の音が少しずつ変わってきたかは、記録が並んで初めて見えます。
05工数削減シミュレーション
導入後 600件 × 2分 ÷ 60 = 20 時間/月
自社条件で導入効果を整理したい方へ
このユースケースを自社に当てはめた場合の前提値と削減見込みを、業務ヒアリングをもとに整理します。
06向いている企業・向いていない企業
- ポンプ・送風機・コンベヤ・減速機などの回転する設備を数十台以上持ち、保全の担当が毎日の巡回で音を聞いて点検している工場や物流センター。異音に気づけるのが経験の長い担当に偏っていて、若手は「前と違うか」が分からない場合。巡回の点検表に「異音なし」の丸が並ぶだけで、前回の音と比べた記録が残っていない場合。設備ごとに録音の位置を決めて、印を付けられる場合。
- 振動計や状態監視のセンサーで、すでに設備ごとの振動の値を取って傾向を見ている場合(この構成はそれを置き換えません)。耳で聞こえない高い音や、わずかな振動の変化で故障の兆しを見たい場合(音は送られたあと低い品質に落とされるため、細かい音の変化は拾えません)。録音に人の会話が入るのを避けられない現場。なお、設備を止めるか動かし続けるか、故障の原因の特定、部品の交換の時期の判断は、この構成では代替できません。
07最小構成で試す方法
- 巡回のルートから、音の変わりやすい設備を10点選ぶ(前に修理した設備、班長が気にしている設備を混ぜる)
- 10点に録音位置の印を貼り、班長が「ふつう」と認める日に基準の録音を録る
- 2週間、毎日の巡回で同じ10点を同じ条件で録る
- Google AI Studio の画面に、基準・前回・今回の録音を貼り、第7章の指示を入れて結果を見る
- 班長が同じ録音を聞いて、変わった音の候補と時刻が合うかを見る
10点を2週間は必ずやってください。 画面とスクリプトを作る前に、「この録音位置と条件で、班長が聞き分ける変化を拾えるか」を確かめます。
| 出てきた内容 | 判断 |
|---|---|
| 班長の聞いた変化と、候補と時刻が合う | 画面とスクリプトの作成に進む |
| 変化は拾えるが、風や隣の機械の音を候補に入れる | 指示の書き方と録音位置で直る。構成は有効 |
| 班長が気づく変化をほとんど拾えない | その設備の音は、この方法に向かない。 振動計やセンサーを先に考える |
3行目が出るのは、失敗ではありません。 第1章のとおり、音は低い品質に落とされます。高い音の細かい変化で気づく設備は、録音の聞き比べより、振動の値で見るほうが向いています。 試した10点のうち、向く設備と向かない設備を分けて、向く設備から広げます。
08実装時につまずきやすいポイント
| 問題 | 対策 |
|---|---|
| 条件の違う録音と比べて違いが出る | 同じ条件の録音だけを比べる相手にする。 条件を選ばないと送れなくする |
| 前回とだけ比べて、少しずつの変化を見逃す | 基準の録音を持ち、vs_base と vs_prev を分けて返させる |
| 風や隣の機械の音を候補に入れる | 質の問題を別の欄に分けさせ、重なる候補は録り直しに回す |
| 細かい高い音の変化を拾えない | 音は 16Kbps に落とされる。 向かない設備は振動計やセンサーで見る |
| 原因や部品の名前を返す | 指示で禁じ、返ってきたら画面で伏せる |
| 候補が無いことを「異常なし」と記録する | 「聞き比べで候補なし」と記録する |
| 部品を替えたあとも古い基準と比べる | 修理・交換のあとに班長が基準を選び直す |
| 録音に会話が入る | 録る間は話さない決まりにし、入ったら録り直して消す |
| 回転する部分に近づいて録る | 安全柵の外の録音位置から録る |
| 明らかな異常の点で録音を待つ | 緊急の手順を先に。画面の最初に出す |
上の2行が、この構成の失敗のほとんどです。 どちらも「何と比べるか」を決めないまま聞き比べさせるところから出発しています。同じ条件と、班長が認めた基準を、比べる相手として決めておくことで、変化を条件の違いと取り違えない設計にします。
09セキュリティ・AIガバナンス上の注意点
この構成で扱うデータ: 設備の運転音の録音、点の番号と運転の条件、点検の記録、保全台帳です。録音には作業者の会話や構内の放送が入りうります。
- 会話を録らない、送らない … 録る間は話さない決まりにし、会話の入った録音は録り直して消します。Gemini にも会話の中身を書き起こさせません
- 18歳以上の担当に限る … Gemini API の規約は、18歳以上であることを利用の条件とし、18歳未満の人に向けた、または使う見込みのあるサービスでの利用を認めていません。巡回の画面のアカウントを配るときに確かめます
- 有料の利用枠で、保存しない設定にする … 規約では、有料のサービスではプロンプトと応答が製品の改善に使われないとされています。無料の枠では人が入出力を読むことがあるとされているので使いません。
store=falseを付けて、やり取りを保存しない動きにします - 設備の安全の判断を任せない … 止めるか動かすかは、班長が現場で聞き、測ってから決めます。候補が出なかったことを、設備に問題が無い根拠にしません。 設備の制御のシステムにはつなぎません
- 録音の位置は安全を確かめて決める … 回転する部分に近づいて録らせません。録音位置は班長が決め、安全柵の外に置きます
- 担当の評価に使わない … 誰の巡回で候補が出たか、出なかったかを、担当の評価の材料にしません。記録は班長の耳を引き継ぐためのものです
誤りが起きた場合のリスクは、変わった音を見逃すことと、変わっていない音で設備を止めることの2つです。 前者は候補が無いことを「異常なし」と扱うと起き、後者は条件の違う録音と比べると起きます。どちらも、比べる相手を決める設計と、現場で聞いて確かめる手順で守ります。
10まず何から始めるか
1週目:10点の録音位置と基準を決める
音の変わりやすい設備から10点を選び、班長が安全を確かめて録音位置の印を貼ります。 班長が「ふつう」と認める日に、点ごと・条件ごとの基準の録音を録ります。
2週目〜3週目:2週間録って試す
毎日の巡回で同じ10点を同じ条件で録り、Google AI Studio の画面で聞き比べさせます。風や隣の機械の音を候補に入れていないか、原因を言い切っていないかを最優先で見ます。
4週目:点検基準の表を決め、向かない設備を分ける
班長と保全の担当で、候補の種類ごとに「記録だけ」「次の巡回で録り直す」「その日のうちに聞きに行く」を決めます。 試した10点のうち、音の聞き比べに向かない設備を分けます。
2か月目: Apps Script で巡回の画面と前回・基準の録音の取り出し、Gemini の呼び出しを作り、この時点では通知を出さず、候補の一覧だけを見ます。 向く設備を数十点に広げます。3か月目以降: 振り分けと通知を足し、1点4分が何分になったかを実測します。若手の巡回の日にも赤の候補が上がり、班長がその時刻を聞いて判断した記録が毎日たまるようになった時点で、この構成は完成です。
11関連ユースケース
12この仕組みを理解するための記事
13技術仕様の確認日・参考情報
| 確認した内容 | 情報源 | 確認日 |
|---|---|---|
| 話し声でない音(鳥の声やサイレンなど)も理解すること。録音の中の位置を MM:SS の形で指せること。対応する形式に WAV・MP3・AAC・FLAC・OGG などがあること。音声が1秒あたり32トークンで数えられ、1回の長さが9.5時間まで、リクエスト全体が20MBまでであること。音声が 16Kbps に落とされ、複数のチャンネルが1つにまとめられること | Google AI Studio: Audio understanding | 2026-11-04 |
構造化出力を /v1beta/interactions の response_format(mime_type に application/json、schema)で指定すること。文字列の enum が使えること。値はアプリ側で検証するよう書かれていること | Google AI Studio: Structured output | 2026-11-04 |
Interactions API が既定でやり取りを保存し(有料の枠で55日、無料の枠で1日)、store=false で保存しない動きにできること | Google AI Studio: Interactions API | 2026-11-04 |
| 利用には18歳以上であることが必要で、18歳未満の人に向けた、または使う見込みのあるサービスでの利用を認めていないこと。有料のサービスではプロンプトと応答が製品の改善に使われないこと。無料のサービスでは人が入出力を読むことがあること | Gemini API Additional Terms of Service | 2026-11-04 |
| Apps Script の1回の実行が6分まで、外部への呼び出しが1回あたり50MBまで、Google Workspace のアカウントで1日100,000回までであること。割り当ては予告なく変わりうること | Google Apps Script: Quotas for Google Services | 2026-11-04 |
設備を止めるか動かし続けるか、故障の原因と部品の交換の時期は、保全の担当が現場で確かめ、必要なら振動の測定をしたうえで判断してください。 本記事は上の公式の情報で確認できた範囲だけを扱っています。
実装ステータス:構成例。 公開仕様に基づいて設計した構成であり、当社で実際に構築・検証したものではありません。工数の数値はモデル条件による試算です。
自社の業務に使えるAI活用候補を整理します
このユースケース(UC-2829)についてのご相談はこちらから。
