産業廃棄物の処理業者が、搬入のトラックの荷台の写真を Gemini で見て、廃棄物の種類の候補と契約の品目に無いものの混入の疑いを分類し、受入の担当の確認に回す
計量台に入った搬入のトラックの荷台を上から撮り、Gemini で荷の表面に見える物の区分と位置を返させます。処理の側でその区分を処分の委託契約の品目と照らし、契約に無い品目の混入が疑われる車を、荷を降ろす前に受入の担当に知らせます。
- 生成AI
- ChatGPT/Claude/Gemini
- 連携・自動化
- Google Apps Script/Python
- 対象業界
- その他/建設/物流/製造
- 対象部門
- 品質管理/営業
- 対象業務
- 内容確認・チェック/分類・仕分け
- 主な課題
- 人手が足りない/判断に時間がかかる/確認ミスが多い
- AIで行う処理
- 分類
- 主な効果
- 入力漏れ削減/判断支援/工数削減
- 導入難易度
- ★★★★☆
- 実装レベル
- 本格構成
- 費用感
- API連携(中)
- 人間の確認
- 条件付き
01導入前 / 導入後の業務フロー
- 搬入のトラックが計量台に乗り、計量の担当が車番と搬入の予定を確かめる
- 受入課の担当が窓口の上から荷台を見て、見えた物をメモする
- 搬入の予定から排出事業者を引き、契約の台帳とマニフェストの品目を見る
- 見えた物と契約の品目を照らし、気になる物があれば荷降ろしの場所に無線で伝える
- 受入の記録に、見た結果と伝えたことを書く
- 荷降ろしの場所で荷を広げ、混入が見つかれば営業が排出事業者に連絡する
- 人搬入のトラックが計量台に乗り、計量の担当が車番と搬入の予定を確かめる
- 自動計量の確定をきっかけに、計量台の上の固定のカメラが荷台を上と後ろから撮る
- 自動処理が写真と計量の番号を受け取り、搬入の予定から排出事業者と契約の品目を引く
- 自動写真と見え方の区分の語彙を Gemini API に渡し、見える物の区分と位置、受入の基準に当たる物の疑い、見えない部分を返させる
- 自動処理の側で、見え方の区分を自社の対応表で種類の候補に読み替え、契約の品目と照らす
- 自動「確認あり」「見えた部分が少ない」「印なし」の3つに分け、荷降ろしの場所のタブレットに出す
- 人受入の担当が、「確認あり」の車の荷を降ろすときに、印の位置を見て確かめる
- 人受け入れるか、保留にするかを受入の担当が決め、契約に無い品目なら営業が排出事業者に連絡する
各工程の詳しい説明を読む
- 搬入のトラックが計量台に乗り、計量の担当が車番と搬入の予定を確かめる
- 受入課の担当が窓口の上から荷台を見て、見えた物をメモする
- 搬入の予定から排出事業者を引き、契約の台帳とマニフェストの品目を見る
- 見えた物と契約の品目を照らし、気になる物があれば荷降ろしの場所に無線で伝える
- 受入の記録に、見た結果と伝えたことを書く
- 荷降ろしの場所で荷を広げ、混入が見つかれば営業が排出事業者に連絡する
(a)1台ごとに台帳を引いて照らす時間が無い。 朝の集中の時間には、計量台の前に車が並びます。台帳を引いている間に後ろの車が詰まるので、3番と4番が省かれます。
(b)担当によって拾う物が違う。 ベテランの担当は荷の端に見える電池やボンベに気づきますが、経験の浅い担当は大きな物しか見ません。同じ荷でも、誰が窓口にいたかで荷降ろしの場所への連絡が変わります。
(c)混入に気づくのが荷を広げた後。 荷を広げてから見つかると、選別に手間がかかり、運搬の車が帰った後の連絡になります。荷降ろしの前に分かっていれば、運転手にその場で確かめられた話です。
(d)見えなかった荷が、見た荷として記録される。 シートで覆われた荷や高く積まれた荷は、窓口から下が見えません。それでも受入の記録には「異常なし」と書かれます。 後で混入が見つかったとき、記録からは見落としたのか、見えなかったのかが分かりません。
- 【人】 搬入のトラックが計量台に乗り、計量の担当が車番と搬入の予定を確かめる
- 【自動】 計量の確定をきっかけに、計量台の上の固定のカメラが荷台を上と後ろから撮る
- 【自動】 処理が写真と計量の番号を受け取り、搬入の予定から排出事業者と契約の品目を引く
- 【自動】 写真と見え方の区分の語彙を Gemini API に渡し、見える物の区分と位置、受入の基準に当たる物の疑い、見えない部分を返させる
- 【自動】 処理の側で、見え方の区分を自社の対応表で種類の候補に読み替え、契約の品目と照らす
- 【自動】 「確認あり」「見えた部分が少ない」「印なし」の3つに分け、荷降ろしの場所のタブレットに出す
- 【人】 受入の担当が、「確認あり」の車の荷を降ろすときに、印の位置を見て確かめる
- 【人】 受け入れるか、保留にするかを受入の担当が決め、契約に無い品目なら営業が排出事業者に連絡する
7番目が、この設計の分かれ目です。 受入の担当は、計量台で荷を見て台帳を引く代わりに、荷降ろしの場所で、印の付いた車の印の付いた位置を見ます。 写真の四角を見ながら重機で広げる場所を決められます。
6番目で「見えた部分が少ない」を別にするのも、意図してのことです。 印が無いことと、見て問題が無かったことを、記録の上でも分けます。 第3章の(d)は、ここで止めます。
02今回想定するシステム構成
搬入のトラック │ 計量台で計量 ▼【トリガー】計量の確定 → 固定のカメラが上と後ろから撮る Python(受け取り・照らし合わせ・記録) ├── 搬入の予定(計量の番号 → 排出事業者、マニフェストの種類) ├── 処分の委託契約の台帳(排出事業者ごとの品目) ├── 見え方の区分 → 種類の候補の対応表、受入の基準の一覧 ▼ Gemini API(画像の理解+構造化出力) │ 見え方の区分と位置、受入の基準の疑い、見えた割合と見えない理由 ▼ Python ── 契約の品目と照らす → 確認あり/見えた部分が少ない/印なし ▼ 【荷降ろしの場所のタブレット → 受入の担当が確かめる → 営業が連絡】
| 役割 | 想定する製品 | 代替候補 |
|---|---|---|
| 処理 | Gemini API(荷の表面に見える物の区分と位置、受入の基準の疑い、見えない部分) | Claude API、OpenAI API |
| 連携 | Python(写真の受け取り、台帳の照らし合わせ、タブレットへの表示、記録) | Google Apps Script |
| 計量 | 自社の計量のシステムと固定のカメラ | - |
| 台帳 | 処分の委託契約の台帳、搬入の予定の表 | - |
土台は Gemini API の画像の理解です。 公式の説明では、Gemini は画像の説明、分類、質問への回答、物体の検出に使え、物体の検出では位置を box_2d で返します。 box_2d は [ymin, xmin, ymax, xmax] の形で、画像の大きさに対して0〜1000に正規化した座標で返り、元の画像の大きさに直して使います。 この位置を荷降ろしの場所のタブレットに四角で描きます。
写真は依頼の中に直接入れて渡します。 公式の説明では、画像を直接入れる場合は依頼全体の大きさが20MBまでで、1回の依頼に入れられる画像は3,600枚までです。上からと後ろからの2枚を1回の依頼にまとめて渡します。 計量台のカメラの写真は1枚あたり数MBに収まります。
小さな物を見分けるには、解像度の設定が効きます。 公式の説明では、media_resolution で画像1枚あたりに割り当てるトークンの上限を決め、高くすると細かい部分が見やすくなる一方で、トークンと待ち時間が増えます。 電池やスプレー缶のような小さな物を拾いたいので、上からの写真は高めにします。
Gemini の返事は判断の材料で、判断ではありません。 Gemini API の規約は、法律などの専門的な助言として頼らないよう求めています。廃棄物の種類の区分も、受け入れの可否も、受入の担当と営業が決めます。
03どうやって実装するのか
処理の起点を決める
計量のシステムで1回目の計量(荷を積んだ重さ)が確定したことを起点にします。 確定と同時に、計量台の上の固定のカメラが荷台を上から1枚、後ろから1枚撮り、写真のファイル名に計量の番号を付けて受け取りのフォルダに置きます。 計量のシステムからカメラへの合図が出せない場合は、処理の側がフォルダを数秒おきに見に行きます。
結果は、トラックが荷降ろしの場所に着く前に出します。 計量台から荷降ろしの場所までは1〜2分です。写真を受け取ってから1分ほどで、荷降ろしの場所のタブレットに結果を出すことを目標にします。 そのため、依頼は1台ずつ、写真を受け取ったらすぐに送ります。
2回目の計量(空の重さ)では撮りません。 撮るのは荷を積んだ状態だけです。同じ車が1日に何度も来るので、計量の番号で1回ごとを分けます。
入力データを集める
| データ | 中身 | 取得元 |
|---|---|---|
| 荷台の写真 | 上から1枚、後ろから1枚。JPEG。撮った日時 | 計量台の固定のカメラ |
| 計量の情報 | 計量の番号、車番、運搬の業者、搬入の予定の番号 | 計量のシステム |
| 搬入の予定 | 排出事業者、マニフェストに書かれた種類、予定の数量 | 搬入の予定の表 |
| 契約の品目 | 排出事業者ごとの処分の委託契約の品目と数量、契約の期間 | 処分の委託契約の台帳 |
| 見え方の区分の語彙 | コンクリート片のように見える、木材のように見える、プラスチックのように見える、金属のように見える、紙・段ボールのように見える、布のように見える、混ざって見分けられない など | 自社で用意する語彙 |
| 受入の基準の一覧 | 施設で受け入れない物(ボンベ、消火器、電池、蛍光管、スプレー缶など)と、その見え方の説明 | 自社の受入の基準 |
| 対応表 | 見え方の区分ごとに、当たりうる種類の候補 | 自社で用意する表 |
Gemini に渡すのは、写真と見え方の区分の語彙と受入の基準の一覧だけです。 排出事業者の名前も契約の品目も渡しません。見え方の判断を、契約の中身から切り離しておくためです。
見え方の区分の語彙は、法令の種類の名前にしません。 「木くず」ではなく「木材のように見える」と書きます。政令は木くずを、建設業の工作物の新築・改築・除去に伴うものや、木材・木製品の製造業に係るものなどに限って産業廃棄物としています。写真から分かるのは見え方までで、どの業種のどの工程から出たかは写真に写りません。 その読み替えは、マニフェストと契約を持つ処理の側で行います。
質を決めるのは、受入の基準の一覧の見え方の説明です。 「ボンベ:円筒形で、片方の端に口金がある金属の容器」のように、受入の担当が窓口で見分けている手がかりを書いておきます。 説明が無いと、丸い金属の物をすべてボンベの疑いにしてしまいます。
データの取得方法を決める
写真は、受け取りのフォルダからファイル名の計量の番号で拾います。 計量の番号から、計量のシステムの書き出しを引いて車番と搬入の予定の番号を取り、搬入の予定の表から排出事業者とマニフェストに書かれた種類を引きます。
契約の品目は、処分の委託契約の台帳から排出事業者で引きます。 台帳には品目ごとに契約の期間を持たせ、搬入の日が契約の期間の中にあるものだけを使います。 期間の切れた契約の品目で照らすと、契約に無い品目を見逃します。
Gemini API には、Interactions API で依頼します。 公式の説明では、client.interactions.create の input に文の部品と画像の部品("type": "image"、data、mime_type)を並べます。画像1枚と文を組み合わせるときは、文を画像の前に置くよう書かれています。 2枚を渡すこの構成でも、公式の2枚の例と同じく文を先に置き、上からの写真、後ろからの写真の順に並べます。
依頼には store=false を付けます。 公式の説明では、Interactions API は既定でやり取りを保存し、有料の枠で55日、無料の枠で1日保持されます。store=false を付ければ保存されません。 1台ごとに完結する依頼なので、前のやり取りを引き継ぐ必要もありません。
AIへ渡す前に整形する
- 計量の番号を確かめる … ファイル名の計量の番号が計量のシステムにあるか
- 写真の枚数と向きを確かめる … 上からと後ろからの2枚がそろっているか、向きが正しいか
- 明るさを確かめる … 夜間や逆光で暗すぎる写真に印を付ける
- 荷台の外を切り落とす … 運転席や周りの地面を落とし、荷台の部分だけにする
- 契約の品目を引く … 搬入の日に有効な契約の品目を、処理の側で用意しておく
- 語彙と一覧の版を付ける … そのとき使った語彙、受入の基準の一覧、対応表の版を記録に残す
4番目は、運転手の顔とナンバーを渡さないためです。 上からのカメラには運転席の屋根や窓が、後ろからのカメラにはナンバーが写ります。荷台の部分だけに切り落としてから渡せば、人と車を特定できる部分が外に出ません。 車番は計量のシステムの側で持っています。
3番目で暗い写真を外すのは、公式の勧めにも沿っています。 公式の説明では、ぶれていない、はっきりした画像を使うよう書かれています。暗い写真で uncertain が並ぶと、受入の担当は印を信用しなくなります。 暗い写真は「見えた部分が少ない」として扱い、照明を直す材料にします。
AIに処理させる
させるのは、荷の表面に見える物を見え方の区分で分け、位置を返し、受入の基準の一覧に当たる物の疑いと、見えない部分を返すことだけです。
| 見るもの | 見方 | 判断できないときの扱い |
|---|---|---|
| 見える物の区分 | 語彙の区分ごとに、荷の表面のおおよその割合と位置 | 混ざって見分けられなければ「混ざって見分けられない」 |
| 受入の基準の疑い | 一覧の説明に近い物の位置と、どの写真か | 小さい・一部しか見えなければ uncertain |
| 見えた割合 | 荷台のうち荷の表面が見えた割合を、多い・半分ほど・少ないで | 判断できなければ「少ない」 |
| 見えない理由 | シート、高積み、暗さ、雨滴、ほこり | 理由を挙げる |
| 写真の外の物 | 荷台からはみ出た物、荷台の外に落ちた物 | 対象の外として印だけ |
右から2列目の「見えた割合」が、この構成で大事な欄です。 シートで覆われた荷の写真で、Gemini が何も挙げなかったとしても、それは「混入が無い」ではなく「見えなかった」です。 見えた割合が少ない車は、印が無くても「見えた部分が少ない」に分けます。
契約との照らし合わせは、処理の側で行います。 Gemini が返した見え方の区分を、対応表で種類の候補に読み替え、契約の品目に無い候補があれば「確認あり」にします。 対応表は1つの区分に複数の候補を持てるようにしておき、どれか1つでも契約にあれば疑いにしない、のように規則で決めます。
| させないこと | 理由 |
|---|---|
| 廃棄物の種類(法令の名前)を決めること | 出てきた業種や工程で変わり、写真に写らない |
| 受け入れるか、持ち帰りかを決めること | 受入の担当と営業が決める |
| 有害な物質を含むかを判定すること | 見た目では決まらない。分析と書類で確かめる |
| 契約の品目と照らすこと | 処理の側で規則で行う。見え方を契約に寄せない |
| 運転手や運搬の業者に触れること | 目的の外 |
| 見えない部分を推し量って埋めること | 「見えなかった」を記録に残す |
3行目は、とくに守らせます。 古い建材のように見える物があっても、有害な物質を含むかは見た目では決まりません。 受入の基準の一覧に「古い建材のような板状の物」を入れて疑いとして拾うことはできますが、含むかどうかを Gemini に書かせることはしません。
指示内容を固定する
あなたは産業廃棄物の処理施設の受入の窓口で、
搬入のトラックの荷台の写真から、荷の表面に見える物を書き出す立場です。
【渡すもの】
- 写真1:荷台を上から撮ったもの
- 写真2:荷台を後ろから撮ったもの
- 見え方の区分の語彙と、それぞれの見え方の説明:{visual_classes}
- 受入の基準の一覧と、それぞれの見え方の説明:{reject_list}
【やること】
1. 荷の表面に見える物を、見え方の区分の語彙で分けてください。
区分ごとに、表面のおおよその割合(多い・少し・わずか)と、
位置を box_2d([ymin, xmin, ymax, xmax]、0〜1000)で返してください。
2. 受入の基準の一覧の説明に近い物があれば、名前と位置と写真の番号を
返してください。小さい、一部しか見えない物は uncertain にしてください。
3. 荷台のうち荷の表面が見えた割合を、多い・半分ほど・少ないで返してください。
4. 見えない部分があれば、その理由(シート、高積み、暗さ、雨滴、ほこり)を
返してください。
【厳守事項】
- 法令上の廃棄物の種類の名前を書かないでください。語彙の区分だけを使ってください。
- 受け入れてよいか、持ち帰るべきかを書かないでください。
- 有害な物質を含むかどうかを書かないでください。
- 見えない部分にある物を推し量らないでください。
- 運転手、車、ナンバーについて何も書かないでください。
- 何も見つからなかったときに「問題なし」と書かないでください。
「何も見つからなかったときに『問題なし』と書かない」を明記しないと、疑いが無い写真に安心させる一文を足してきます。 その一文が受入の記録に写されると、第3章の(d)の「異常なし」と同じことが、今度は機械の言葉で起きます。
「法令上の種類の名前を書かない」も同じ理由です。 Gemini に「木くず」と書かせると、受入の担当はそれを種類の判断として読みます。 見え方の言葉と法令の言葉を、出力の段階で混ぜないようにします。
出力形式を固定する
次の形のJSONで受け取ります。
{
"weighing_id": "",
"visible_classes": [
{ "class": "", "share": "large | some | trace",
"photo": "top | rear", "box_2d": [0, 0, 0, 0] }
],
"reject_suspects": [
{ "item": "", "photo": "top | rear", "box_2d": [0, 0, 0, 0],
"certainty": "visible | uncertain" }
],
"visible_coverage": "most | half | little",
"hidden_reasons": ["sheet | piled_high | dark | raindrops | dust"],
"outside_cargo": [ { "photo": "top | rear", "box_2d": [0, 0, 0, 0] } ]
}
構造化出力は response_format で指定します。 公式の説明では、type を text、mime_type を application/json にして、schema に JSON Schema を渡します。class は見え方の区分の語彙を、item は受入の基準の一覧の名前を enum にして渡します。 語彙に無い言葉、とくに法令の種類の名前が返らないようにするためです。box_2d は整数の配列にし、minimum を0、maximum を1000にします。公式の説明では、数値の minimum/maximum と配列の minItems/maxItems は守られ、文字列の minLength/maxLength は外されます。
公式は、構文として正しい JSON でも値は自分の側で確かめるよう書いています。 処理の側では、box_2d の上下・左右の順が正しいか、visible_coverage が little なのに visible_classes の割合が「多い」ばかりになっていないかを確かめます。食い違いがあれば「確認あり」に寄せて、受入の担当に回します。
処理の側で照らした結果は、たとえば次のようにタブレットに出します。
【確認あり】計量 0315-042/運搬 ○○運輸/排出 △△建設(解体)
契約の品目:がれき類、木くず、金属くず
見えた割合:多い
・プラスチックのように見える(少し)→ 種類の候補:廃プラスチック類 … 契約に無い
・受入の基準:スプレー缶のような物(上からの写真の右手前・見分けにくい)
荷降ろしで見てほしい場所:写真の四角を参照
「契約に無い」は、処理の側の照らし合わせで付けた印です。 Gemini の返事には入っていません。受入の担当は、どちらの段階の印かを見分けられます。
システムへ連携する
| つなぎ先 | 方式 | 内容 |
|---|---|---|
| 計量のシステム | 書き出しを読む | 計量の番号、車番、運搬の業者、搬入の予定の番号 |
| 受け取りのフォルダ | 処理が見に行く | 上からと後ろからの写真 |
| 搬入の予定の表・契約の台帳 | 読み取り | 排出事業者、マニフェストの種類、有効な契約の品目 |
| Gemini API | API呼び出し | 見え方の区分と位置、受入の基準の疑い、見えた割合 |
| 荷降ろしの場所のタブレット | 処理が書き込む | 3つの分け方、四角を描いた写真、契約に無い候補 |
| 受入の記録 | 受入の担当の確定の後に書き込む | 確かめた結果、受け入れか保留か |
計量のシステムと契約の台帳には書き込みません。 処理が書くのはタブレットの表示と記録の下書きだけで、受入の記録の確定は受入の担当が行います。 排出事業者や運搬の業者に自動で連絡することもしません。
人が確認する
「確認あり」の車は、受入の担当が荷降ろしのときに必ず見ます。 タブレットの写真の四角を見て、重機で広げる場所を決めます。
- 受入の基準の疑いを先に見る … ボンベや電池のような物の疑いは、破砕の工程に入る前に取り除くかを決めます
- 契約に無い候補を見る … 荷を広げて、本当に契約に無い品目かを確かめます
- 「見えた部分が少ない」の車を見る … 印が無くても、荷を広げたときに表面以外を見ます
- 受け入れか保留かを決める … 保留にした車は、営業が排出事業者と運搬の業者に連絡します
- 結果を記録する … 印が当たっていたか、印の無い場所に混入があったかを残します
5番目を省かないでください。 印が無かった車で混入が見つかった記録が、この仕組みの見落としの率そのものです。 記録が無いと、仕組みが拾えていないのか、混入が無いのかが分かりません。
目標は、1,200台をならして1台1分です。 計量台で荷を見て台帳を引く時間が、印を見て確かめて記録する時間に置き換わります。
例外に対処する
| 起きること | 対応 |
|---|---|
| 写真が1枚しか撮れていない | 撮れた写真だけで処理し、「見えた部分が少ない」に寄せる |
| 夜間・逆光で暗い | 「見えた部分が少ない」に分け、照明を直す材料にする |
| 荷がシートで覆われたまま | 「見えた部分が少ない」。運転手にシートを外す場所を案内する |
| 搬入の予定が引けない | 照らし合わせをせず「確認あり」にして、窓口で予定を確かめる |
| 有効な契約が台帳に無い | 「確認あり」にし、営業が契約を確かめる |
| 対応表に無い区分が返る | 「確認あり」に寄せ、対応表の見直しの材料にする |
box_2d の値の順がおかしい | 四角を描かず、写真全体を見るよう案内する |
| 応答が1分を超える | 結果を待たずに荷降ろしに進め、届いた結果を後から付ける |
| Gemini が応答しない | 「判定なし」としてタブレットに出し、従来どおり窓口で見る |
上から3行目までが大半を占めます。 どれもAIの問題ではなく、カメラの位置と照明、シートの扱いの問題です。 計量台の手前にシートを外す場所を作るほうが、判定の精度を上げるより効きます。
最後の行で「判定なし」を出すのは、止まったことを見えるようにするためです。 結果が出ないまま荷降ろしが進むと、受入の担当は印が無いものと読みます。
記録を残す
- 計量の番号、撮った日時、写真(荷台の部分に切り落としたもの)
- Gemini が返した JSON の全文と、そのとき使った語彙・受入の基準の一覧・対応表の版
- 処理の側の照らし合わせの結果と、そのとき使った契約の品目
- 受入の担当が確かめた結果(印が当たったか、印の無い場所に混入があったか)と、受け入れか保留か
- 保留にした車への営業の対応と、持ち帰りか追加の契約か
3行目で「そのときの契約の品目」を残すのは、契約が後から変わるためです。 追加の契約を結ぶと、過去の「契約に無い」の印の意味が変わります。 当時の品目が残っていないと、見直しの範囲が決まりません。
04実装レベルの3段階
最小構成では台数がさばけません。 1台ずつ上げるので、月1,200台には使えません。確かめるための段階です。 半自動化で、1台4分が2分程度になります。 見え方の書き出しは自動になりますが、契約の台帳を引いて照らす作業が窓口に残ります。本格構成で1分になり、この段階が本記事の想定です。 差が大きいのは、契約の品目との照らし合わせが、1台ごとの台帳の手引きだからです。 段階を飛ばさないでください。 半自動化の結果を1か月見ると、対応表に無い区分と、印の当たらない受入の基準の項目が先に分かります。そこを語彙と一覧の説明に戻してから、契約との照らし合わせに進むほうが、「確認あり」の空振りが減ります。
05工数削減シミュレーション
導入後 1,200件 × 1分 ÷ 60 = 20 時間/月
自社条件で導入効果を整理したい方へ
このユースケースを自社に当てはめた場合の前提値と削減見込みを、業務ヒアリングをもとに整理します。
06向いている企業・向いていない企業
- 多くの排出事業者と収集運搬の業者から、がれき類・木くず・廃プラスチック類・金属くずなどの混ざった荷を受け入れている産業廃棄物の中間処理の業者。計量台で荷を見て契約の品目と照らす作業が窓口の担当に偏り、混入に気づくのが荷を降ろして広げた後になる場合。計量台に荷台を上から撮れるカメラを付けられ、搬入の予定と処分の委託契約の品目を表で持てる場合。
- 搬入の車が1日に数台で、窓口の担当が荷を見て足りる場合。密閉した容器やタンク、ドラム缶で受け入れる廃棄物が中心で、写真に中身が写らない場合。特別管理産業廃棄物を中心に扱い、分析の結果で受け入れを決めている場合。なお、廃棄物の種類の法的な区分、受け入れるか持ち帰ってもらうかの判断、有害な物質を含むかの判定は、この構成では代替できません。
07最小構成で試す方法
- 先月の搬入の写真から30台分を選ぶ(うち数台は、荷を広げた後に混入が見つかった車と、シートで覆われていた車を入れる)
- 30台それぞれについて、荷を広げたときに見つかった物を並べる
- 業務で契約したAIサービスの画面に写真を上げ、見え方の区分の語彙と受入の基準の一覧を貼り付ける
- 「語彙の区分で、荷の表面に見える物を分けてください。受入の基準の一覧に近い物の位置を挙げてください。見えた割合と見えない理由を書いてください。法令の種類の名前や、受け入れの可否は書かないでください」と指示する
- 出てきた結果を、荷を広げたときの記録と見比べる
30台は必ず受入の担当が見比べてください。 確かめたいのは、荷降ろしの前に、見るべき車と場所を絞れるかです。
| 出てきた内容 | 判断 |
|---|---|
| 広げた後に見つかった物の一部が、表面の写真で拾えた | 計量とカメラ、API の仕組みに進む |
| 法令の種類の名前や受け入れの可否を書いた | 指示の書き方と enum で直る。構成は有効 |
| ほとんど「見えた部分が少ない」になる | カメラの位置と照明が先。 AIの問題ではない |
3行目が出ることは珍しくありません。 窓口のカメラが荷台を斜めから撮っていると、荷の手前しか写りません。その場合は、計量台の真上から撮れる位置にカメラを付け直し、同じ時間帯の車で試し直してください。 試しの段階では、無料の枠を使わないでください(第11章)。
08実装時につまずきやすいポイント
| 問題 | 対策 |
|---|---|
| 見えなかった荷を「問題なし」と読む | 見えた割合を返させ、「見えた部分が少ない」を別に分ける |
| 見え方が契約の品目に寄る | 契約の品目を Gemini に渡さず、照らし合わせは処理の側で行う |
| 法令の種類の名前で返る | 見え方の区分を enum にし、法令の名前を禁じる |
| 有害な物質を含むかを書く | 指示で禁じ、疑いの拾い出しだけにする |
| 期間の切れた契約で照らす | 契約の品目に期間を持たせ、搬入の日に有効なものだけを使う |
| 丸い金属の物がすべてボンベの疑いになる | 受入の基準の一覧に見え方の説明を書く |
| 運転手やナンバーが写る | 荷台の部分に切り落としてから渡す |
暗い写真で uncertain が並ぶ | 照明を直し、暗い写真は「見えた部分が少ない」にする |
| 結果が荷降ろしに間に合わない | 1台ずつすぐ送り、遅れたら後から付ける |
| 止まったことに気づかない | 「判定なし」をタブレットに出す |
| やり取りが保存される | store=false を付ける |
| 印の無い車の混入が記録に残らない | 受入の担当が結果を毎回記録する |
上の3行が、この構成の失敗のほとんどです。 どれも「写真から分かることと、分からないことの境目」を越えて書かせてしまう形をしています。見えた割合、契約との分離、見え方の区分の3つで、その境目を出力の形に組み込む設計が、運用に乗るかを決めます。
09セキュリティ・AIガバナンス上の注意点
この構成で扱うデータ: 搬入のトラックの荷台の写真、計量の番号、排出事業者と運搬の業者の名前、契約の品目です。写真には、運転手やナンバー、取引先の現場から出た物が写りえます。
- 渡すのは荷台の部分だけにする … 運転席とナンバーを切り落とし、排出事業者の名前も契約の品目も Gemini に渡しません
- 受け入れの判断を AI に決めさせない … 規約は、法律などの専門的な助言として頼らないよう求めています。種類の区分も受け入れの可否も、受入の担当と営業が決めます
- 有料の枠で使い、
store=falseを付ける … 規約では、有料の枠では入力と応答を製品の改善に使わない一方、禁止の使い方の検出のために一定期間記録するとされています - 「確認あり」を取引先への通知にしない … 印は荷降ろしの前の確認の材料です。排出事業者や運搬の業者への連絡は、荷を確かめた後に営業が行います
- 写真を残す期間を決める … 荷台の写真をいつまで残すかを、受入の記録の保存の決まりと合わせて先に決めます
- 運転手を評価しない … 混入の記録は排出事業者との契約の話で、運転手や運搬の業者の評価には使いません
誤りが起きた場合のリスクは、見えなかった荷の混入を見逃して破砕の工程に入れることと、契約の品目に入っている荷を混入と疑って取引先との関係を損ねることの2つです。 前者は施設の事故につながりえます。見えた割合の欄、契約との分離、受入の担当の確認が、どちらも防ぎます。
10まず何から始めるか
1週目:カメラの位置と照明を決める
計量台の真上から荷台を撮れる位置と、後ろから撮れる位置を決め、夜間と雨の日にも荷の表面が見える照明を用意します。 計量のシステムの確定の合図をカメラに渡せるかも、ここで確かめます。
2週目:30台で試す
先月の写真から30台分を選び、業務で契約したAIサービスで見え方の区分と受入の基準の疑いを出させます。受入の担当が、荷を広げた後の記録と見比べ、見えなかった荷を「問題なし」と書いていないかを最優先で見ます。
3週目:語彙と一覧と対応表を作る
見え方の区分の語彙、受入の基準の一覧の見え方の説明、区分から種類の候補への対応表を、受入課と営業で作ります。 契約の台帳に品目ごとの期間の列を足します。
4週目:計量から窓口の画面までをつなぐ
計量の確定、撮影、写真の受け取り、Gemini API の呼び出し、結果を窓口の画面に出すところまで作ります。この時点では契約との照らし合わせをせず、見え方の区分と受入の基準の疑いだけを窓口の担当が見ます。
2か月目: 契約の台帳との照らし合わせと3つの分け方を足し、荷降ろしの場所のタブレットに出します。印が当たった数と、印の無い車の混入の数を毎週数えます。3か月目以降: 1台4分が何分になったかを実測し、対応表と一覧の説明を直します。印の無い車の混入が週に数えるほどになった時点で、この構成は完成です。
11関連ユースケース
12この仕組みを理解するための記事
13技術仕様の確認日・参考情報
| 確認した内容 | 情報源 | 確認日 |
|---|---|---|
画像の説明・分類・質問への回答・物体の検出に使えること。物体の検出の box_2d が [ymin, xmin, ymax, xmax] で0〜1000に正規化され、元の大きさに直して使うこと。画像を直接入れる場合は依頼全体が20MBまでであること。1回の依頼の画像が3,600枚までであること。input に "type": "image" の部品(data・mime_type)を並べる例。画像1枚と文では文を画像の前に置くこと。2枚の例で文が先にあること。はっきりした画像を使う勧め。384ピクセル以下は258トークン、大きい画像は768×768のタイルごとに258トークン。media_resolution が画像1枚あたりのトークンの上限を決め、高いと細部が見やすくなる一方でトークンと待ち時間が増えること | Google AI Studio: Image understanding | 2026-11-17 |
構造化出力を response_format(type を text、mime_type を application/json、schema)で指定すること。enum が使えること。数値の minimum/maximum と配列の minItems/maxItems は守られ、minLength/maxLength は外されること。構文として正しい JSON でも値はアプリ側で確かめるよう求めていること | Google AI Studio: Structured output | 2026-11-17 |
Interactions API が既定でやり取りを保存し(有料55日、無料1日)、store=false で保存しない動きにできること | Google AI Studio: Interactions API | 2026-11-17 |
| 無料の枠では入力と応答が製品の改善に使われ人が読むことがあり、個人の情報や機密の情報を送らないよう求めていること。有料の枠では改善に使わず、禁止の使い方の検出のために一定期間記録すること。法律などの専門的な助言として頼らないよう求めていること | Google AI Studio: Gemini API Additional Terms of Service | 2026-11-17 |
| 政令第2条が、木くず・紙くずなどを、建設業の工作物の新築・改築・除去に伴うものや特定の製造業に係るものなどに限って産業廃棄物とすること。第6条の2第4号が、処分などの委託契約を書面で行い、委託する産業廃棄物の種類及び数量などの条項を含めることを定めること(令和8年9月16日施行の版) | e-Gov 法令API: 廃棄物の処理及び清掃に関する法律施行令 | 2026-11-17 |
廃棄物の種類の区分、受け入れるか持ち帰りかの判断、有害な物質を含むかの確認は、受入の担当と営業、必要に応じて行政と専門家に確かめてください。 本記事は荷台の写真から、荷降ろしの前に確かめる車と場所の候補を絞るまでを扱っています。
実装ステータス:構成例。 公開仕様に基づいて設計した構成であり、当社で実際に構築・検証したものではありません。工数の数値はモデル条件による試算です。
自社の業務に使えるAI活用候補を整理します
このユースケース(UC-3446)についてのご相談はこちらから。
