鉄スクラップの問屋が、荷降ろしした持ち込みの荷の写真を Gemini で見て、形・寸法・付着物と混入物の疑いを書き出し、検収の担当が等級と減トンを決める前の下見票を作る
検収場の床に降ろした鉄スクラップの荷を撮り、Gemini で形の区分、長すぎる物、付着物と混入物の疑いを返させます。スクリプトが自社の等級表と照らして下見票にまとめ、検収の担当が現物を確かめて等級と減トンを決めます。
- 生成AI
- ChatGPT/Claude/Gemini
- 連携・自動化
- Google Apps Script/Python
- 対象業界
- 商社/建設/製造
- 対象部門
- 品質管理/購買
- 対象業務
- 内容確認・チェック/分類・仕分け
- 主な課題
- 判断に時間がかかる/属人化している/確認ミスが多い
- AIで行う処理
- 画像認識
- 主な効果
- 判断支援/品質標準化/工数削減
- 導入難易度
- ★★★☆☆
- 実装レベル
- 本格構成
- 費用感
- API連携(中)
- 人間の確認
- 条件付き
01導入前 / 導入後の業務フロー
- トラックスケールで量り、持ち込みの予約から申告の等級を確かめる
- 検収場の床に荷を降ろしてもらう
- 検収の担当が山の周りを歩き、形、長さ、付着物、混入物を見てメモする
- 申告の等級と見立てを照らし、等級と減トンの重さを決める
- 運転手に結果を伝え、食い違いがあればその場で説明する
- 取引の記録の表に、等級、減トン、メモを写す
- 人トラックスケールで量り、持ち込みの予約の番号を確かめる
- 人荷を床に降ろしてもらい、検収の担当がタブレットで山を正面と横から1枚ずつ撮る
- 自動写真が予約の番号のフォルダに保存され、Google Apps Script が5分おきに新しい写真を拾う
- 自動写真と見え方の語彙を Gemini API に渡し、形の区分と位置、長く見える物、付着物、混入物、密閉された容器などの疑い、見えない部分を返させる
- 自動スクリプトの側で自社の等級表と照らし、等級の候補の幅、申告との食い違い、減トンの理由の候補、銅の混入の疑いの印を下見票にまとめる
- 人検収の担当が下見票の印の位置を現物で確かめ、厚みと寸法を測り、等級と減トンを決める
- 人運転手に下見票の写真を見せながら説明し、確定した等級と減トンを記録する
各工程の詳しい説明を読む
- トラックスケールで量り、持ち込みの予約から申告の等級を確かめる
- 検収場の床に荷を降ろしてもらう
- 検収の担当が山の周りを歩き、形、長さ、付着物、混入物を見てメモする
- 申告の等級と見立てを照らし、等級と減トンの重さを決める
- 運転手に結果を伝え、食い違いがあればその場で説明する
- 取引の記録の表に、等級、減トン、メモを写す
(a)等級の見立てが、担当によって違う。 薄板と厚板が混ざった山を見て、ある担当は H2、別の担当は H3 にします。同じ持ち込み先の同じような荷で、日によって等級が変わると、持ち込む側は不満を持ちます。
(b)減トンの理由が記録に残らない。 6番目の記録には「減トン 120kg」とだけ書かれ、何を理由に引いたのかが残りません。 後から問い合わせがあると、担当の記憶をたどるしかありません。
(c)見落とすと、後の工程と納め先で困る。 長すぎる物は切断の手間がかかり、密閉された容器やボンベのような物は、中身が分からないまま加工に回すと危険です。 山の裏側や底にある物は、降ろしたままの山では見えません。
(d)銅の混入に気づくかが、担当の注意にかかっている。 鉄の荷に銅線やモーターの巻線が混ざることがあり、銅を主とする金属くずを買い受けるなら、相手方の本人確認と取引の記録が要ります。
- 【人】 トラックスケールで量り、持ち込みの予約の番号を確かめる
- 【人】 荷を床に降ろしてもらい、検収の担当がタブレットで山を正面と横から1枚ずつ撮る
- 【自動】 写真が予約の番号のフォルダに保存され、Google Apps Script が5分おきに新しい写真を拾う
- 【自動】 写真と見え方の語彙を Gemini API に渡し、形の区分と位置、長く見える物、付着物、混入物、密閉された容器などの疑い、見えない部分を返させる
- 【自動】 スクリプトの側で自社の等級表と照らし、等級の候補の幅、申告との食い違い、減トンの理由の候補、銅の混入の疑いの印を下見票にまとめる
- 【人】 検収の担当が下見票の印の位置を現物で確かめ、厚みと寸法を測り、等級と減トンを決める
- 【人】 運転手に下見票の写真を見せながら説明し、確定した等級と減トンを記録する
6番目が、この設計の分かれ目です。 検収の担当は、山の周りを歩いてメモを取る代わりに、下見票の印の位置へ直接行き、測るべき物を測ります。 等級の幅が「H1〜H2」なら、その山の厚板を測れば決まります。
7番目で写真を見せるのは、「どれのことか」の行き違いを減らすためです。 見せるのは、担当が確定した後の写真と理由だけです。
02今回想定するシステム構成
持ち込みのトラック │ トラックスケールで計量 → 検収場の床に荷降ろし ▼【トリガー】タブレットで正面と横の2枚を撮り、予約の番号のフォルダへ保存 Google Apps Script(5分おきに拾う・照らし合わせ・下見票) ├── 持ち込みの予約の表(予約の番号 → 持ち込み先、申告の等級) ├── 自社の等級表(形の区分 → 等級の候補の幅、減トンの目安) ├── 受け入れない物の一覧 ▼ Gemini API(画像の理解+構造化出力) │ 形の区分と位置、長く見える物、付着物、混入物、密閉された容器の疑い、見えない部分 ▼ Google Apps Script ── 等級の幅、申告との食い違い、減トンの理由の候補、銅の印 → 下見票 ▼ 【検収の担当が現物を確かめ、厚みと寸法を測って等級と減トンを決める】
| 役割 | 想定する製品 | 代替候補 |
|---|---|---|
| 処理 | Gemini API(形の区分と位置、長く見える物、付着物と混入物の疑い、見えない部分) | Claude API、OpenAI API |
| 連携 | Google Apps Script(写真の拾い上げ、等級表との照らし合わせ、下見票の作成) | Python |
| 撮影 | 検収の担当のタブレット、床の目盛り | - |
| 台帳 | 持ち込みの予約の表、自社の等級表、取引の記録の表(スプレッドシート) | - |
土台は Gemini API の画像の理解です。 公式の説明では、Gemini は画像の説明、分類、質問への回答に使え、物体の検出で精度を高めていて、位置を画像の大きさに対して0〜1000に正規化した座標で返し、元の大きさに直して使います。 この位置を下見票の写真に四角で描きます。
写真は依頼の中に直接入れて渡します。 公式の説明では、画像を直接入れる場合は依頼全体の大きさが20MBまでで、1回の依頼に入れられる画像は3,600枚までです。正面と横の2枚を1回の依頼にまとめます。 タブレットの写真は1枚あたり数MBに収まります。
つなぎは Google Apps Script にします。 写真は共有のドライブに、予約の表と等級表はスプレッドシートにあるので、同じ場所で動くスクリプトが一番短い道です。 公式の説明では、時間主導のトリガーは最短で1分おきに動かせます。
Gemini の返事は検収の材料で、判断ではありません。 規約は、生成された内容に頼る前に慎重に判断するよう求めています。等級も減トンも、検収の担当が現物で決めます。
03どうやって実装するのか
処理の起点を決める
検収の担当がタブレットで2枚を撮り、予約の番号のフォルダに保存したことを起点にします。 撮影の画面で予約の番号を選んでから撮るようにし、ファイル名にも予約の番号と「正面」「横」を付けます。 Google Apps Script は5分おきに時間主導のトリガーで動き、2枚がそろったフォルダから順に送ります。
撮るのは荷を降ろした直後、重機で広げる前です。 広げた後は荷が動き、四角の位置が現物と合わなくなります。山が大きい荷は、重機で一度崩してから撮り直す手順も用意しておきます。 底にある物を見るためです。
下見票は、撮影から数分で出すことを目標にします。 担当が計量の書類と荷の周りの安全を確かめている間に届けば、印の位置から見始められます。 間隔を5分より短くしても、担当の動きは変わりません。
スクリプトが失敗したときは、公式の説明どおり失敗の要約がメールで届きます。 その通知の宛先を検収課の共有の宛先にしておき、止まったことに担当が気づけるようにします。
入力データを集める
| データ | 中身 | 取得元 |
|---|---|---|
| 荷の写真 | 正面1枚、横1枚。JPEG。床の目盛りが写るもの。撮った日時 | 検収の担当のタブレット |
| 予約の情報 | 予約の番号、持ち込み先、申告の等級、計量の重さ | 持ち込みの予約の表、計量のシステム |
| 見え方の語彙 | 形鋼、厚板、薄板、鋼管、鉄筋、プレスの品、機械の部品、混ざって見分けられない など | 自社で用意する語彙 |
| 付着物と混入物の語彙 | 土、コンクリート、塗料、油、樹脂、木、ゴム、ガラス、非鉄の金属 と、それぞれの見え方の説明 | 自社で用意する語彙 |
| 受け入れない物の一覧 | 密閉された容器、ボンベ、消火器、タンク、中身の分からない筒 と、その見え方の説明 | 自社の受け入れの基準 |
| 自社の等級表 | 形の区分ごとの等級の候補の幅、減トンの目安 | 自社の等級表 |
Gemini に渡すのは、写真と3つの語彙・一覧だけです。 持ち込み先の名前も申告の等級も渡しません。申告を見せると、見え方の判断が申告の等級に寄るからです。 申告との照らし合わせは、スクリプトの側で行います。
質を決めるのは、床の目盛りです。 検収場の床に1mおきの線を引き、写真に必ず線が入るように撮ります。 目盛りがあれば、Gemini は「この形鋼は線3本分より長く見える」と返せます。等級表の長さの上限に照らすのはスクリプトの仕事です。
付着物と混入物の語彙には、検収の担当が見分けている手がかりを書きます。 たとえば「土:鉄の表面より明るい茶色で、つやが無く、塊で付く」「非鉄(銅のように見える):赤茶色から茶色で、細い線の束やコイルの形」です。説明が無いと、さびた鉄をすべて土の付着として返します。
データの取得方法を決める
写真は、予約の番号のフォルダから拾います。 スクリプトは前回に処理したファイルの一覧を持ち、新しく2枚がそろったフォルダだけを送ります。 1枚しか無いフォルダは次の回に回し、15分たっても2枚目が来なければ担当に知らせます。
予約の番号で、持ち込みの予約の表から持ち込み先、申告の等級、計量の重さを引きます。 等級表は、形の区分ごとの等級の候補の幅と減トンの目安を、スプレッドシートの1枚にまとめておきます。スクリプトは毎回その版の番号も一緒に読みます。
Gemini API には、Interactions API で依頼します。 公式の説明では、input に文の部品と画像の部品("type": "image"、data、mime_type)を並べ、REST では x-goog-api-key と Api-Revision のヘッダーを付けた例が示されています。 Google Apps Script からは UrlFetchApp で同じ形の JSON を送ります。文の指示を先に置き、正面、横の順に写真を並べます。
依頼には store=false を付けます。 公式の説明では、Interactions API は既定でやり取りを保存し、有料の枠で55日、無料の枠で1日保持されます。store=false を付ければ保存されません。 1台ごとに完結する依頼なので、前のやり取りを引き継ぐ必要もありません。
AIへ渡す前に整形する
- 予約の番号を確かめる … フォルダの番号が予約の表にあり、計量が済んでいるか
- 2枚がそろっているかを確かめる … 正面と横の両方があるか
- 向きと明るさを確かめる … 横倒しの写真を直し、逆光や夕方の暗い写真に印を付ける
- 人と車を写さない … 写真の端に入った作業員や運転手、ナンバーを塗りつぶす
- 目盛りが写っているかを確かめる … 床の線が見えない写真には、長さの判断をさせない印を付ける
- 語彙と一覧と等級表の版を付ける … そのとき使った版を下見票に書く
4番目は、運転手と作業員を渡さないためです。 検収場の写真には、山の横に立つ人やトラックのナンバーが入りがちです。等級の下見に人は要りません。 塗りつぶしてから渡せば、人と車を特定できる部分が外に出ません。
3番目は公式の勧めにも沿っています。 公式の説明では、向きが正しく、ぶれていない画像を使うよう書かれています。横倒しの写真では、目盛りの向きが変わり長さの判断がずれます。
AIに処理させる
させるのは、荷の表面に見える物を語彙で分けて位置を返し、目盛りより長く見える物、付着物、混入物、受け入れない物の疑いと、見えない部分を返すことだけです。
| 見るもの | 見方 | 判断できないときの扱い |
|---|---|---|
| 形の区分 | 語彙の区分ごとに、山の表面のおおよその割合と位置 | 混ざって見分けられなければ「混ざって見分けられない」 |
| 長く見える物 | 床の目盛りの何本分より長く見えるかと位置 | 目盛りが見えなければ cannot_tell |
| 付着物と混入物 | 語彙の種類ごとの位置と、多い・少し・わずか | 小さい、一部しか見えなければ uncertain |
| 受け入れない物の疑い | 一覧の説明に近い物の位置と、どちらの写真か | 一部しか見えなければ uncertain |
| 見えない部分 | 山の裏、底、高積みで見えない割合と理由 | 理由を挙げる |
右から2列目の「長く見える物」を、目盛りの本数で返させるのが大事な点です。 「長い」「大きい」と言葉で返させると、等級表の上限と照らせません。 目盛りの本数で返させれば、スクリプトが長さの上限と比べ、「切断が要る疑い」の印を付けられます。
等級の幅と減トンの理由は、スクリプトの側で決めます。 形の区分を等級表で引き、たとえば「厚板と形鋼が多い → HS〜H1、厚みを測る」「薄板が多い → H3〜H4、厚みを測る」と幅で書きます。付着物と混入物は、等級表の減トンの目安の項目と結び付けて、理由の候補として並べます。 減らす重さそのものは書きません。
非鉄の金属の疑いのうち、銅のように見える物には別の印を付けます。 2026年6月1日に施行された盗難特定金属製物品の処分の防止等に関する法律は、主として銅などの特定金属でできた金属くずを買い受ける営業に、相手方の本人確認と、本人確認の記録と取引の記録の3年間の保存を求めています。 印が付いたら、検収の担当は銅の部分を分けて扱うかをその場で決め、買い受けるなら確認の手順を踏みます。
| させないこと | 理由 |
|---|---|
| 等級を1つに決めること | 厚みと単重は写真で決まらない。現物を測って決める |
| 減らす重さを書くこと | 検収の担当が付着の程度を見て決める |
| 金属の種類を確定すること | 銅か真鍮か、ステンレスかは磁石や手で確かめる |
| 盗まれた物かどうかを書くこと | 取引の様子などから人が判断する |
| 容器の中身や危険の程度を書くこと | 写真からは分からない。担当が開けずに扱いを決める |
| 見えない部分を推し量って埋めること | 「見えなかった」を記録に残す |
4行目は、とくに守らせます。 銘板の付いた部品や、きれいに切りそろえた銅線が写っていても、それだけで盗まれた物とは言えません。 法律は、取引の様子などから盗まれた物に由来する疑いがあると認めたときに警察官に申告することを求めていますが、その判断は人が行うもので、Gemini の言葉を根拠にしません。
指示内容を固定する
あなたは鉄スクラップの問屋の検収場で、
荷降ろしした持ち込みの荷の写真から、見える物を書き出す立場です。
【渡すもの】
- 写真1:荷の山を正面から撮ったもの
- 写真2:同じ山を横から撮ったもの
- 床には1mおきに線が引かれています
- 形の区分の語彙と見え方の説明:{shape_vocab}
- 付着物と混入物の語彙と見え方の説明:{attach_vocab}
- 受け入れない物の一覧と見え方の説明:{reject_list}
【やること】
1. 山の表面に見える物を、形の区分の語彙で分け、区分ごとに
割合(多い・少し・わずか)と位置を box_2d([ymin, xmin, ymax, xmax]、
0〜1000)で返してください。
2. 床の線の何本分より長く見える物があれば、本数と位置を返してください。
線が見えなければ cannot_tell にしてください。
3. 付着物と混入物の語彙に当たる物の位置と程度を返してください。
4. 受け入れない物の一覧の説明に近い物があれば、名前と位置と写真の番号を
返してください。一部しか見えない物は uncertain にしてください。
5. 山の裏、底、高積みで見えない部分の割合と理由を返してください。
【厳守事項】
- 等級の名前(HS、H1 など)を書かないでください。
- 減らす重さや値段を書かないでください。
- 金属の種類を言い切らず、「銅のように見える」のように見え方で書いてください。
- 盗まれた物かどうか、容器の中身や危険の程度を書かないでください。
- 人、車、ナンバーについて何も書かないでください。
- 何も見つからなかったときに「問題なし」と書かないでください。
「等級の名前を書かない」を明記しないと、「H2 相当と思われます」と書き足してきます。 その一文が下見票に載ると、検収の担当は厚みを測らずに H2 と読みます。 等級の幅はスクリプトが等級表から書き、Gemini の言葉に等級を混ぜません。
「金属の種類を言い切らない」も同じ理由です。 赤茶色の線の束を「銅線」と書かせると、真鍮や被覆の色を見間違えたときにも、銅として確認の手順が動きます。 見え方の言葉で返させ、確かめるのは担当です。
出力形式を固定する
次の形のJSONで受け取ります。
{
"booking_no": "",
"shapes": [
{ "class": "", "share": "large | some | trace",
"photo": "front | side", "box_2d": [0, 0, 0, 0] }
],
"long_items": [
{ "grid_lines": 0, "photo": "front | side", "box_2d": [0, 0, 0, 0],
"certainty": "visible | uncertain | cannot_tell" }
],
"attachments": [
{ "type": "", "amount": "large | some | trace",
"photo": "front | side", "box_2d": [0, 0, 0, 0] }
],
"reject_suspects": [
{ "item": "", "photo": "front | side", "box_2d": [0, 0, 0, 0],
"certainty": "visible | uncertain" }
],
"hidden": { "share": "little | half | much", "reasons": ["back | bottom | piled_high | dark"] }
}
構造化出力は response_format で指定します。 公式の説明では、type を text、mime_type を application/json にして、schema に JSON Schema を渡します。class、type、item は語彙と一覧の名前を enum にします。 等級の名前や「銅線」と言い切る言葉が返らないようにするためです。box_2d は整数の配列にし、minimum を0、maximum を1000にします。公式の説明では、数値の minimum/maximum と配列の minItems/maxItems は守られ、文字列の minLength/maxLength は外されます。
公式は、構文として正しい JSON でも値は自分の側で確かめるよう書いています。 スクリプトでは、box_2d の上下・左右の順と、hidden.share が much なのに shapes の割合が「多い」ばかりになっていないかを確かめ、食い違えば「現物で全体を見る」と下見票に書きます。
スクリプトがまとめた下見票は、たとえば次のようにタブレットに出します。
【下見票】予約 1117-018/申告 H2/計量 6,240kg
等級の候補:H1〜H2(厚板・形鋼が多い)→ 厚板を測る
申告との食い違い:なし(幅の中)
長く見える物:形鋼 線2本分より長い(正面・右奥)→ 切断の要否
付着物:コンクリート(鉄筋・少し)→ 減トンの目安の項目 B-2
受け入れない物の疑い:中身の分からない筒(横・手前下・見分けにくい)
銅の印:あり(銅のように見える線の束・正面・左下)→ 分けるか決める
見えない部分:半分ほど(裏・底) システムへ連携する
| つなぎ先 | 方式 | 内容 |
|---|---|---|
| 共有のドライブ | Google Apps Script が5分おきに見る | 予約の番号のフォルダの正面と横の写真 |
| 持ち込みの予約の表 | スプレッドシートの読み取り | 持ち込み先、申告の等級、計量の重さ |
| 自社の等級表・受け入れない物の一覧 | スプレッドシートの読み取り | 等級の候補の幅、減トンの目安、版の番号 |
| Gemini API | UrlFetchApp での呼び出し | 形の区分、長く見える物、付着物、受け入れない物の疑い、見えない部分 |
| 下見票 | スプレッドシートに書き込み、タブレットで見る | 等級の幅、食い違い、理由の候補、銅の印、四角を描いた写真 |
| 取引の記録の表 | 検収の担当の確定の後に書き込む | 確定した等級、減トン、理由 |
取引の記録の表には、スクリプトは書き込みません。 書くのは下見票だけで、等級と減トンの記録は検収の担当が確定します。 持ち込み先への連絡や値段の計算も、この構成では行いません。
人が確認する
検収の担当は、すべての荷で下見票を見てから現物を確かめます。 下見票だけで等級を決める運用にはしません。
- 受け入れない物の疑いを先に見る … 密閉された容器やボンベのような物は、荷を広げる前に位置を確かめ、扱いを決めます
- 等級の幅の中を測る … 下見票が示す物の厚みと寸法を測り、等級を1つに決めます
- 付着物と混入物を確かめる … 写真の四角の位置を見て、減トンの重さを決めます
- 銅の印を確かめる … 銅を主とする物なら分けて扱うかを決め、買い受けるなら本人確認と取引の記録の手順を踏みます
- 見えない部分を見る … 重機で広げた後に山の底を見て、下見票に無い物があれば書き足します
- 確定した結果を記録する … 等級、減トン、理由と、下見票の印が当たったかを残します
5番目を省かないでください。 下見票の「見えない部分:半分ほど」は、半分を見ていないという意味です。 広げた後の底の確認で見つかった物の記録が、この仕組みの見落としの率になります。
目標は、900台をならして1台2分です。 山の周りを歩いてメモを取る時間が、下見票の印を確かめて記録する時間に置き換わります。
例外に対処する
| 起きること | 対応 |
|---|---|
| 写真が1枚しか届かない | 15分たったら担当に撮り直しを知らせる |
| 床の目盛りが写っていない | 長さの判断を cannot_tell にし、担当が測る |
| 雨や夕方で暗い | 「見えない部分:多い」に寄せ、照明の下で撮り直す |
| 予約の番号が引けない | 照らし合わせをせず、担当が予約を確かめる |
| 申告の等級が等級の幅の外 | 「食い違いあり」とし、担当が測ってから運転手に説明する |
| 語彙に無い物が多く写る | 「混ざって見分けられない」に寄せ、語彙を見直す材料にする |
box_2d の値の順がおかしい | 四角を描かず、写真全体を見るよう書く |
| スクリプトが6分を超える | 1回に送る台数を減らし、残りは次の回に回す |
| Gemini が応答しない | 下見票に「判定なし」と出し、従来どおり担当が山を回る |
8行目の6分は、公式の割り当ての表にある Google Apps Script の1回の実行の上限です。 午前中に写真がたまると送りきれないので、1回に送る台数に上限を決めます。
最後の行で「判定なし」を出すのは、止まったことを見えるようにするためです。 下見票が空のままだと、担当は疑いの無い荷と読みます。
記録を残す
- 予約の番号、撮った日時、2枚の写真(人とナンバーを塗りつぶしたもの)
- Gemini が返した JSON の全文と、そのとき使った語彙・一覧・等級表の版
- スクリプトが書いた下見票(等級の幅、食い違い、理由の候補、銅の印)
- 検収の担当が確定した等級、減トン、理由と、下見票の印が当たったか、底で見つかった物
- 銅を買い受けた場合の本人確認の記録と取引の記録への参照
最後の行の記録は、法律で3年間の保存が求められています。 写真を付ければ、何を銅として買い受けたかを示せます。
04実装レベルの3段階
最小構成では台数がさばけません。 1台ずつ上げるので、月900台には使えません。確かめるための段階です。 半自動化で、1台6分が4分程度になります。 見え方の書き出しは自動になりますが、等級表を引いて幅を考え、理由を書く作業が担当に残ります。本格構成で2分になり、この段階が本記事の想定です。 差が大きいのは、等級表と減トンの目安を引いて照らす作業が、1台ごとの頭の中の手作業だからです。 段階を飛ばさないでください。 半自動化を1か月見ると、見分けにくい付着物と足りない語彙が分かります。語彙を直してから下見票に進みます。
05工数削減シミュレーション
導入後 900件 × 2分 ÷ 60 = 30 時間/月
自社条件で導入効果を整理したい方へ
このユースケースを自社に当てはめた場合の前提値と削減見込みを、業務ヒアリングをもとに整理します。
06向いている企業・向いていない企業
- 解体の業者、建設の会社、中小のヤードからヘビーを中心とした鉄スクラップをトラックで買い受け、検収の場で等級と減トンを決めている問屋。等級の見立てと減トンの理由の書き方が検収の担当ごとに違い、持ち込んだ側との行き違いが起きている場合。荷降ろしの床に目盛りを引き、タブレットで荷を撮れる場合。
- 持ち込みが1日に数台で、検収の担当が荷を見て足りる場合。シュレッダーやプレスの品の受け入れが中心で、決まった仕入れ先から形のそろった品が届く場合。非鉄の金属くずの小口の買取が中心で、品ごとに金属の種類を見分ける必要がある場合。なお、等級と減トンの決定、盗まれた物の疑いの判断、危険な物の取り扱いの判断は、この構成では代替できません。
07最小構成で試す方法
- 先月の持ち込みの写真から30台分を選ぶ(うち数台は、減トンで揉めた荷、申告と等級が違った荷、受け入れない物が見つかった荷を入れる)
- 30台それぞれについて、当時の等級、減トン、その理由を担当から聞き取る
- 業務で契約したAIサービスの画面に写真を上げ、語彙と一覧を貼り付ける
- 「形の区分、床の線より長く見える物、付着物と混入物、受け入れない物の疑い、見えない部分を書いてください。等級の名前、減らす重さ、盗まれた物かどうかは書かないでください」と指示する
- 出てきた結果を、当時の等級と減トンの理由と見比べる
30台は必ず検収の担当が見比べてください。 確かめたいのは、担当が減トンの理由にした物が、写真の印として拾えるかです。
| 出てきた内容 | 判断 |
|---|---|
| 減トンの理由にした物の多くが印になった | タブレットとスクリプトの仕組みに進む |
| 等級の名前や重さを書いた | 指示の書き方と enum で直る。構成は有効 |
| さびをすべて土の付着として返す | 語彙の見え方の説明が先。 AIの問題ではない |
3行目は珍しくありません。 多くの鉄スクラップはさびていて、説明が無ければ茶色の物を区別できません。手がかりを語彙に足し、同じ30台で試し直してください。 試しでも無料の枠は使いません(第11章)。
08実装時につまずきやすいポイント
| 問題 | 対策 |
|---|---|
| 写真で等級を決めてしまう | 等級の名前を書かせず、スクリプトが幅で書く。厚みは測ると決める |
| 見え方が申告の等級に寄る | 申告を Gemini に渡さず、照らし合わせはスクリプトで行う |
| 長さが判断できない | 床に1mおきの線を引き、線が写るように撮る |
| さびを土の付着として返す | 語彙に見分けの手がかりを書く |
| 銅を言い切って確認の手順が誤って動く | 見え方の言葉で返させ、担当が確かめてから手順に入る |
| 盗まれた物かを書く | 指示で禁じる。判断は人が取引の様子から行う |
| 見えない山の底を問題なしと読む | 見えない部分の割合を返させ、広げた後に底を見る |
| 人やナンバーが写る | 塗りつぶしてから渡す |
| 午前中の集中で6分を超える | 1回に送る台数に上限を決める |
| やり取りが保存される | store=false を付ける |
上の2行が、この構成の失敗のほとんどです。 どちらも、写真の見え方と、厚みや申告のような写真に写らないことを混ぜる形です。等級の幅と申告との分離で、その境目を下見票に組み込みます。
09セキュリティ・AIガバナンス上の注意点
この構成で扱うデータ: 荷の写真、予約の番号、持ち込み先の名前、申告の等級、計量の重さです。写真には作業員、運転手、ナンバーが写りえます。
- 渡すのは荷の写真だけにする … 人とナンバーを塗りつぶし、持ち込み先の名前も申告の等級も Gemini に渡しません
- 等級と減トンを AI に決めさせない … 規約は、生成された内容に頼る前に慎重に判断するよう求めています。等級と減トンは検収の担当が現物で決めます
- 盗まれた物の疑いを AI の言葉で扱わない … 警察官への申告の判断は、取引の様子などから人が行います
- 銅の印で本人確認の手順を飛ばさない … 印が無くても、担当が銅を主とする物に気づいたら、法律の確認と記録の手順を踏みます
- 有料の枠で使い、
store=falseを付ける … 規約では、有料の枠では入力と応答を製品の改善に使わない一方、禁止の使い方の検出のために一定期間記録するとされています - 持ち込み先を評価しない … 下見票は説明のための記録で、持ち込み先の順位付けには使いません
誤りが起きた場合のリスクは、見えなかった受け入れない物を加工に回すことと、写真の見え方だけで等級を下げて関係を損ねることの2つです。 見えない部分の欄、等級の幅、担当の測定が、どちらも防ぎます。
10まず何から始めるか
1週目:床の目盛りと撮る位置を決める
検収場の床に1mおきの線を引き、正面と横から山と線が入る位置を決めます。タブレットの撮影の画面で予約の番号を選んでから撮る手順を作ります。
2週目:30台で試す
先月の写真から30台分を選び、業務で契約したAIサービスで見え方と疑いを出させます。担当が当時の減トンの理由と見比べ、さびを付着として返していないかを最優先で見ます。
3週目:等級表と語彙を作り直す
自社の等級表を、形の区分ごとの等級の候補の幅と減トンの目安の表に書き直します。語彙と受け入れない物の一覧に、担当が見分けている手がかりを書きます。
4週目:タブレットからシートまでをつなぐ
写真の保存から Gemini API の呼び出し、結果をシートに出すところまで作ります。この時点では等級表と照らさず、一覧を担当が見回しと見比べます。
2か月目: 等級表との照らし合わせ、申告との食い違い、理由の候補、銅の印を足し、下見票として出します。印が当たった数と、底で見つかった物の数を毎週数えます。3か月目以降: 1台6分が何分になったかを実測し、語彙と等級表を直します。持ち込む側への説明が下見票の写真で済むようになった時点で、この構成は完成です。
11関連ユースケース
12この仕組みを理解するための記事
13技術仕様の確認日・参考情報
| 確認した内容 | 情報源 | 確認日 |
|---|---|---|
画像の説明・分類・質問への回答に使え、物体の検出で精度を高めていること。位置が0〜1000に正規化され元の大きさに直して使うこと。画像を直接入れる場合は依頼全体が20MBまでで、1回の依頼の画像が3,600枚までであること。input に "type": "image" の部品を並べる例と、REST の例の x-goog-api-key・Api-Revision のヘッダー。画像1枚と文では文を先に置くこと。向きを確かめ、はっきりした画像を使う勧め。384ピクセル以下は258トークン、大きい画像は768×768のタイルごとに258トークン | Google AI Studio: Image understanding | 2026-11-17 |
構造化出力を response_format(type を text、mime_type を application/json、schema)で指定すること。enum が使えること。数値の minimum/maximum と配列の minItems/maxItems は守られ、minLength/maxLength は外されること。値はアプリ側で確かめるよう求めていること | Google AI Studio: Structured output | 2026-11-17 |
Interactions API が既定でやり取りを保存し(有料55日、無料1日)、store=false で保存しない動きにできること | Google AI Studio: Interactions API | 2026-11-17 |
| 無料の枠では入力と応答が製品の改善に使われ人が読むことがあり、個人の情報や機密の情報を送らないよう求めていること。有料の枠では改善に使わず、禁止の使い方の検出のために一定期間記録すること。生成された内容に頼る前に慎重に判断するよう求めていること | Google AI Studio: Gemini API Additional Terms of Service | 2026-11-17 |
| 鉄スクラップ検収統一規格(日本鉄源協会、2008年6月改訂)のヘビーが厚み・寸法・単重で HS・H1〜H4 に分かれ、HS と H1 は厚さ6mm以上、H2 は3mm以上6mm未満、H3 は1mm以上3mm未満、H4 は1mm未満であること。H1 の寸法が幅又は高さ500mm以下・長さ1,200mm以下、単重1,000kg以下であること | 日本鉄リサイクル工業会: 製品の種類と検収規格 | 2026-11-17 |
| 特定金属くず買受業を営む者が買受けの相手方の本人確認を行うこと(第7条)、本人確認記録と取引記録を作成し3年間保存すること(第8条・第9条)、盗難特定金属製物品に由来する疑いがあると認めたときに警察官に申告すること(第10条)。令和8年6月1日施行の版 | e-Gov 法令API: 盗難特定金属製物品の処分の防止等に関する法律 | 2026-11-17 |
| 時間主導のトリガーが最短で1分おきに動かせること。トリガーで動いたスクリプトが失敗すると失敗の要約がメールで届くこと | Google Apps Script: Installable triggers | 2026-11-17 |
| スクリプトの1回の実行時間の上限が6分であること | Google Apps Script: Quotas for Google Services | 2026-11-17 |
等級と減トンの決定、受け入れない物の扱い、銅の買受けの確認と記録、盗まれた物の疑いの判断は、検収の担当と会社が、規格と法律に沿って行ってください。 本記事は荷の写真から、検収の前の下見票を作るまでを扱っています。
実装ステータス:構成例。 公開仕様に基づいて設計した構成であり、当社で実際に構築・検証したものではありません。工数の数値はモデル条件による試算です。
自社の業務に使えるAI活用候補を整理します
このユースケース(UC-3524)についてのご相談はこちらから。
