AI GOVERNANCE

AI検査の説明責任と監査対応|「なぜ不良と判定したか」を残せる仕組み

AIが「不良」と判定したとき、その理由を後から説明・再現できるでしょうか。品質保証でAI検査を使うほど、監査・顧客対応・不具合流出の局面で「判定根拠を残せているか」が問われるようになってきています。本記事は、その構造と打ち手の選択肢を整理します。

2026-08-10 / 最終更新 2026-08-10 / 監修:嶋野(元キーエンス画像処理事業部 開発エンジニア)/ 読了時間:約13分
01
AIガバナンスや説明責任への社会的要求が高まるなか、外観検査でAI判定を使う場合、「なぜ不良(または良品)と判定したか」を監査・顧客・社内に説明できるかが問われる場面が増えていると考えられます。
02
説明責任の核心は、判定に用いた画像・モデル・しきい値・判定根拠を後から辿れる記録(監査証跡)と、同じ入力で同じ結果が出る再現性にあります。判定の「見える化」は、その一部を担いうる要素の一つと考えられます。
03
まず自社の検査で「何を、どこまで残せているか」を客観的に把握し、現物・現場で判定根拠が説明可能かを検証することが、実効性のある出発点になりうると考えます。
― 目次
  1. なぜ今「説明責任」か
  2. 問われる論点の整理
  3. 監査証跡とは何を残すか
  4. 判定根拠を可視化する考え方
  5. 記録と再現性の設計
  6. 運用での定着
  7. 落とし穴と限界
  8. 次の一歩とロードマップ
― 01 / 背景と課題

AIに判定を委ねるほど、「その判断の理由」を問われるようになる

製造業の外観検査は、人手不足と熟練者の高齢化を背景に、AIによる自動化・省人化が現実的な選択肢になってきました。一方で同じ時期に、社会全体でAIガバナンス——AIの判断が公正か、説明できるか、誰が責任を負うか——への関心が急速に高まっています。国内外でAIの利用に関する指針や枠組みの議論が進んでおり、その具体的な適用範囲や要件は流動的なため、所管省庁・関係機関の最新の公表資料でご確認いただくことをお勧めします。

品質保証の現場に引きつけて言えば、問題はシンプルです。AIが「これは不良です」と判定して製品を弾いたとき、あるいは「良品」として通したものが後で市場不良になったとき、「なぜそう判定したのか」を説明できるかどうか。人が目視で判定していた頃は、検査員の判断基準や限度見本という共有された拠り所がありました。AI判定に置き換わると、その根拠がブラックボックスの内側に隠れてしまいがちです。

「動く」ことと「説明できる」ことは別の要件

AI検査の導入時は、まず「検出できるか」に注意が集まります。しかし運用が始まると、検出性能とは別の軸——監査対応、顧客からの是正要求への回答、社内での責任の所在——で「説明できるか」が効いてきます。動くことと説明できることは別の要件であり、後者を後回しにすると、いざ問われたときに記録が残っておらず立ち往生する、という事態になりうると考えられます。

― 02 / 論点整理

「説明責任」は誰に対する、どんな説明なのかを分解する

説明責任という言葉は広く、そのまま扱うと議論が発散します。実務では「誰に対して」「何を」「いつ」説明する必要があるのかを分解すると、必要な仕組みが具体的に見えてきます。少なくとも三つの相手を想定できると考えられます。

顧客・取引先への説明

納入先から不具合の是正処置報告(いわゆる8D等)を求められたとき、「どの工程の検査で、どういう基準で判定していたか」を提示できる必要があります。AI検査を採用していると、「そのAIはどういう根拠で判定しているのか」まで踏み込んで問われることがあり、単に「AIが良品と判定した」だけでは回答として成立しにくい場面が出てきます。

監査・品質マネジメントへの説明

品質マネジメントシステムの監査では、検査プロセスが手順どおり運用され、記録が残り、変更が管理されているかが確認されます。AI検査の場合、使用したモデルのバージョン、しきい値、更新履歴、判定ログといった要素が「管理された状態にあるか」が論点になりうると考えられます。

社内・責任の所在への説明

見落としや過検出が起きたとき、原因が現物にあったのか、モデルにあったのか、設定にあったのかを切り分けられないと、改善も責任の整理も進みません。AI導入の説明責任を負う管理者にとって、後から検証できる状態を作っておくことは、自らを守る備えでもあります。

― 03 / アプローチ

監査証跡として「何を残すか」——判定を後から辿れる状態

監査証跡(オーディットトレイル)とは、ある判定がどのように行われたかを後から辿れるようにした記録の連なりです。AI検査で説明可能性を確保するうえで、最低限どんな情報を残せると再現・説明の土台になりうるか、実務目線で整理します。ただし、何をどこまで残すべきかは製品リスクや取引先要求によって変わるため、自社にとって必要な粒度は現場で見極める必要があると考えます。

判定の入力:現物の画像そのもの

最も基本的で、しかし抜けやすいのが「判定に使った画像を残しているか」です。良品・不良品どちらの判定でも、そのとき撮影した画像が保存されていれば、後から人が見て判断の妥当性を検証できます。照明条件やカメラ設定が変われば見え方も変わるため、撮影条件をあわせて記録できると、再現性の観点で価値が高まると考えられます。

判定の主体:モデルと設定のバージョン

どのバージョンのモデルが、どのしきい値・パラメータで判定したか。モデルを更新した日時と内容。これらが記録されていれば、「ある時期の判定がなぜその結果だったか」を後から説明できます。逆に、いつの間にかモデルや設定が更新され履歴が残っていないと、過去の判定を再現できず、説明が成り立たなくなりうると考えられます。

判定の出力:結果と根拠

良品/不良の結論だけでなく、「どこを、なぜそう見たか」を示せると、説明の質が変わります。記録が残る検査の考え方は、結果と根拠をセットで残し、監査や顧客対応の局面で参照できる状態を作ることに主眼があります。

― 04 / 設計の考え方

判定根拠を可視化する——「どこを、なぜ」を人が確認できる形にする

説明責任を果たすうえで鍵になるのが、判定根拠の可視化です。AIが「不良」と判定したとき、画像のどの領域に、どんな特徴を捉えて判定したのかを人が確認できると、説明が具体的になります。手法はいくつかあり、それぞれ得意・不得意があるため、目的に応じて使い分ける発想が現実的だと考えられます。

領域を示す:どこを見たかを画像上に重ねる

判定に寄与した領域をヒートマップやマーカーで画像に重ねて示す方法です。人が「確かにこの傷を見ている」と目で確認でき、逆に「関係ない背景に反応している」といった誤りにも気づけます。説明可能なAI検査のように、判定根拠を現場の人が確認できる形にしておくと、検査員の納得感と信頼につながりやすいと考えられます。

言葉で示す:なぜそう見たかを言語化する

VLM(視覚言語モデル)を用いると、「上部に線状の欠けがあり、良品見本と比べて輪郭が不連続」といった形で、判定の理由を言葉で示せる可能性があります。VLM検査の説明性は、根拠を人が読める言語として残せる点で、監査対応や社内共有の文書化と相性がよいと考えられます。ただし言語化された説明が常に正確とは限らず、内容の妥当性は現物と照らして確認する前提が必要です。

重要なのは、可視化はそれ自体が目的ではなく、人が判定の妥当性を確認し、記録として残すための手段だという点です。見た目に説得力のある可視化でも、実際の判定ロジックとずれていることはありえます。可視化と現物検証をセットで運用する姿勢が欠かせないと考えます。

― 05 / 記録と再現性の設計

「同じ入力で同じ結果」を保てるように記録を設計する

説明責任のもう一つの柱が再現性です。同じ画像を入れれば同じ判定が返る、過去のある時点の判定をいつでも再構成できる——この状態が保たれていると、監査や紛争の局面で強い裏付けになります。逆に、モデルや前処理が知らぬ間に変わっていると、過去の判定を再現できず、説明の信頼性が揺らぎうると考えられます。

変更管理:更新の履歴を残す

モデルの再学習、しきい値の調整、照明やカメラ設定の変更は、検査性能を維持するうえで避けられません。だからこそ、いつ・誰が・何を・なぜ変えたかを記録する変更管理が要になります。変更のたびに検証を行い、その結果を残しておけば、「この時期からこの基準に変わった」という説明が可能になります。

保存の設計:どこに、どれだけ残すか

全数の画像とログを長期保存しようとすると、容量とコストが現実的な制約になります。全数を残すのか、不良と判定したものと境界事例を優先して残すのか、保存期間をどう設定するか——製品リスクや取引先要求に応じた設計判断が必要です。ここは「正解が一つ」ではなく、自社の事情に合わせて決める領域だと考えられます。

エッジとクラウドの役割分担

工場のデータを外部に出しにくい、通信が不安定、といった制約は珍しくありません。AI画像検査をエッジ(現場側の機器)で完結させつつ、必要な記録だけを管理された形で残す構成は、機密性と説明責任を両立させる一つの現実解になりうると考えられます。元キーエンス画像処理事業部の現場知見と、VLM・Jetsonエッジ・産業用カメラ・現場ライティングを組み合わせる発想も、この文脈で検討の余地があると考えます。

― 06 / 運用

仕組みを「作る」だけでなく「回し続ける」ための運用

記録と可視化の仕組みは、導入時に整えても運用のなかで形骸化しがちです。ログは残っているが誰も見ていない、可視化は表示されるが判断に使われていない、という状態では、いざ問われたときに機能しません。日々の運用に説明責任の観点を織り込む工夫が要ると考えられます。

境界事例を人が確認する運用

AIが自信を持てない境界事例を人が確認し、その判断を記録に残す運用は、説明責任と品質の両面で意味を持ちます。検査AIの説明性を現場運用に落とし込む際は、可視化された根拠を検査員がどう使うか、その判断をどう記録するかまで含めて設計すると、仕組みが定着しやすいと考えられます。

記録を「使う」機会を作る

月次の品質会議で過検出・見逃し事例の判定ログを振り返る、顧客監査の前に記録の抜けを点検する——といった「記録を使う機会」を定例化すると、記録が生きた資産になります。使われない記録は劣化し、使われる記録は精度を増していく、という循環を作れるかが分かれ目だと考えます。

― 07 / 落とし穴

正直に押さえておきたい限界と、やってみないと分からない部分

説明責任のための仕組みは万能ではありません。過度な期待や設計の抜けが、かえって信頼を損なうこともあります。事前に知っておくと判断を誤りにくい落とし穴を、正直に挙げます。

― 08 / ロードマップ

客観的な把握と現物検証から始める、無理のない進め方

説明責任と監査対応の仕組みは、一度に完成させる必要はありません。むしろ、自社の現状を客観的に把握し、優先度の高いところから段階的に整えていく方が、実効性のある形に落ち着きやすいと考えられます。

第一歩:いま何を、どこまで残せているかの棚卸し

まず、現在の検査で判定に使う画像・モデル情報・判定ログのうち、何がどこまで残っているかを棚卸しします。「良品判定の画像は残していなかった」「モデルの更新履歴が曖昧」といった空白が見えるだけでも、次に何を整えるべきかが具体的になります。

第二歩:代表工程での小さな検証

リスクの高い、あるいは監査で問われやすい代表工程を一つ選び、判定根拠の可視化と記録を小さく試します。実際の現物で「この根拠なら顧客・監査に説明できるか」を確かめてから、他工程へ広げる。この順序が、手戻りとコストを抑える現実的な進め方になりうると考えます。

第三歩:運用に織り込み、継続的に見直す

仕組みを日々の運用と定例の振り返りに織り込み、制度・取引先要求の変化にあわせて見直していく。完璧を最初から目指すより、回しながら育てる姿勢が、説明責任という終わりのないテーマには適していると考えられます。判定根拠の可視化と記録は、その営みを支える手段の一つとして位置づけられると考えます。

― 関連

関連記事・関連ソリューション

― FAQ

よくある質問

AI検査で「なぜ不良と判定したか」を説明するには何が必要ですか?

判定に使った画像、使用したモデルのバージョンとしきい値、判定結果、そして「どこを・なぜそう見たか」を示す根拠が、後から辿れる形で残っていることが土台になると考えられます。可視化された根拠は説明を具体化しますが、それが正しいかは現物と照らして確認する前提が必要です。何をどこまで残すかは製品リスクや取引先要求で変わるため、自社に必要な粒度を現場で見極めることをお勧めします。

監査対応のために、判定画像は全数保存すべきですか?

全数・長期保存は説明責任の観点では理想的ですが、容量とコストが現実的な制約になります。不良と判定したものや境界事例を優先して残す、保存期間を製品リスクに応じて設定する、といった割り切りが現実解になりうると考えられます。どこまで残すべきかは業界の要求や取引先の要件にも左右されるため、必要に応じて所管の基準や取引先の要求事項をご確認ください。

AIガバナンスの規制に、外観検査も対応が必要ですか?

AIの利用に関する指針や枠組みの議論は国内外で進んでおり、対象範囲や要件は流動的です。外観検査への具体的な適用可否や求められる水準は一律ではないため、断定はできません。所管省庁・関係機関の最新の公表資料でご確認いただくのが確実です。そのうえで、判定根拠を説明・記録できる状態を整えておくことは、要求の変化に備える意味で有効になりうると考えられます。

判定根拠の可視化があれば、説明責任は果たせますか?

可視化は説明を具体化する有力な手段ですが、それだけで十分とは言い切れません。可視化された根拠が実際の判定ロジックと一致している保証はなく、現物との照合が欠かせません。また、監査や顧客対応では画像・モデル情報・変更履歴・判定ログといった記録の連なりも問われます。可視化と記録・再現性を組み合わせ、運用で使い続けられて初めて実効性が生まれると考えられます。

工場のデータを外部に出せませんが、記録は残せますか?

データを外部に出しにくい制約は珍しくありません。判定処理をエッジ(現場側の機器)で完結させつつ、必要な記録だけを管理された形で現場やオンプレミスに残す構成は、機密性と説明責任を両立させる一つの現実的な選択肢になりうると考えられます。ただし現場の通信環境・容量・運用体制によって最適な形は変わるため、現物・現場での検証を経て設計することをお勧めします。

― REVIEWED BY
嶋野(元キーエンス画像処理事業部 開発エンジニア)
キーエンス画像処理事業部での実務経験をもとに、産業用カメラ・照明・光学系・検査装置の開発に従事し、現在はNsightの技術コンテンツ監修を担当。プロフィール詳細 →

自社のAI検査、「なぜそう判定したか」を残せていますか?

説明責任と監査対応の仕組みは、現状の棚卸しと代表工程での小さな検証から無理なく始められると考えます。元キーエンス画像処理事業部の現場知見をもとに、判定根拠の可視化と記録が自社の現物・現場で成り立つか、まずは一緒に確かめてみませんか。

AI検査の説明責任について相談する