自動検査機の評価について悩んでいます

画像を2値化して検査する自動外観検査と推測しましたが、
結局は顧客が納得すればOKかと。
人の目の外観検査を自動外観検査に変える話と想定して、
自分なら2~3日の評価で導入可否を検討し、
かつ、導入後の妥当性確認として1週間～1か月間は従来の外観検査も継続、
その結果をもって顧客に自動外観検査の申請。
申請OK後、初期流動管理として1か月間は従来の外観検査もダブルチェックで残す。
といった感じでしょうか。顧客によって各期間は変わりますし、
100%判定が可能とした根拠が完璧であれば2~3日の確認でもいいでしょう。

簡単に言えば「顧客が了承すればOK」です。

というか、
OKサンプルとNGサンプルの画像は、どうやって何個を作成したの？
そして、その評価関数をどう評価したのでしょう？
ディープラーニング等で自動学習させるなら数万個単位で必要ですが。
(検査対象が３Dならもっと複雑な工程が必要ですし）

「流出0%　過剰検出10%以下」って数値目標出してくるだけ？
何点の検査なの？　２次元なの３次元なの？　全然情報なしですね
既存事例の、どれを適用すべきか全く判らないですよ。

>同数で2～3日間程度でと考えております。
そんな短期間でいいの？
以前に納入した現場は
１０００個／日の全数検査ラインで約３か月だったけど？
まぁ、ワークの重要度と単価にも拠るでしょうけれど

２００個／日しかないラインで自動化するって？
まぁそれなりに高価なワークなんでしょうか
少なくとも百均商品じゃあ無い事は想像できるけど

そもそも自動検査機を導入する前はどーしてたんですか？

１、全くの新作ワークなので以前の参考資料等は有りません
２、従来は検査員によるノギスの寸法検査と目視検査
３、従来も自動検査装置でしたが客先設備であり詳細不明

今更ですが
御社は自動検査機のユーザー側でしょうか？
それとも設備納入業者でしょうか？
その辺りの事情によっては回答も変わって来るし