AI営業の評価

中小製造業のAI営業PoC。受注を待つ間に何を測り、いつ見直すか

製造業のAI営業PoCでは、有効返信に加えて、加工条件を確認できた案件と人の総作業時間を測ります。2〜4週間で受注が決まらない商材もあるため、営業準備の検証期間と、商談・受注の追跡期間を分けます。開始前に定義と継続条件を決めれば、途中の良い数字だけで評価を変えずに済みます。

先に押さえる3つのこと

AI営業のPoCでは何をKPIにするべきですか?

  1. 返信数に加え、加工条件を確認できた案件を数える。
  2. 分母・観測期間・企業や案件の数え方を揃える。
  3. 確認工数と、継続・修正・中止の条件も測る。
気になる項目から読む5項目

検証したいことを、最初に一文で決める

PoCは本導入の前に実現性を確かめる試験です。「AIで売上が増えるか」だけでは、期間内に何を確認すればよいか決まりません。たとえば「確認済みの加工条件を使って候補を調べ、社内の調査時間を減らしながら、条件の合う相談を作れるか」と分けます。

対象の加工、業種、地域、除外企業、期間、予算、担当者を先に固定します。途中で対象を広げた場合は、変更日と理由を記録し、同じ条件の結果として混ぜません。送信量が増えたから返信が増えたのか、対象を変えたからなのかが分からなくなるためです。

返信から見積検討までを分けて記録する
  1. 有効返信

    資料希望や相談など、前向きな反応を分類する。

  2. 条件の確認

    材質・寸法・数量・納期などを確かめる。

  3. 見積の検討

    自社が対応可能か判断する。受注は別に追う。

返信の次は、加工条件と見積適合を追う

金属加工会社の公開事例では、見積依頼が加工条件に合わず受注に至りませんでした。返信を得た後にも、図面確認、加工可否、見積、試作、品質確認などの工程があります。どこまで進んだら案件として数えるか、自社の流れに合わせて決めます。

表は横にスクロールして確認できます。

指標 定義の例 判断できること
有効送信 宛先不明や配信不能を除いた件数 比較に使う送信の分母
有効返信 事前に決めた資料希望・質問・相談など 次の営業判断ができたか
条件確認済み 材質・寸法・数量など必要項目を確認できた案件 技術者が検討できる状態か
見積対象 自社の確認を経て見積を検討する案件 受けられる仕事との適合
見積提出・受注 定義した段階へ進んだ案件 営業の進捗と結果
人の総作業時間 調査、確認、修正、返信、技術対応の時間 負荷がどこへ移ったか

有効返信率は「有効返信数 ÷ 有効送信数 × 100」と定める例があります。配信停止や自動返信は含めません。一方、送信数を分母にした公表事例と比較するなら、分母の違いを明記します。配信サービスの成功記録も、受信箱で読まれた証明にはなりません。

観測期間と集計単位を揃える

送信から1日しか経っていない対象と、4週間経った対象を、同じ返信率で比較しないでください。送信した週ごとに対象をまとめ、たとえば送信後の同じ日数で集計します。日数は商材に合わせて決め、未経過の対象は途中集計として区別します。

リテールメディア企業の4週間の検証では、途中の有効送信173件で返信6件・商談2件・受注1件でした。終了時は送信203件、有効返信7件、商談2件、成約2件です。期間と分母の名称が異なるため、単純に差し引いて後半だけの率を作るのは避けます。広告配信サービスの一事例であり、製造業の予測値には使えません。

同じ会社から複数の返信が来た場合、企業数、案件数、メール数を分けます。一つの相談のやり取りが増えただけで、有効返信の獲得件数が増えたように見せない集計です。

文面確認と案件対応の時間を分けて測る

従来の作業時間を計測していなければ、削減効果は比較できません。開始前に、対象調査、文面作成、確認、返信、見積前の技術確認を同じ分類で記録します。導入後はAIの修正と運用打ち合わせも含めます。

新しい相談が増えて技術対応の時間が増えた場合、それ自体が失敗とは限りません。調査時間を減らし、受けられる案件への対応に使えたのかを確かめます。逆に、対象外の図面確認が増えていれば、候補と案内条件を見直す材料です。

説明用の例として、確認20件のうち4件で材質の修正が必要なら修正率は20%です。ただし、この割合だけで合否は決まりません。言い回しの修正と、対応できない材質を案内する誤りを別に集計します。重大な誤りを平均値の中に隠さないためです。

継続・修正・中止の判断表

次は当社が提案する判断表です。共通の返信率目標を置くのではなく、自社の確認能力と許容できる誤りから基準を決めます。

表は横にスクロールして確認できます。

判断 状態の例 次の対応
継続 根拠を確認でき、総工数が許容範囲で、適合する相談がある 同じ条件で観測を続ける
修正 返信はあるが寸法や数量が合わない 対象・案内条件・受付時の確認を変更
一時停止 誤った仕様の案内、停止依頼の未反映、送信結果不明 影響範囲を確認し、原因を解消
中止・再設計 必要資料が揃わず、確認負荷を下げる見通しがない 業務範囲や導入方法を変更

2〜4週間は初期検証の目安です。受注を追う期間は別に決め、進行中の案件を失注として扱いません。終了時には、分かったこと、まだ分からないこと、次に変える条件を残します。送信数の計画と合わせると、担当者が対応できる範囲で次の検証を組めます。

対象読者AI営業の短期検証を計画する営業責任者・業務担当者

2〜4週間は検証期間の目安です。商材の検討期間によって、成約まで追う期間は変わります。

根拠・参照資料

製造業とリテールメディアの公開事例を基に、当社が評価方法を提案しています。判断表と計算例は検証設計用で、業界の平均値や成果保証ではありません。

執筆

株式会社CosmoSketchCosmoSketch編集部