先日、AI顧問サービスを3ヶ月使ってきた経営者から相談を受けた。「成果が出ているのかどうか、正直よく分からない」という内容だった。
詳しく話を聞くと、ミーティングは毎月きちんとあり、担当者も真剣に動いている。特定の業務でAIを試したという記録もある。それでも「何かが変わったかどうか分からない」という感覚が残っている。
話を整理していくうちに、問題の本質は顧問の質でも、自社の取り組み姿勢でもないと分かった。「何をもって成果とするか」を最初に決めていないことが原因だった。
僕は業務効率化に特化したエンジニアとして、自社（株式会社ラズリ）をAI組織で運営しながら、複数の中小企業のAI活用支援に関わっている。その経験から言うと、こういう状況は珍しくない。AI顧問と契約してから「思っていたより変わっていない」という感覚を持つ経営者の多くが、成果の測り方を決めていなかったケースだ。
この記事では、AI顧問の成果を正しく測る方法と、どの時点で何を確認すべきかを整理する。
測り方を最初に決めていない会社がほとんど
AI顧問サービスを契約する時、多くの経営者は「業務が楽になればいい」「AIを活用できるようになりたい」という感覚ベースの目標を持っている。これ自体は問題ではない。ただ、その感覚を「測れる形」に変換しないまま進むと、3ヶ月後に困る。
測定基準が曖昧なまま進むと、二つの問題が起きる。
一つ目は、継続か解約かの判断ができなくなること。費用をかけて何も変わっていないなら解約すべきだが、「変わったかどうか分からない」では判断の根拠がない。結局、ぼんやりとした不安を抱えたまま更新を繰り返すか、「なんとなく効いていない気がする」で解約するかのどちらかになりやすい。
二つ目は、顧問側も迷子になること。AI顧問は毎月の支援で「何を目指すか」が明確でないと、提案の方向性が定まらない。「何でも使えるようにしましょう」という指針のない提案が続くのは、ゴールが設定されていないからだ。
測定基準は契約時に決めておくのが理想だが、既に動き始めている場合でも遅くない。今から設定すればいい。
最初の指標は「定着した業務の数」にする
測定指標として「月に削減した作業時間」を思い浮かべる経営者は多い。数字が明確で、費用対効果の計算にも使えそうに見える。ただ、最初の指標としてこれを追うのは難しい理由が二つある。
理由1：削減量を正確に把握するための計測コストが高い
AIを使う前の作業時間と、使った後の作業時間を比較するには、導入前から正確な記録が必要だ。「以前はこの業務に週3時間かかっていた」という数字を、現場の担当者が日常業務の中で正確に把握しているケースは少ない。記録していなければ、後から「たぶんこのくらい」という推測になり、説得力がない。
理由2：AIを「使った実績」と「業務が楽になった感覚」の間にタイムラグがある
AIツールを使い始めた直後は、操作に慣れる時間が余分にかかる。やり方を覚えて確認して、従来の手順と比べながら進める。この期間に「時間が減ったか」を測定しても、正確な評価にならない。慣れた後に比較しないと、過小評価になりやすい。
では最初に何を追うか。答えは「定着した業務の数」だ。
ここでいう「定着」とは、その業務がルーティンの中に組み込まれている状態を指す。「一度試してみた」「顧問がいる時だけやる」では定着ではない。顧問が関与していない日常の業務の中で、担当者が当然のこととして使っている状態が定着だ。
3ヶ月後に確認すべき問いはシンプルだ。「AIを使った業務が、日常のルーティンとして1つでも根付いているか」。
1つでも根付いていれば、その顧問との取り組みは最低限の前進をしている。0つであれば、何が詰まっているかを顧問と確認する必要がある。
「でも1つの業務が定着しただけで、費用に見合っているか分からない」
これは正しい疑問だ。ただ、確認する順序がある。
定着業務が0の段階で費用対効果を問っても、判断の材料がない。まず「何か1つが動き始めているか」を確認し、それが確認できた後で「その1つがどれくらいの負荷を減らしているか」を測ればいい。順序を入れ替えると、成果が出ていないのか、測れていないのかの区別ができなくなる。
次に確認する定性的な変化
定着業務の数を確認したら、次は定性的な変化を見る。数字には表れにくいが、組織にAIが根付いてきているかどうかを示すサインがある。
サイン1：社内で「AIで書いてみた」という会話が出ているか
AI顧問との取り組みが機能してくると、現場の担当者の口から「あれ、AIで下書きしてみたんですけど」「この前のプロンプトを応用してみました」という話が自然に出るようになる。経営者がミーティング以外の場面でそういう声を聞いたことがあるかどうかは、定着度の参考になる。
逆に、顧問とのミーティング以外では完全に話題に出ないという状況は、取り組みが「顧問の時間限定のイベント」になっている可能性がある。
サイン2：「次にこの業務もAIで試したい」という話が現場から出ているか
最初に取り組む業務は、顧問が選ぶか、経営者が「これを改善したい」と指定するかのどちらかが多い。ここから3ヶ月経った時に、現場の担当者から「次はこの業務もやってみたい」という声が出てきているなら、主体性が生まれている。
これは数値化しにくいが、「仕組みが社内に根付こうとしている」兆候として重要だ。声が全く出ていない場合は、担当者の理解度や関心度を確認した方がいい。
サイン3：担当者が顧問なしで基本的な対処ができるようになってきているか
AI顧問のゴールの一つは、社内に自走できる状態を作ることだ。半年以上経って、担当者が「顧問がいないと何も分からない」という状態のままなら、知識の移転がうまく機能していない。「顧問に聞けばいい」から「自分でまず試してみる」に移行してきているかどうかを確認する。
3ヶ月・6ヶ月・1年の確認チェックリスト
成果を測るタイミングも重要だ。「何となく毎月ミーティングを振り返る」ではなく、3ヶ月単位で確認する項目を決めておくと判断しやすくなる。
3ヶ月後に確認すること
- 日常業務の中にAIを使う業務が1つ以上定着しているか
- 担当者が顧問との会話の内容を自分の言葉で説明できるか
- 「次にやりたい業務」が担当者から出ているか
3ヶ月はまだ成果が数字に出にくい時期だ。ここでは「動いているか」の確認をする。定着業務が0であれば、原因（担当者の関与度、顧問との頻度、選んだ業務の難易度）を確認する。
6ヶ月後に確認すること
- 2つ目の業務への展開が始まっているか
- 最初に定着した業務について、担当者が自分でトラブル対処できているか
- 顧問から「次のフェーズ」の提案が出ているか
6ヶ月経っても最初の1つの業務から広がっていない場合は、展開できない理由を顧問と確認する。「まだ最初の業務を定着させている段階」という説明なら妥当性を判断できるし、「次に何をするか決まっていない」なら方向の見直しが必要だ。
1年後に確認すること
- 契約時に「解決したい」と思っていた課題が、解決に向かっているか
- AI活用が社内の複数の担当者・業務に広がっているか
- 「AIがない状態に戻りたいか」という問いに対して、担当者がどう答えるか
1年後は、継続か解約かを判断する自然なタイミングだ。この段階で「費用をかけた分の変化があったか」を評価できる状態になる。それまでの3ヶ月・6ヶ月の確認が積み重なっていれば、判断材料が揃っている。
「成果が出ていない」と「成果が測れていない」は別問題
AI顧問に対して「効果がなかった」と判断する前に、区別しておくべきことがある。
「成果が出ていない」と「成果が測れていない」は別だ。
「成果が出ていない」は、取り組みを実施した結果として何も変わっていない状態を指す。「成果が測れていない」は、取り組みは進んでいるが、測定の仕組みがないために変化が見えない状態だ。
この二つを区別する方法がある。「AIを使った実績が全くない業務がほとんどか」を確認することだ。
使った実績がゼロなら、それは成果がゼロの状態だ。顧問側と依頼側のどちらに問題があるかはともかく、変化は起きていない。
一方、使っている実績はあるが「何が変わったかよく分からない」という状態なら、それは測れていないだけで、何かは動いている可能性がある。この場合は測定の仕組みを整えることで見えてくる。
顧問の力量を確認する問いにもなる
「今どの段階ですか。3ヶ月経ちましたが、何が定着していて、次に何をしますか」という問いを、顧問に直接投げてみてほしい。
この問いに明確に答えられる顧問は、現状を把握して進行を管理できている。「えーと、いくつか試してきましたが…」という曖昧な回答が返ってくる場合は、進捗の管理が甘い可能性がある。
この問いは成果確認と同時に、顧問の力量を見る機会にもなる。問いを投げることを遠慮する必要はない。それが顧問との仕事の進め方だと、僕は思っている。
まとめ
AI顧問の成果を測るうえで、押さえておくべきポイントを整理する。
- 測定基準は「感覚」ではなく、最初から決めておく。後から設定しても遅くない
- 最初の指標は「時間削減量」ではなく「定着した業務の数」にする。1つ定着しているかどうかが3ヶ月後の基本確認だ
- 定量指標と並行して、社内の会話や担当者の自立度という定性的な変化も見る
- 「成果が出ていない」と「成果が測れていない」は別問題。区別した上で対処する
成果の測り方を整えておくことは、顧問との取り組みを長期間無駄なく進めるための基本だ。測れない取り組みは、判断できない取り組みになる。