生成AI研修を入れたあと、上司から「で、効果はあったの？」と聞かれる。手元にあるのは、研修会社が出してくれた受講後アンケートの集計だけ——。そういう場面に心当たりはないでしょうか。
先に結論を書きます。満足度アンケートは、研修の効果を測る指標ではありません。 あれは「研修の当日がうまく運んだか」を確かめるもので、どちらかといえば研修を提供した側の仕事ぶりを示す数字です。発注した側が知りたい「現場の仕事は変わったのか」には、ほとんど答えてくれません。
測るなら、見るべきは研修のあと、業務の手順が何本書き換わったかです。
※本記事は当社の考え方を整理したものです。研修の効果測定について統計的な調査結果は持っていないため、数字ではなく「何が分かって、何が分からないか」の切り分けを中心に書きます。
研修の効果として報告されやすい指標は、だいたい次の3つです。どれも無意味ではありません。ただ、分かることと分からないことがはっきり分かれます。
| 指標 | 分かること | 分からないこと |
|---|---|---|
| 満足度アンケート | 当日の進行・説明の分かりやすさ・講師への印象 | 職場に戻って何か変わったか |
| 理解度テスト | 研修で扱った内容を、その場で覚えているか | 自分の業務に当てはめられるか |
| ツールの利用率 | アカウントが使われているか、どれくらい触っているか | 何の仕事に使われ、成果物の質がどうなったか |
言えるのは「受講者が嫌な思いをしなかった」ことまでです。
考えてみてください。説明が丁寧で、演習が楽しく、講師の話が面白ければ、満足度は上がります。一方で、翌週の業務手順が一行も変わっていなくても、満足度は下がりません。アンケートを取るのは研修の直後で、その時点では職場に戻ってすらいないからです。
満足度が低い研修は見直すべきです。でも、満足度が高いことは、効果があったことの証拠にはなりません。 ここを混同すると、毎回好評なのに現場が何も変わらない研修を、何年も続けることになります。
理解度テストは、満足度よりは一歩踏み込んでいます。研修で教えた内容が頭に残っているかは分かるからです。
ただ、生成AIの研修で本当に難しいのは「知っているか」ではなく「自分の業務のどこで使うかを決められるか」のほうです。プロンプトの書き方を正しく答えられる人が、自分の提案書づくりに使っているとは限りません。テストで測れるのは知識で、判断は測れないんです。
利用率は数字として分かりやすいので、経営層への報告に使われがちです。ところが、話はそう単純ではありません。
利用率が上がっていても、その中身は「雑談のような質問を試しに投げている」だけかもしれません。逆に、利用回数は少なくても、毎月の報告書づくりの一工程をまるごとAIに置き換えた部署があれば、そちらのほうが業務への影響は大きいはずです。
つまり利用率は「触っているか」は教えてくれても、「仕事が変わったか」は教えてくれません。回数や時間で効果を測ることの落とし穴は、AI化の費用対効果は、削減時間ではなく「外に出せた施策の本数」で測るでも書いています。
当社がおすすめしているのは、研修のあとに書き換わった業務手順の本数を数えることです。
ここでいう「手順」は、大げさなものではありません。
このように、誰がやっても同じやり方で回るように、手順書やチェックリストが書き換わったものを1本と数えます。個人がこっそり便利に使っているものは、数えません。
なぜ手順なのか。研修のあと現場が動かない原因の多くは、受講者のやる気ではなく、戻った先の手順書・承認フロー・締切が研修前のままであることだからです。この点は生成AI研修のあと現場が動かないのは、やる気ではなく「戻った先の手順」が変わっていないからですで詳しく書きました。
手順が書き換わったなら、その変化は担当者が異動しても残ります。逆に、手順が1本も変わっていなければ、研修の効果は受講者の頭の中にしか残っていません。そして頭の中にしか残っていないものは、忙しい月が来ると消えていきます。
本数だけだと、中身の差が見えなくなります。1本ごとに、次の3点を短く書き残しておくと、あとから報告に使えます。
最後の「一周回したか」は大事です。手順書を書き換えることと、その手順で仕事が回ることは別だからです。
測る時期は、研修の前に決めておきます。後から決めると、都合のいいタイミングを選びたくなるからです。
おすすめは、研修の直後ではなく、対象業務のサイクルが一周したあとです。
研修直後に測れるのは、満足度と理解度までです。手順が書き換わったかどうかは、その業務がもう一度巡ってこないと分かりません。
つまり、研修の効果を測る日は「研修の最終日」ではなく「対象業務の次の締め日のあと」に置く、ということです。これを研修の発注と同時に社内のカレンダーに入れておくと、測り忘れがなくなります。
正直に書きます。研修単体の効果を、売上の数字から切り出すのは、ほぼできません。
売上には、季節、景気、商品、価格、営業体制、競合の動きなど、研修とは関係のない要素が大量に効いています。研修をした四半期に売上が伸びても、研修のおかげだとは言えません。下がっても、研修のせいだとは言えません。
ここで「研修によって売上が何割伸びました」という報告を出してくる研修会社があったら、その数字がどうやって切り出されたのかを聞いてみてください。比較対象（研修を受けていない部署や期間）があるのか、ほかの要因をどう除いたのか。答えられないなら、その数字は判断材料には使わないほうが安全です。
当社自身も、研修の売上への寄与を数字で示すことはしていません。示せるのは、手順がどう変わったか、そこから業務の流れがどう変わったか、までです。そこから先は、各社の事業の中でしか判断できないと考えています。
ただし、測れないから意味がないわけではありません。手順が書き換わり、その手順が回っていることは確認できます。 売上は、その先にある結果です。研修の評価は、確認できるところまでで区切るほうが、社内での説明としても誠実です。
最後に、研修を発注する前に聞いておくとよい質問をまとめます。答えの中身だけでなく、答え方を見てください。
「研修の効果は、何で測ることを想定していますか」 満足度アンケートだけを挙げる会社は、当日の運営までを自分の仕事と考えている可能性があります。
「研修のあと、業務の手順を書き換えるところまで支援の範囲に入っていますか」 入っていないなら、それを社内の誰がやるかを先に決めておく必要があります。
「効果を確認するのは、研修のどれくらい後ですか」 研修直後だけで終わる設計か、業務が一周したあとに振り返りの場を設ける設計かで、分かることが変わります。
「売上や利益への効果について、どう説明していますか」 「研修単体では切り出せない」と正直に言える会社のほうが、ほかの説明も信用しやすいはずです。
「対象にする業務を、研修の前に一緒に決めてもらえますか」 どの業務の手順を変えるかが決まっていないと、手順の本数を数えることもできません。研修の期間と到達点の関係は、生成AI研修のカリキュラム例で整理しています。
当社の企業向けAI研修では、研修の前に対象業務を決め、研修のあとに「どの手順が書き換わったか」を一緒に確認するところまでを設計に含めています。満足度アンケートも取りますが、それは当日の運営を改善するための材料として使い、効果の報告には使いません。
研修の効果をどう測るか、社内でどう説明するかから相談したい場合は、企業向けAI研修のページをご覧ください。