AIエージェント・ストラテジスト › Web参考書 › 第5章

人材評価と指標の再設計:アウトカム指標、KGI・KPI・OKR、職務定義書、リスキリング

第5章 人と組織から考えるAI時代の組織設計 / 節 3

シラバスのキーワード: アウトカム指標アウトプット指標KGIKPIOKRフェーズ職務定義書リスキリングアップスキリング

本文を読んだあと、覚えているか確認してください。

「毎日100人が使っています」は成功か

AI を導入して3か月。「毎日100人が使っている」「1日200件処理している」と報告が上がります。良さそうに聞こえますが、この数字だけでは何も分かりません。100人が使っていても誰の仕事も楽になっていないかもしれないし、200件処理しても半分が差し戻されているかもしれません。

アウトプット指標だけを追うと、数字を達成するために成果に結びつかない使い方が横行し、「使うこと」自体が目的になります。これが形骸化です。導入の本当の目的は「使われること」ではなく「価値を生むこと」なので、中心に据えるのはアウトカム指標です。アウトプット指標は「使われていなければ成果は出ない」という前提を確認する補助指標として使います。

KGI・KPI・OKR

用語 何か 例
KGI(重要目標達成指標) 最終的なゴールの達成度 契約書レビューの平均所要日数を 5 日から 2 日に短縮する
KPI(重要業績評価指標) KGI に向かって正しく進んでいるかを示す中間指標 AI の指摘の採用率 80% 以上、差し戻し率 5% 以下
OKR 定性的な目標(Objective)と、定量的な成果指標(Key Results)のセット O: 法務部門が AI と協働して事業部の契約相談に即日答えられる状態を作る。KR: 標準契約の一次レビュー自動化率 70%、相談から回答までの平均 1 営業日

KGI/KPI は既存業務の改善度を測るのに向き、OKR は「AI 文化を根づかせる」のような探索的・挑戦的な目標に向きます。実務では、初期(Discovery〜PoC)は OKR、本格導入以降は KGI/KPI という使い分けが有効です。初期は何が効くかまだ分からず、方向性と仮説を共有することが大事で、本格導入後は目標が明確なので数値で継続管理します。

KGI か KPI かは「誰にとっての指標か」で変わります。全社で見れば「AI の正答率 95%」は KPI ですが、品質保証部門にとってはそれ自体が部門の最終目標(KGI)になりえます。固定のラベルとして扱わないことが大切です。

KPI 設計の4手順

  1. KGI の合意。 最終ゴールを、数値と期限を含めて経営層と合意する。曖昧なまま走ると、後で「期待していたのはこれじゃない」が起きる。
  2. KPI の選定。 KGI に必要な中間指標を3〜5個選ぶ。アウトカム指標を最低2個含める。活動量だけでは形骸化に気づけない。
  3. 計測の設計。 各 KPI に、目標値・計測方法・頻度・責任者を決める。「差し戻し率 5% 以下」だけでは測れない。「差し戻し率=人が修正した件数 ÷ AI の処理件数。法務チームリーダーが毎週月曜に集計。データは案件管理システムの修正ログ」まで決めて、初めて運用できる KPI になる。
  4. アクションルールの事前設計。 目標を下回ったら何をするかを先に決める。「差し戻し率が 8% を2週連続で超えたら、プロンプトと参照する契約ひな形を見直す」。KPI は「測って終わり」ではなく「測って改善し続ける」仕組みにする。

KPI に映らない価値:ロングテール課題

KPI は経営層との合意形成と進捗の可視化に欠かせません。しかし、KPI だけで AI の価値を捉えようとすると、重要な効果の一部を見落とします。

「この確認、毎回誰がやるか曖昧で時間がかかる」「このデータ、使いたいけど整形に1時間かかる」。現場には、個別には小さくて KPI にするほどでもないが、無数に存在する「名もなき非効率」があります。これがロングテール課題です。従来の業務改善では「コストをかけるほどでもない」と後回しにされ続けました。AIエージェントは個別の設定コストが低く、複数の課題に並行して効くので、このロングテールを一気に解消できる可能性があります。

パソコンの導入を思い出してください。「1台あたりの文書作成速度が何%改善したか」で価値を測った会社はほとんどありません。それでも働き方は根本から変わりました。AI も同じで、「KPI に変化がない=機能していない」とは限らず、「KPI には現れないが現場は確実に変わっている」ことが起こります。KPI を設計すること、そして KPI だけを信じないこと。この2つを同時に持ちます。

職務定義書を書き直す:何ができるかから、何を問えるかへ

AI が定型業務を担うようになると、職務定義書(JD) の中心だったハードスキル(ツールの操作、手順の知識、資格)の位置づけが変わります。ハードスキルは AI が最も得意とする領域で、JD にそれを並べ続けることは「AI が得意なことを人に求める」矛盾になります。

一方、AI が苦手なのがソフトスキル、なかでも「問いを立てる力」です。何を解くべきかを定義する、曖昧な状況から課題の本質を見抜く、選択肢のトレードオフを判断する。AI は「与えられた問いを解く」のは得意ですが、「解くべき問いを見つける」のは人の領域に残ります。

重要性が下がる 重要性が残る・高まる
特定ツールの操作手順、定型フォーマットの作成、情報の検索・収集・整理、マニュアルに沿った遂行 問いの設定力、論理的思考力(前提・根拠・結論の整合性を見抜く)、文脈読解力、関係構築力、倫理的判断力(AI の判断に最終的な是非を下す)

ただし、財務・法務・医療のように専門的な判断や資格が要る領域の知識、AI の出力の妥当性を判断する基盤になるデータサイエンスや統計の知識は、引き続き価値を持ちます。価値が下がりやすいのは、特定のソフトウェアの操作や決まった手順の記憶に依存したスキルです。

JD を書き直しても、評価基準が旧来のままなら、人は評価されない能力の習得を後回しにします。移行期間の確保、評価制度の連動、キャリアパスの提示という組織側の支援が必要です。「変化の先に自分の居場所がある」という見通しを示すことが、不安の解消に最も効きます。

リスキリングとアップスキリング:判別は「職務が変わるか」

契約書レビューの担当者が「条項を一つずつ読んで修正する作業者」から「AI の指摘を監督し、例外案件と相手先との交渉を担う管理者」へ変わるのはリスキリングです。同じ法務部門にいても、職務の中身が根本から変わっているからです。一方、同じ担当者が AI ツールの使い方を覚えて従来のレビューを速くしただけなら、アップスキリングです。「新しいツールを学んだ」だけではリスキリングの理由になりません。決め手は、職務の名前が変わるレベルの変化が起きているかどうかです。

試験で問われる観点

この節の練習問題(4問)

答えを見る前に選んでから開いてください。同じ問題は章別演習でランダム出題されます。

  1. 問1
    コールセンターに導入したAIエージェントについて、「1日あたりの自動応答件数が300件に達した」という報告があった。この指標の位置づけとして最も適切なものはどれか。
    1. 1活動量を測るアウトプット指標であり、応答の誤りで再問い合わせが増えている可能性もあるため、この指標だけでは導入の成功を判断できない
    2. 2価値そのものを測るアウトカム指標であり、自動応答の件数が事前に設定した目標値に達していれば、導入は成功したと判断して展開を広げてよい
    3. 3活動量を測るアウトプット指標ではあるが、応答件数は創出された価値と直結するため、この指標だけで導入の成功を判断して差し支えない
    4. 4価値を測るアウトカム指標であるが、再問い合わせ率や従業員満足度などの活動量指標もあわせて確認しなければ成功は判断できない
    答えと解説

    正解: 1

    処理件数やDAU/MAUのような活動量はアウトプット指標で、利用が定着しているかを確認する補助指標としては有効ですが、活動量が高いこと自体は成果を意味しません。導入の目的は使われることではなく価値を生むことなので、創出された時間、解決された課題数、再問い合わせ率の低減、従業員満足度といったアウトカム指標を中心に据えます。件数だけを追うと、使うこと自体が目的化する形骸化が起きます。

  2. 問2
    物流会社の配送計画AIプロジェクトで設定した次の指標のうち、KGI(重要目標達成指標)として最も適切なものはどれか。
    1. 1AIが1日に生成する配送ルート案の件数を200件以上にするという処理量の指標
    2. 2年間の配送コストを15%削減するという、プロジェクトの最終的な成果目標
    3. 3AIが生成した配送ルート案の採用率を80%以上にするという中間指標
    4. 4配送担当者のAIエージェントの日次利用率を70%以上にするという活動量の指標
    答えと解説

    正解: 2

    KGIはプロジェクトの最終ゴールの達成度を数値と期限で定義した指標で、配送コストの年間削減率がこれにあたります。ルート案の採用率はKGI達成に向けた中間指標であるKPI、利用率や生成件数はアウトプット指標としてのKPIです。KGIかKPIかは「誰にとっての指標か」で変わり、全社ではKPIでも部門にとってはKGIになりうるため、固定的なラベルとして扱わないことも重要です。

  3. 問3
    AIエージェント導入プロジェクトにおけるOKRとKGI/KPIの使い分けとして、最も適切なものはどれか。
    1. 1OKRはObjectiveもKey Resultsも定量的な数値で設定するフレームワークであり、KGI/KPIとの違いは指標の数だけである
    2. 2OKRとKGI/KPIは併用できないため、プロジェクト開始時にどちらか一方を選び、最後まで変更せずに使い続ける
    3. 3何が有効かまだ確定していない初期フェーズでは探索的な目標に向くOKRを用い、導入対象と目標が明確になった本格導入フェーズではKGI/KPIで成果を定量的に管理する
    4. 4KGI/KPIは探索的な目標に向くため初期フェーズで用い、OKRは既存業務の改善度合いを測るのに向くため本格導入フェーズで用いる
    答えと解説

    正解: 3

    OKRは定性的な目標(Objective)と定量的な成果指標(Key Results)をセットで設定するフレームワークで、「AI文化の確立」のような探索的・挑戦的な目標に適します。KGI/KPIは既存業務の改善度合いを測るのに向きます。実務では、試行錯誤で方向性を探る初期フェーズ(Discovery〜PoC)でOKR、対象と目標が明確な本格導入フェーズ(Deployment以降)でKGI/KPIを用いる進め方が有効です。

  4. 問4
    AIエージェント導入後、コールセンターのオペレーターの職務が「問い合わせに直接回答する」から「AIの回答案を監督し、複雑な案件と顧客の感情面の対応を担う」へ変わった。この変化の位置づけとして最も適切なものはどれか。
    1. 1同じコールセンターに所属し続けているため、現在の職務にAIの操作スキルを追加したアップスキリングに該当する
    2. 2新しいツールの操作方法を学んだ点がリスキリングの根拠であり、職務内容の変化は判別に関係しない
    3. 3職務の名称を変更しない限りリスキリングにはならず、名称が同じであればアップスキリングとして扱う
    4. 4職務そのものが「回答の実行者」から「AIの監督と例外対応の担当者」に変わっているため、リスキリングに該当する
    答えと解説

    正解: 4

    リスキリングは従来の職務が代替または変化した場合に新しいスキルを習得して別の職務や役割へ移ること、アップスキリングは現在の職務を継続しながらスキルを追加することです。判別の決め手は職務そのものが変わるかどうかで、同じ部門に所属していても職務内容が根本的に変われば(作業実行者から監督・例外対応者へ)リスキリングです。新しいツールを学んだだけではリスキリングの理由にならず、職務の変化に合わせて職務定義書(JD)と評価制度も見直す必要があります。