AIコンピテンシー客観尺度（AI Competency Objective Scale: AICOS） — Objective Measurement of AI Literacy: Development and Validation of the AI Competency Objective Scale (AICOS)

田中専務

拓海先生、最近部下に “AIリテラシーを測るべきだ” と言われまして、正直何をどう測れば費用対効果が出るのか見当がつきません。これって要するに何を達成すれば良いということなのでしょうか。

AIメンター拓海

素晴らしい着眼点ですね！大丈夫、一緒に整理すれば必ずできますよ。今回扱う論文は、AIのスキルを「客観的に」測るための尺度を作った研究です。結論から言うと、教育や現場への投資判断で使える実用的なツールを目指しているのです。

田中専務

客観的に測る、ですか。うちでは従業員のスキルをアンケートで取ることはあるが、主観で濁る心配があります。具体的にはどの点が違うのですか。

AIメンター拓海

いい質問ですね。ポイントを三つで整理しますよ。第一に、自己申告のアンケートではなく、実際に解ける問題で能力を測る点です。第二に、従来の尺度の良いところを統合して、生成系AI（Generative AI Literacy; 生成系AIリテラシー）への対応を加えた点です。第三に、短縮版も作って運用性を高めた点です。

田中専務

なるほど、実技で測るのは現場感があって良さそうです。しかし実務で使うとなると、サンプルの代表性や妥当性が気になります。費用はどの程度か想像できますか。

AIメンター拓海

その懸念は的確です。研究は代表性の確保と妥当性検証を重視していますが、実務導入では二つの運用戦略が現実的です。ひとつは社内の代表サンプルで初期評価を行い、結果をもとに教育優先順位を決める方法。もうひとつは短縮版を定期チェックに回して効果測定に用いる方法です。どちらもコストを抑えつつ意思決定に必要なデータを提供できますよ。

田中専務

これって要するに、測れる項目を増やして現場で使える形にしたという話ですか。生成系AIへの対応というのは経営としてどう判断すべきでしょう。

AIメンター拓海

要するにその通りです。生成系AIは、文章や画像を自動生成する能力で現場の仕事の一部を代替したり補助したりします。経営としては三つの観点で判断すべきです。第一に業務プロセスのどの部分が生成系AIで価値向上するか。第二に社員がそのAIを適切に扱えるか。第三に導入の効果を定量化できるか。AICOSはこの二番目と三番目に直接役立つツールです。

田中専務

わかりました。最後に一つ、導入したらどんな指標で成功を判定すれば良いですか。投資対効果が一番知りたいのです。

AIメンター拓海

すばらしい着眼点ですね！成功指標も三つに絞れます。第一、教育前後でAICOSスコアが上がること。第二、AICOS上位層で業務効率や品質の改善が確認できること。第三、短縮版による定期計測で改善が持続すること。これらを組み合わせればROIの説明に十分な根拠になりますよ。

田中専務

ありがとうございます。では私の言葉で確認します。AICOSは主観ではなく実技でAIスキルを測り、生成系AIを含めた実務で使える指標を作った。短縮版で運用コストを抑え、教育効果と業務改善でROIを示せるということですね。