5 分で読了
1 views

学習型とルールベースエージェントによる人間-AIチームの評価

(Evaluation of Human-AI Teams for Learned and Rule-Based Agents in Hanabi)

さらに深い洞察を得る

AI戦略の専門知識を身につけ、競争優位性を構築しませんか?

AIBR プレミアム
年間たったの9,800円で
“AIに詳しい人”として
一目置かれる存在に!

プレミア会員になって、山ほどあるAI論文の中から効率よく大事な情報を手に入れ、まわりと圧倒的な差をつけませんか?

詳細を見る
【実践型】
生成AI活用キャンプ
【文部科学省認可】
満足度100%の生成AI講座
3ヶ月後には、
あなたも生成AIマスター!

「学ぶ」だけではなく「使える」ように。
経営者からも圧倒的な人気を誇るBBT大学の講座では、3ヶ月間質問し放題!誰1人置いていかずに寄り添います。

詳細を見る

田中専務

拓海先生、最近「人とAIがチームを組む実験」についての論文が話題だと聞きました。うちの現場でも導入検討の判断材料にしたいのですが、結論を端的に教えていただけますか。

AIメンター拓海

素晴らしい着眼点ですね!簡潔に言うと、この研究は協調タスクの代表例であるカードゲームHanabiを使い、事前にルールで動くエージェント(ルールベース)と機械学習で学習したエージェント(学習型)を人間と組ませたとき、見た目の成績は学習型も悪くないが、人間が好むのは予測可能で説明しやすいルールベースである、という結果を示しています。要点を三つに分けて説明しますね。まず結論、次に背景、最後に実務への含意です。

田中専務

Hanabiというのは初めて聞きました。どんなゲームで、なぜ研究に適しているのでしょうか。

AIメンター拓海

素晴らしい着眼点ですね!Hanabiは協調型カードゲームで、各プレイヤーは自分のカードの数字や色を自分では見られません。チームとして共同でカードを出す必要があり、情報のやり取りや「慣習」(conventions)が重要になります。ビジネスで言えば、製造ラインの暗黙知を共有し合うような状況を小さく安全に模擬できるため、人間とAIの連携研究に向いているのです。

田中専務

ルールベースと学習型という区別は理解できそうですが、学習型というのは具体的には何を学んでいるのですか。強化学習とかいう話を聞きますが。

AIメンター拓海

素晴らしい着眼点ですね!学習型は一般にReinforcement Learning (RL) — 強化学習 — と呼ばれる手法で、試行錯誤を通じて報酬(ゲームの得点)を最大化するための行動ルールを獲得します。ルールベースは設計者が明示的に決めた慣習や意思疎通の約束事に従うため、人間にとって解釈しやすいという特徴があります。一方で学習型は柔軟だが内部の判断がブラックボックスになりやすく、初対面の人と効率よく連携できるかは別問題になりますよ。

田中専務

なるほど。ここで一つ確認ですが、これって要するに、初めて会う相手とすぐに連携できるかどうか、つまり「ゼロショットでの協調(zero-shot coordination)」が重要だということですか?

AIメンター拓海

素晴らしい着眼点ですね!はい、その理解は正しいです。ゼロショットでの協調とは、事前に共同訓練していない相手ともうまく連携できる能力のことで、人間の現場では初めての組み合わせで作業する場面が多いため極めて重要です。本論文では学習型が自分同士では高得点を出せても、人間と初めて組むと行動が予想されにくく、信頼や好感度でルールベースに劣る点が示されました。

田中専務

実験のやり方と、どのように評価したのかを教えてください。うちでやるときの参考にしたいのです。

AIメンター拓海

素晴らしい着眼点ですね!方法はシンプルで分かりやすいです。被験者の人間プレイヤーと、それぞれルールベースあるいは学習型のAIを組ませてプレイさせ、客観評価としてスコア(得点)を取り、主観評価としてプレイヤーの「チームワーク感」「解釈可能性」「信頼度」「総合的な好み」をアンケートで取っています。結果はスコアで大きな差は出ないが、主観評価でルールベースが好まれる、というものです。

田中専務

それは現場の感覚に合いますね。では実務での示唆は何でしょうか。投資対効果の観点で優先順位を付けたいのですが。

AIメンター拓海

素晴らしい着眼点ですね!実務的には三つの指針が出ます。第一に初期導入では、現場で説明可能なルールベースやヒューマンと共有できる慣習を優先すべきです。第二に学習型の利点は柔軟性と性能向上の潜在力にあるが、現場受容性を高めるために説明可能性やヒューマンデータを取り入れた訓練が必要です。第三に混成チーム(ハイブリッド)戦略、つまりまずルールベースで受け入れ性を担保しつつ、段階的に学習型を導入していくアプローチが、投資対効果の面で現実的です。

田中専務

分かりました。要するに、初期は説明できる仕組みで信頼を得て、その後性能を伸ばすフェーズを踏むのが現実的ということですね。自分の言葉で言うと、まず“分かるAI”を導入して現場の信頼を築き、後から“学習するAI”を段階的に組み込むという順序で進めます。これで会議資料を作ります。

監修者

阪上雅昭(SAKAGAMI Masa-aki)
京都大学 人間・環境学研究科 名誉教授

論文研究シリーズ
前の記事
Cold Start下の不均衡データに対する能動学習
(Active learning for imbalanced data under cold start)
次の記事
Bridging Nano and Micro-scale X-ray Tomography for Battery Research by Leveraging Artificial Intelligence
(人工知能を活用した電池研究向けナノ・マイクロスケールX線トモグラフィの橋渡し)
関連記事
潜在ツリー型変分オートエンコーダによる多面クラスタリングの提案
(LEARNING LATENT SUPERSTRUCTURES IN VARIATIONAL AUTOENCODERS FOR DEEP MULTIDIMENSIONAL CLUSTERING)
総括講演 I a
(SUMMARY TALK Ia)
プロトタイプに基づく解釈可能な多ラベル心電図分類
(ProtoECGNet: Case-Based Interpretable Deep Learning for Multi-Label ECG Classification with Contrastive Learning)
Enhancing Wide-Angle Image Using Narrow-Angle View of the Same Scene
(同一シーンの狭視野画像を使った広角画像の高品質化)
無限幅の木構造確率的グラフィカルモデルとしてのニューラルネットワーク
(On Neural Networks as Infinite Tree-Structured Probabilistic Graphical Models)
合成的3Dヒューマン・オブジェクト神経アニメーション
(Compositional 3D Human-Object Neural Animation)
この記事をシェア

有益な情報を同僚や仲間と共有しませんか?

AI技術革新 - 人気記事
ブラックホールと量子機械学習の対応
(Black hole/quantum machine learning correspondence)
生成AI検索における敏感なユーザークエリの分類と分析
(Taxonomy and Analysis of Sensitive User Queries in Generative AI Search System)
DiReDi:AIoTアプリケーションのための蒸留と逆蒸留
(DiReDi: Distillation and Reverse Distillation for AIoT Applications)

PCも苦手だった私が

“AIに詳しい人“
として一目置かれる存在に!
  • AIBRプレミアム
  • 実践型生成AI活用キャンプ
あなたにオススメのカテゴリ
論文研究
さらに深い洞察を得る

AI戦略の専門知識を身につけ、競争優位性を構築しませんか?

AIBR プレミアム
年間たったの9,800円で
“AIに詳しい人”として一目置かれる存在に!

プレミア会員になって、山ほどあるAI論文の中から効率よく大事な情報を手に入れ、まわりと圧倒的な差をつけませんか?

詳細を見る
【実践型】
生成AI活用キャンプ
【文部科学省認可】
満足度100%の生成AI講座
3ヶ月後には、あなたも生成AIマスター!

「学ぶ」だけではなく「使える」ように。
経営者からも圧倒的な人気を誇るBBT大学の講座では、3ヶ月間質問し放題!誰1人置いていかずに寄り添います。

詳細を見る

AI Benchmark Researchをもっと見る

今すぐ購読し、続きを読んで、すべてのアーカイブにアクセスしましょう。

続きを読む