2 分で読了
2 views

TMIC: App Inventor Extension for the Deployment of Image Classification Models Exported from Teachable Machine

(TMIC: Teachable Machineからエクスポートした画像分類モデルを配備するApp Inventor拡張)

さらに深い洞察を得る

AI戦略の専門知識を身につけ、競争優位性を構築しませんか?

AIBR プレミアム
年間たったの9,800円で
“AIに詳しい人”として
一目置かれる存在に!

プレミア会員になって、山ほどあるAI論文の中から効率よく大事な情報を手に入れ、まわりと圧倒的な差をつけませんか?

詳細を見る
【実践型】
生成AI活用キャンプ
【文部科学省認可】
満足度100%の生成AI講座
3ヶ月後には、
あなたも生成AIマスター!

「学ぶ」だけではなく「使える」ように。
経営者からも圧倒的な人気を誇るBBT大学の講座では、3ヶ月間質問し放題!誰1人置いていかずに寄り添います。

詳細を見る

田中専務

拓海先生、最近部下から「MLを授業で扱いたい」と言われまして、Teachable Machineという名前が出たんですけれど、正直よくわからないのです。これって現場で役に立つものなのでしょうか。

AIメンター拓海

素晴らしい着眼点ですね!Teachable Machineは直感的に使えるツールで、専門知識が少ない教師や初学者でも画像認識モデルを作れるんですよ。大丈夫、一緒に整理すれば導入の判断ができるんです。

田中専務

なるほど、でもうちの現場は古い工場でスマホアプリも初めて作るレベルです。App Inventorとか拡張とか出てきまして、結局どこまで部品として使えるのか見当がつきません。

AIメンター拓海

いい質問ですね。まず結論を三つにまとめます。1) Teachable Machineで作ったモデルをApp Inventor上で動かせる拡張があること、2) それがTMICで、教育現場で使いやすく設計されていること、3) ただし現状の制約もあり、改善余地が残っていることです。

田中専務

これって要するに、子どもでも触れるツールで作った顔認識とかゴミ分類のモデルを、うちの若い社員がスマホアプリに組み込めるということですか。

AIメンター拓海

まさにそうなんです!ただし要点を補足します。Teachable Machineはブラウザ操作でモデルを作り、モデルをTensorFlow.js(TensorFlow.js、JavaScript向け機械学習ライブラリ)形式でエクスポートできること、そしてTMICはその形式を受けてApp Inventorで動かすための拡張であることです。

田中専務

なるほど、具体的にはどんな制約があるのですか。例えば我々の現場でカメラを使って不良品をはじくようなアプリを作るとしたら、現状で足りないものを知りたいのです。

AIメンター拓海

いい着眼点ですね。現状のTMICは背面カメラのみ対応や、Google CloudにエクスポートしたTensorFlow.jsモデルのみ受け付けるといった制約があるため、多様な現場要件には追加開発が必要です。それでも教育用途や試作段階では即戦力になるんです。

田中専務

投資対効果の観点ではどうですか。外注で数百万かける前に、社内で簡易にプロトタイプを作って有望かどうか見極められるならそれでも十分だと考えています。

AIメンター拓海

その見立ては正しいです。TMICの強みはプロトタイプの迅速な作成にあるため、検証フェーズでの時間とコストを大幅に削減できる点が評価できます。要点を三つにまとめると、学習コストの低さ、プロトタイプの速さ、しかし商用化には拡張が必要、ということです。

田中専務

分かりました。社内でまずは小さな課題に対して実証を回し、そこで得た指標を基に投資を判断する流れにすれば費用対効果を担保できそうです。要はまずは試してみるべきということですね。

AIメンター拓海

その通りです。最初の実証では評価指標を明確にし、性能不足の要因がデータかモデルか実装かを切り分けることが重要です。大丈夫、一緒にプランを作れば着実に進められるんです。

田中専務

分かりました。私の言葉で整理すると、TMICはTeachable Machineで作った画像分類モデルを手早くスマホアプリで試せる仕組みで、まずは小さな業務課題で効果を確かめ、その結果で追加投資を判断するという流れで進めるべき、ということですね。

1. 概要と位置づけ

結論を先に述べる。TMICは、Google Teachable Machineで作成した画像分類モデルをApp Inventorという教育向けのブロックプログラミング環境で動作させるための拡張機能であり、現場の迅速なプロトタイピングを可能にした点で教育および実証フェーズの導入コストを下げるという実用的な価値を示した。

なぜ重要かを整理する。まず基礎的な位置づけとして、Machine Learning (ML)(機械学習)はデータから規則を学ぶ技術であり、Image Classification(画像分類)はその中でも画像をカテゴリに分ける代表的応用である。Teachable Machineはそうしたモデルを非専門家でも作れるようにしたツールだ。

次に応用の観点で言うと、App Inventorは教育現場で広く使われるブロック型開発環境であり、ここにモデルを組み込む流れは、技術の民主化を意味する。つまり専門家がいない現場でも試作を回せるようになり、PoC(概念実証)を速く回すことが可能になる。

この論文的貢献は、教育用途での即時利用性とApp Inventorのエコシステムを繋ぐ「橋渡し」としての拡張を設計・実装し、その配備方法と利用例を提示した点にある。結果的に教育現場のカリキュラムや、企業が行う初期検証の工数を削減する。

最後に要約すると、TMICは専門知識が乏しい層でも画像分類モデルを試作・検証できる実用的な道具であり、現場導入の初動コストを下げ、アイデアの迅速な検証を可能にした点で意義がある。

2. 先行研究との差別化ポイント

本研究の差別化は実装主導である点にある。従来の研究では、教育用のWebツールや独立したランタイムでのモデル実行が報告されていたが、App Inventorというブロックベース環境とTeachable Machineで生成されたTensorFlow.js(TensorFlow.js、JavaScript向け機械学習ライブラリ)モデルを直接つなぐことに着目した点が新しい。

先行のPIC拡張などは教育向けにモデルの実行をサポートしていたが、特定のワークフローやクラウド仕様に依存することがあり、多様なモデルの柔軟な導入には制約が残された。本研究はその流れを受けつつ、Teachable Machine由来のモデルを受け入れる点で利用範囲を広げた。

差別化の本質は実用性だ。研究として新たなアルゴリズムを提案するのではなく、既存の教育ツール群と現実的なモデル配備手順を結びつけ、現場の教育者や初学者がすぐに使える形に落とし込んだことが価値である。つまり手を動かして学べる環境を作った。

結果として示されたのは、教育的な導入の容易さと、短期間でのプロトタイプ作成が可能になるという点である。これにより、学習効果の検証や現場課題の早期発見が促進されるため、従来の研究が主に扱っていた理論的側面とは別の実装価値を提供した。

3. 中核となる技術的要素

本研究で鍵となる技術要素は三つある。第一にGoogle Teachable Machineは、Webブラウザ上でモデル学習のワークフローを用意し、データ収集からモデルエクスポートまでを直感的に行える点である。これにより教師や学生が専門知識なしにモデルを作成できる。

第二にApp Inventorはブロックベースの開発環境であり、拡張機能(Extension)機構を通じて外部のライブラリやモデルを組み込める。TMICはこの拡張の実装例であり、TensorFlow.js形式でエクスポートされたモデルをApp Inventorでロードして実行する仕組みを提供する。

第三に実運用上の制約として、現状はTensorFlow.jsモデルをGoogle Cloudにエクスポートしたもののみをサポートし、カメラはスマートフォンの背面カメラのみ対応である点が挙げられる。これは汎用的な現場要件を満たすために今後の改善が必要だ。

要するに、技術的コアは「誰でもモデルを作れるTeachable Machine」と「誰でもアプリを作れるApp Inventor」をつなぐインタフェース設計にあり、これが教育的価値と実証実験の迅速化をもたらしている点が中核である。

4. 有効性の検証方法と成果

検証は教育用途およびサンプルアプリケーションを通じて示された。具体的にはリサイクル品の分類を題材としたサンプルアプリが提供され、ワイヤーフレームから最終アプリまでの動作を確認することで、学習者がモデル作成からアプリ化までの一連の流れを習得できることを示した。

評価は定量的な精度比較というよりも、教育上の有効性と導入の容易さに重きが置かれている。すなわち、学習者が短時間で成果物を作れること、教材としての再現性が高いことが主要な評価軸である。これによって初学者の学習曲線を平坦化できるという成果が示された。

また実装面では、拡張はBSD 3ライセンスで公開され、サンプルコードやチュートリアルが提供されている点が実務上の再現性を高めている。現場での試作フェーズにおいて、外部ベンダーに頼らずに概念実証を回せるという成果が得られた。

ただし性能面の限界やクラウドへの依存、デバイス制約などは定量的に評価され切れていない部分があるため、商用展開を目指す際は追加のベンチマークと最適化が必要であると結論付けられる。

5. 研究を巡る議論と課題

議論の中心は可用性と拡張性のトレードオフにある。教育現場で手軽に使えることと、産業用途で要求される堅牢性や柔軟性は必ずしも一致しない。TMICは前者に寄せた設計であり、その結果産業利用に向けては追加開発という課題が残る。

具体的な技術課題としては、モデルの実行パフォーマンスとデバイス依存性、クラウドへのエクスポートに伴う運用コストやデータ管理の問題が挙げられる。これらは実際の現場で使う際の運用プロセスに直結するため、現場要件を踏まえた設計変更が必要だ。

教育的な観点では、多言語化や教材の体系化が進めば採用障壁は更に下がるが、現行のドキュメントやサポートが限定的であることが普及の妨げになり得る。つまり技術公開だけでは不十分で、運用面の整備が不可欠である。

結論として、TMICは初期導入とプロトタイピングの課題を大幅に解決するが、商用利用や大規模運用に踏み込むには性能改善、デバイス対応の拡張、運用ルール整備が今後の主要な課題である。

6. 今後の調査・学習の方向性

今後の方向性は三つある。一つ目は対応フォーマットとデバイスの拡張であり、TensorFlow.js以外のエクスポート形式やフロントカメラ対応、多様なスマートフォン機種での最適化が必要である。これにより現場適用範囲が大きく広がる。

二つ目は性能評価と最適化であり、現行の実装のボトルネックを抽出して軽量化や推論速度向上を図ることが求められる。特に組み込み的に使う場面ではオンデバイスでの高速推論が重要であるため、モデル圧縮や量子化の検討が有効である。

三つ目は教育カリキュラムの整備と評価指標の標準化である。授業での学習効果や現場でのプロトタイプ評価に使える共通の指標を用意すれば、教育機関や企業間で成果を比較しやすくなり、導入判断が定量的にできるようになる。

最後に現場導入を検討する経営層への提案としては、まずは小スコープのPoCを設計し、指標に基づいた性能評価を行い、そこから段階的に拡張投資を行うことが合理的である。初期投資を抑えつつ学習を回すことが成功の鍵である。

会議で使えるフレーズ集

「まずはTeachable Machineでモデルを作り、TMICでApp Inventorに組み込んで簡易プロトを回します。効果が見えた段階で次フェーズの投資判断を行いたい。」

「現状は背面カメラ対応とGoogle Cloudエクスポートのみの制約があるため、商用化には追加開発が必要です。まずは小さな現場課題で検証を行いましょう。」

検索に使える英語キーワード: TMIC, App Inventor, Teachable Machine, TensorFlow.js, image classification, ML education, K-12 AI education

引用元: F. P. de Oliveira, C. G. von Wangenheim, J. C. R. Hauck, “TMIC: App Inventor Extension for the Deployment of Image Classification Models Exported from Teachable Machine,” arXiv preprint arXiv:2208.12637v2, 2022.

監修者

阪上雅昭(SAKAGAMI Masa-aki)
京都大学 人間・環境学研究科 名誉教授

論文研究シリーズ
前の記事
AI結合HPCワークフロー
(AI-coupled HPC Workflows)
次の記事
マニフォールド仮説の統計的探究
(Statistical exploration of the Manifold Hypothesis)
関連記事
畳み込みによるセマンティックセグメンテーションの再考
(Rethinking Convolutional Semantic Segmentation Learning)
信頼度校正の改良 — Confidence Calibration of Classifiers with Many Classes
タッチスクリーン教育ゲームにおける相互作用手法のfNIRS分析
(Functional Near-Infrared Spectroscopy (fNIRS) Analysis of Interaction Techniques in Touchscreen-Based Educational Gaming)
トポロジカル特徴に基づく説明可能な安全領域による安全で効率的な社会的ナビゲーション
(SAFE AND EFFICIENT SOCIAL NAVIGATION THROUGH EXPLAINABLE SAFETY REGIONS BASED ON TOPOLOGICAL FEATURES)
公開データ支援下における最適局所プライベート非パラメトリック分類 — Optimal Locally Private Nonparametric Classification with Public Data
ニューラルネットワークの増分検証
(Incremental Verification of Neural Networks)
この記事をシェア

有益な情報を同僚や仲間と共有しませんか?

AI技術革新 - 人気記事
ブラックホールと量子機械学習の対応
(Black hole/quantum machine learning correspondence)
生成AI検索における敏感なユーザークエリの分類と分析
(Taxonomy and Analysis of Sensitive User Queries in Generative AI Search System)
DiReDi:AIoTアプリケーションのための蒸留と逆蒸留
(DiReDi: Distillation and Reverse Distillation for AIoT Applications)

PCも苦手だった私が

“AIに詳しい人“
として一目置かれる存在に!
  • AIBRプレミアム
  • 実践型生成AI活用キャンプ
あなたにオススメのカテゴリ
論文研究
さらに深い洞察を得る

AI戦略の専門知識を身につけ、競争優位性を構築しませんか?

AIBR プレミアム
年間たったの9,800円で
“AIに詳しい人”として一目置かれる存在に!

プレミア会員になって、山ほどあるAI論文の中から効率よく大事な情報を手に入れ、まわりと圧倒的な差をつけませんか?

詳細を見る
【実践型】
生成AI活用キャンプ
【文部科学省認可】
満足度100%の生成AI講座
3ヶ月後には、あなたも生成AIマスター!

「学ぶ」だけではなく「使える」ように。
経営者からも圧倒的な人気を誇るBBT大学の講座では、3ヶ月間質問し放題!誰1人置いていかずに寄り添います。

詳細を見る

AI Benchmark Researchをもっと見る

今すぐ購読し、続きを読んで、すべてのアーカイブにアクセスしましょう。

続きを読む