276574記事公開中

トレンドワード
  2. AIベンチマークリサーチ
  3. 論文研究
  4. BERTer：より効率的なBERT（BERTer: The Efficient One）
2 分で読了
0 views

BERTer：より効率的なBERT

（BERTer: The Efficient One）

さらに深い洞察を得る

AI戦略の専門知識を身につけ、競争優位性を構築しませんか？

AIBR プレミアム
年間たったの9,800円で
“AIに詳しい人”として
一目置かれる存在に！

プレミア会員になって、山ほどあるAI論文の中から効率よく大事な情報を手に入れ、まわりと圧倒的な差をつけませんか？

詳細を見る
【実践型】
生成AI活用キャンプ
【文部科学省認可】
満足度100%の生成AI講座
3ヶ月後には、
あなたも生成AIマスター！

「学ぶ」だけではなく「使える」ように。
経営者からも圧倒的な人気を誇るBBT大学の講座では、3ヶ月間質問し放題！誰1人置いていかずに寄り添います。

詳細を見る

田中専務

拓海先生、最近の論文で「BERTer」というものを見かけました。要点だけ教えていただけますか。私、こういうの本当に苦手でして。

AIメンター拓海

素晴らしい着眼点ですね！大丈夫、簡単にいきますよ。BERTerは要するに既存のBERTモデルを、精度を落とさずにより効率的に動かす工夫を重ねた研究です。まず結論を3つにまとめますと、SMARTという正則化で過学習を防ぎ、Siamese系で文章比較を改善し、早期終了で計算を減らす、です。

田中専務

SMARTって何ですか？それと早期終了というのは電源を切るみたいな話ですか。

AIメンター拓海

良い質問ですね！SMARTとは

論文研究シリーズ
前の記事
触媒探索のための生成言語モデル
（Generative Language Model for Catalyst Discovery）
次の記事
SpIRITミッション：軌道上の成果と技術デモンストレーション
（SpIRIT Mission: In-Orbit Results and Technology Demonstrations）
関連記事
オプトアコースティックイメージングにおける不変表現学習
（Invariant Representations in Deep Learning for Optoacoustic Imaging）
検索とレコメンデーションの統合：情報理論に着想を得た生成的パラダイム
（Unifying Search and Recommendation: A Generative Paradigm Inspired by Information Theory）
マルチプロトタイプ連合コントラスト学習によるエッジインテリジェンス
（MP-FedCL: Multiprototype Federated Contrastive Learning for Edge Intelligence）
ケースベース推論における事例関連性学習と抽象論証
（Learning of Case Relevance in Case-Based Reasoning with Abstract Argumentation）
短時間ガンマ線バーストにおける“ホスト不在”問題
（A SHORT GRB “NO-HOST” PROBLEM?）
非コリニア磁性体におけるホール効果の機械学習モデル化
（Machine learning inspired models for Hall effects in non-collinear magnets）
この記事をシェア

有益な情報を同僚や仲間と共有しませんか？

AI技術革新 - 人気記事
ブラックホールと量子機械学習の対応
（Black hole/quantum machine learning correspondence）
  • 論文研究
生成AI検索における敏感なユーザークエリの分類と分析
（Taxonomy and Analysis of Sensitive User Queries in Generative AI Search System）
  • 論文研究
DiReDi：AIoTアプリケーションのための蒸留と逆蒸留
（DiReDi: Distillation and Reverse Distillation for AIoT Applications）
  • 論文研究

PCも苦手だった私が

“AIに詳しい人“
として一目置かれる存在に！
  • AIBRプレミアム
  • 実践型生成AI活用キャンプ
あなたにオススメのカテゴリ
論文研究
最新記事
慣性センサーからの行動認識を画像化で解く
（Human activity recognition from mobile inertial sensors using recurrence plots）
  • 論文研究
超低光度伴銀河候補の実像を見極める
（On the Nature of Ultra-Faint Dwarf Galaxy Candidates I: DES1, Eridanus III and Tucana V）
  • 論文研究
惑星間化学の焦点とPlanck冷たい塊の研究
（Astrochemistry Focus and Research on Planck Cold Clumps）
  • 論文研究
赤外線色を用いた機械学習による銀河系ウルフ–レイエット星選別
（Applications of Machine-Learning Algorithms for Infrared Colour Selection of Galactic Wolf-Rayet Stars）
  • 論文研究
つづりの揺らぎがコミュニティを変える
（Characterizing Online Community Practices with Orthographic Variation）
  • 論文研究
映像から自然な音を生成する
（Visual to Sound: Generating Natural Sound for Videos in the Wild）
  • 論文研究
さらに深い洞察を得る

AI戦略の専門知識を身につけ、競争優位性を構築しませんか？

AIBR プレミアム
年間たったの9,800円で
“AIに詳しい人”として一目置かれる存在に！

プレミア会員になって、山ほどあるAI論文の中から効率よく大事な情報を手に入れ、まわりと圧倒的な差をつけませんか？

詳細を見る
【実践型】
生成AI活用キャンプ
【文部科学省認可】
満足度100%の生成AI講座
3ヶ月後には、あなたも生成AIマスター！

「学ぶ」だけではなく「使える」ように。
経営者からも圧倒的な人気を誇るBBT大学の講座では、3ヶ月間質問し放題！誰1人置いていかずに寄り添います。

詳細を見る

AI Benchmark Researchをもっと見る

今すぐ購読し、続きを読んで、すべてのアーカイブにアクセスしましょう。

続きを読む