2 分で読了
0 views

ClinicalBERTによる臨床ノートの表現化と再入院予測

(ClinicalBERT: Modeling Clinical Notes and Predicting Hospital Readmission)

さらに深い洞察を得る

AI戦略の専門知識を身につけ、競争優位性を構築しませんか?

AIBR プレミアム
年間たったの9,800円で
“AIに詳しい人”として
一目置かれる存在に!

プレミア会員になって、山ほどあるAI論文の中から効率よく大事な情報を手に入れ、まわりと圧倒的な差をつけませんか?

詳細を見る
【実践型】
生成AI活用キャンプ
【文部科学省認可】
満足度100%の生成AI講座
3ヶ月後には、
あなたも生成AIマスター!

「学ぶ」だけではなく「使える」ように。
経営者からも圧倒的な人気を誇るBBT大学の講座では、3ヶ月間質問し放題!誰1人置いていかずに寄り添います。

詳細を見る

田中専務

拓海先生、最近部下が「臨床向けのBERTが注目」と言っているんですが、病院のメモで何が変わるというのでしょうか。われわれ製造業にとっても関係ありますか。

AIメンター拓海

素晴らしい着眼点ですね!ClinicalBERTは、病院のカルテや臨床ノートという「自由記述」をコンピュータが理解できる形にする技術です。要点は三つです。まず、臨床文書をそのまま学習して言葉の関係性を学ぶこと、次にその表現で30日以内の再入院を予測すること、最後に少ない追加設計で他の医療予測に転用できることですよ。

田中専務

つまりカルテの長い文章を読み取って、誰がまた入院するかを早めに分かるようにする、ということですか。精度はどの程度なんですか。

AIメンター拓海

素晴らしい着眼点ですね!論文は従来の方法より高い性能を示していますが、重要なのは二点です。第一に、カルテ全文(自由記述)から意味の近い言葉を高品質に抽出できること。第二に、退院時だけでなく入院初期から予測できる点です。だから早期介入の機会が増え、コスト削減につながる可能性があるんです。

田中専務

投資対効果が心配です。データの準備やエンジニアのコストがかかりそうですが、短期で成果を出せるものでしょうか。

AIメンター拓海

大丈夫、一緒にやれば必ずできますよ。ポイントを三つに分けて考えましょう。第一に、既存の記録をそのまま使える点で工数が抑えられる。第二に、公開されたモデルパラメータがあるため一から学習する必要がない。第三に、最初は小さな現場で効果を検証し、成功例を横展開できる点です。

田中専務

専門用語が出てきますが、BERTって何ですか。要するに「文章を理解する賢い辞書」みたいなものですか。

AIメンター拓海

素晴らしい着眼点ですね!BERTはBidirectional Encoder Representations from Transformers (BERT)(双方向トランスフォーマーに基づく言語表現)で、文章の中で単語が前後どちらの文脈でもどう使われるかを学ぶ仕組みです。辞書に似ているが、単語の“意味の使われ方”を文脈ごとにベクトルとして表す、つまり状況に応じた意味を数値で表現できる道具だと考えると分かりやすいです。

田中専務

これって要するに、専門領域の言葉で学ばせたBERTを用いれば、その領域の文章を正確に読み解けるようになる、ということですか。

AIメンター拓海

その通りですよ。ClinicalBERTは一般文書で学習したBERTではなく、臨床コーパスで事前学習(pre-training)したモデルを使うことで、医療特有の言い回しや略語をより正確に捉えられるようにしたものです。だから同じモデルでも領域特化で精度が上がるんです。

田中専務

よく分かりました。私の言葉で整理しますと、ClinicalBERTは臨床メモを読み取れるように特別に学習させた言語モデルで、早期に再入院のリスクを見つけられ、現場の介入機会を増やす。小さく試して効果が出れば横展開してコスト削減に繋げられるということですね。

監修者

阪上雅昭(SAKAGAMI Masa-aki)
京都大学 人間・環境学研究科 名誉教授

論文研究シリーズ
前の記事
ハイパーパーティザンニュース検出におけるBERTの実用性
(Harvey Mudd College at SemEval-2019 Task 4: The Clint Buchanan Hyperpartisan News Detector)
次の記事
StegaStamp: 物理写真に埋め込む不可視ハイパーリンクの可能性
(StegaStamp: Invisible Hyperlinks in Physical Photographs)
関連記事
ボリュームデータのための新しい暗黙的ニューラル表現
(A Novel Implicit Neural Representation for Volume Data)
連合クライアントの知的財産保護と裏切り者追跡
(FedCIP: Federated Client Intellectual Property Protection with Traitor Tracking)
曲がった表現的Bregman発散とその応用
(Curved representational Bregman divergences and their applications)
GMMカーネルの理論
(Theory of the GMM Kernel)
教師は天国、生徒は地獄か―真実か否か?
(Teachers are from heaven, students are from hell – true or false?)
弱ラベル学習における負のサンプリングの重要性
(IMPORTANCE OF NEGATIVE SAMPLING IN WEAK LABEL LEARNING)
この記事をシェア

有益な情報を同僚や仲間と共有しませんか?

AI技術革新 - 人気記事
ブラックホールと量子機械学習の対応
(Black hole/quantum machine learning correspondence)
生成AI検索における敏感なユーザークエリの分類と分析
(Taxonomy and Analysis of Sensitive User Queries in Generative AI Search System)
DiReDi:AIoTアプリケーションのための蒸留と逆蒸留
(DiReDi: Distillation and Reverse Distillation for AIoT Applications)

PCも苦手だった私が

“AIに詳しい人“
として一目置かれる存在に!
  • AIBRプレミアム
  • 実践型生成AI活用キャンプ
あなたにオススメのカテゴリ
論文研究
さらに深い洞察を得る

AI戦略の専門知識を身につけ、競争優位性を構築しませんか?

AIBR プレミアム
年間たったの9,800円で
“AIに詳しい人”として一目置かれる存在に!

プレミア会員になって、山ほどあるAI論文の中から効率よく大事な情報を手に入れ、まわりと圧倒的な差をつけませんか?

詳細を見る
【実践型】
生成AI活用キャンプ
【文部科学省認可】
満足度100%の生成AI講座
3ヶ月後には、あなたも生成AIマスター!

「学ぶ」だけではなく「使える」ように。
経営者からも圧倒的な人気を誇るBBT大学の講座では、3ヶ月間質問し放題!誰1人置いていかずに寄り添います。

詳細を見る

AI Benchmark Researchをもっと見る

今すぐ購読し、続きを読んで、すべてのアーカイブにアクセスしましょう。

続きを読む