放射線科の報告書は専門的な医学用語で記述されているため、患者が内容を理解することが困難である。患者が理解を助けるために大規模言語モデル(LLM)を直接利用すると、事実に基づかない内容(ハルシネーション)が生成されるリスクがある。本研究は、報告書を患者向けの平易な要約に自動変換する際、生成の質を制御するための手法を対象としている。
従来の研究では、RAGやNERといった戦略が個別に検討されることが多く、これらを統合した枠組みでの直接比較や、モデルの規模および学習設定(Few-shotかFine-tuningか)による影響の体系的な評価は行われていなかった。本研究は、汎用的な小型言語モデルと生物医学特化型の小型言語モデルを比較し、両戦略の組み合わせが要約の品質に与える影響を明らかにした点に新規性がある。
汎用モデルのQwenと生物医学特化モデルのBioBARTを用い、少数の例示(Few-shot)またはLoRAによる微調整(Fine-tuning)のいずれかの設定で要約を行う。強化手法として、Stanzaの放射線科用モデルを用いて解剖学的部位や観察事項などの臨床用語を特定するBioNER、Wikipediaから用語定義を検索して文脈として提供するRAG、およびこれらを併用する手法を導入する。
PadChest、BIMCV-COVID19+、Open-i、MIMIC-CXRの4つのデータセットを統合したデータを用い、関連性(ROUGE、METEOR、BERTScore)、読みやすさ(FKGL、DCRS、SLE)、事実性(SummaC、FENICE、CheXbert-F1)の3側面、計9指標で評価した。結果、BioNERは両方の学習設定で読みやすさと全体的な品質を向上させた。一方、RAG単体では、関連性の低下やハルシネーションの導入が見られた。NERとの組み合わせは、Few-shot設定では性能を低下させたが、微調整設定では読みやすさを向上させた。最終的に、微調整したBioBARTにBioNERを適用した構成が、最も優れた全体性能を示した。
RAGにおいて、検索システムが同音異義語や無関係な用語の定義を返してしまうことで、報告書の内容とは無関係な情報が混入し、事実に基づかない内容が生成されるという限界がある。また、BioNERで抽出された複数の単語からなる医学用語が、外部の知識ベースと正確に一致しないことが、NERとRAGの併用による性能低下を招いている。今後の課題として、ドメイン特化型の知識ベースや生物医学知識グラフの活用、およびより堅牢なエンティティリンキング手法の検討が挙げられる。
本研究は、専門用語が多く患者にとって解釈が困難な放射線科報告書を、一般向けに要約する手法の有効性を検証している。具体的には、命名实体認識(NER)による臨床的に重要な所見の抽出と、検索拡張生成(RAG)による文脈的な根拠付けを組み合わせたフレームワークを提案し、QwenおよびBioBARTのモデルを用いて、少数の例示を用いる手法(few-shot)と微調整(fine-tuning)の両方の設定で評価を行った。実験の結果、NERは要約の読みやすさと全体的な品質を継続的に向上させる一方で、RAG単体では効果が見られず、むしろ無関係な検索語によって事実に基づかない内容を生成する可能性があることが示された。RAGとNERの組み合わせについては、few-shot設定では性能を低下させるものの、微調整を行った場合には読みやすさを向上させる。最終的に、NERを用いた微調整済みのBioBARTが最も優れた全体性能を達成しており、患者に優しい要約を作成する上では、エンティティを意識した抽出が主要な要因であることが明らかになった。
放射線科の報告書は専門的な医学用語や複雑な臨床言語で記述されているため、患者が自身の検査結果やその意味を正確に理解することが困難であるという課題がある。患者は情報の補完として大規模言語モデルを用いたチャットボットを利用することもあるが、不正確な内容やハルシネーションが発生するリスクがあり、報告書を一般向けに要約する手法の研究が求められている。本研究では、外部知識に基づき生成の事実的一貫性を高める検索拡張生成(RAG)と、臨床的に重要な用語を特定して生成を制御する固有表現抽出(NER)のアプローチを組み合わせ、その有効性を比較評価する。評価には、PadChest、BIMCV-COVID19+、Open-i、MIMIC-CXRという、異なる臨床設定や画像モダリティを含む4つの公開データセットを用いる。さらに、最先端の汎用大規模言語モデルと生物医学に特化した小型言語モデルの比較、およびファインチューニングされたモデルとfew-shotベースラインとの体系的な比較を行うフレームワークを提案している。
放射線読影レポートの一般向け要約(Lay Summarization)に関する先行研究は、主にファインチューニング、プロンプティング、検索拡張生成(RAG)、および命名エンティティ認識(NER)を用いた手法に分類される。ファインチューニングを用いた手法では、T5-Largeをフル教師あり学習させたAEHRCが、LoRAやRAGを使用せずに高い性能を達成したほか、QwenシリーズにQLoRAと生成・フィードバック・洗練のパイプラインを組み合わせたKHU_LDIなどの研究がある。プロンプティング手法では、GPT-4.1にBERTの埋め込みを用いて選択した少数の例示を組み合わせた5cNLPが、クローズドトラックで2位となった。RAGを用いた手法では、医学用語の抽出に基づきWikipediaの定義を検索するCUTN_Bioや、RadGraphを用いて事実的に類似したレポート内容を検索するFactMM-RAGなどが提案されている。NERを活用する手法では、StanzaやBioBERTを用いて医学用語を特定し、UMLSの定義を組み込むことで可読性や事実性を向上させるISIKSummやLayForgeといった研究が存在する。しかし、既存研究の多くはRAGとNERの戦略を個別に検討しており、これら二つの戦略の有効性を統一的な枠組みで直接比較したり、モデルの規模や学習手法(few-shot対ファインチューニング)の違いを横断的に評価したりする研究は不足している。
本研究では、汎用的な小型言語モデルであるQwen3.5-0.8Bと、生物医学テキストに特化して事前学習されたBioBART-v2-largeの2つのモデルを用い、放射線科レポートの平易な要約の性能を比較している。データセットはPadChest、BIMCV-COVID19+、Open-i、MIMIC-CXRの4つの公開データセットを統合したもので、元の訓練セットをランダムに分割して、訓練用168,036件、検証用14,971件、テスト用5,000件、および3件のFew-shot用例からなる評価セットを構築している。評価指標は、単語の重なりや意味的類似度を測る関連性、文や単語の長さ、語彙の習熟度、モデルによる簡潔さを測る読みやすさ、そして文間の含意関係や主張の検証、臨床所見の一致を測る事実性の3つの観点から構成され、各指標は最小最大正規化によって比較可能な範囲に調整されている。ベースライン戦略として、0-shotから3-shotまでのFew-shotプロンプティングと、LoRAを用いた微調整の2種類を設定している。さらに、臨床的に重要な用語を抽出して生成を導くBioNER強化、用語定義を外部知識から取得して文脈として提供するRAG強化、およびこれらを組み合わせた手法の3つの強化戦略を、各モデルおよび学習設定に対して適用している。
放射線科レポートの平易な要約に関する実験において、生物医学的エンティティを抽出して提供するBioNER戦略は、Few-shotおよびFine-tuningの両設定で読みやすさや全体的な性能を向上させることが示された。一方で、外部知識を利用するRAG戦略は、検索システムが同音異義語や無関係な用語を返すことで不適切な背景情報を混入させ、ハルシネーションを引き起こす傾向があるため、必ずしも性能向上には繋がらなかった。BioNERとRAGを組み合わせた手法についても、抽出された多語構成のエンティティがWikipedia APIと一致しないなどの理由により、期待された相乗効果が得られず性能が低下した。モデル間の比較では、Few-shot設定では汎用的なQwenが優位であったが、Fine-tuningを行うとドメイン特化型のBioBARTが最も高い性能を示した。最終的に、Fine-tuning済みのBioBARTにBioNERを適用した構成が、多くの評価指標において最も優れた全体的な性能を達成した。
本研究では、放射線科レポートの一般向け要約において、生物医学的固有表現抽出(BioNER)と検索拡張生成(RAG)を用いた戦略が、少数の学習データを用いた推論およびファインチューニングの設定で与える影響を調査しました。関連性、読みやすさ、事実性の3つの観点からなる9つの指標を用いて評価した結果、BioNER戦略はベースラインモデルの性能を、特に読みやすさの面で一貫して向上させ、関連性と事実性においても競争力のある水準を維持しました。一方で、RAG戦略は一貫した性能向上をもたらさず、BioNERとRAGを組み合わせても期待された利得は得られませんでした。この結果は、明示的な生物医学的エンティティ情報を提供することが、自動生成される要約の読みやすさを向上させるシンプルかつ効果的な手法であることを示しています。今後の課題として、検索エラーを減らすためのドメイン特化型の知識ベースや生物医学知識グラフ、より堅牢なエンティティリンキング手法を用いた検索コンポーネントの改善、および異なるBioNERモデルや検索戦略の検討が挙げられます。