食品安全関係情報詳細
| 資料管理ID | syu06541290149 |
| タイトル | 欧州食品安全機関(EFSA)、自動化ツールを活用したエビデンスの批判的評価の促進に関する外部委託機関による科学的報告書を公表 |
| 資料日付 | 2025年7月15日 |
| 分類１ | - |
| 分類２ | - |
| 概要（記事） | 欧州食品安全機関(EFSA)は7月15日、自動化ツールを活用したエビデンスの批判的評価の促進に関する外部委託機関による科学的報告書(5月10日承認、PDF版61ページ、 https://doi.org/10.2903/sp.efsa.2025.EN-9515)を公表した。概要は以下のとおり。 EFSAは、2021年5月に「リスク評価におけるエビデンス管理のための人工知能(AI)に関する行動ロードマップ」プロジェクトを立ち上げ、該当プロジェクトはAI方法論を統合することでリスク評価プロセスを最適化することを目的としている。本プロジェクトは、「枠組み契約OC/EFSA/AMU/2021/03の特定契約3」に基づき実施され、バイアスリスク評価の自動化を目的としたAIツールの開発と検証に焦点を当てている。本報告書では、その活動と成果を報告する。 まず、本プロジェクトの背景を簡潔に説明した後、方法論のセクションでは、本プロジェクトの実施に際して従った6つのステップを詳細に説明する。最初のステップは、EFSAの現在のプロセス定義と批判的評価ツールの選択である。NTP-OHAT(※1)バイアスリスクツールが選択された理由は、EFSAにおいて頻繁に使用されているためである。続いて、以下のステップが説明される。すなわち、ユースケースの選択、自動化ツールの範囲の定義、プロトタイプツール「AutoCAT(※2)」の実装戦略の策定及びその検証計画の策定である。 実装セクションでは、大規模言語モデル(LLM)を用いたツールの実装に採用された反復的なアプローチを説明し、最も効果的なアプローチを決定するため、異なるプロンプト戦略をテストした結果を提示する。次に、プロトタイプパイプラインが説明され、これには、入力PDFの事前処理と構造化JSON(※3)フォーマットへの変換、及び批判的評価の自動化に用いられる2段階プロセス(ファクト抽出とバイアスリスク分類)が含まれる。最後に、AutoCATと既存のシステマティック･レビュー･プラットフォーム(DistillerSRを含む)との統合が示される。 プロトタイプツールの開発、検証、テストに用いられた多様なデータセットは、データセットのセクションで説明され、その後、評価フェーズの結果が報告される。「Polarケース」データセットにおけるOHATへのクエスチョンQ1とQ2(※4)のファクト抽出に関する有望な結果を報告する。得られた結果では、ツールは17件中16件の論文から関連するファクトを適切に抽出したが、1件のみファクトが漏れた。バイアスリスク分類の結果では、モデルが低リスクバイアスと判断する傾向を示したことが主な制限事項であった。また、「Deltamethrin」データセットを使用して全ての適用可能なOHATへのクエスチョンに対するツールの評価結果、及び、2人の訓練を受けた専門家が40件の論文からツールによって抽出された2,817件のファクトをレビューした検証結果を報告する。検証全体では、ツールのファクト抽出における高い感度が確認されたが、異なるクエスチョン間での高い変動性も明らかになった。システムのテストのため、EFSAの専門家2人に進行中の意見書の批判的評価に対してAutoCATの出力を使用することを依頼した。その結果、有用性において重大な課題が指摘された。 本報告書の最終部分では、プロジェクトの成果を要約し、ツールの限界を認めつつも、AutoCATが科学論文からのファクト抽出を自動化することでシステマティックレビューの効率化に潜在的な可能性を有することを強調し、特定された限界を克服するための、さらに、他の文脈における自動化ツール潜在的適用を模索するための今後の作業と推奨事項を提案している。今後の作業としては、当該ツールの適用範囲を他の研究タイプや追加の批判的評価ツールに拡張すること、研究クエスチョン枠組み記述子の抽出の自動化を挙げている。 外部委託機関: ChampAIons consortium (※1) National Toxicology Program - Office of Health Assessment and Translation (※2) Automation of Critical Appraisal Tool (※3) JavaScript Object Notation (※4) Q1. 投与量又はばく露量は適切にランダム化されているか？ Q2. 試験群への割り当ては適切に隠されているか？ |
| 地域 | 欧州 |
| 国・地方 | EU |
| 情報源（公的機関） | 欧州食品安全機関（EFSA） |
| 情報源（報道） | 欧州食品安全機関(EFSA) |
| URL | https://www.efsa.europa.eu/en/supporting/pub/en-9515 |
利用上の注意事項
本データベースに掲載された情報の利用の際は、以下１、２をご理解ください。ご利用に当たって、以下３に同意したものとみなします。１ 情報の収集・要約・翻訳について
(1) 掲載情報は、食品安全に関係する国際機関や国内外の政府機関等の公式ウェブサイト等から収集しています。ただし、すべての国や関係機関を網羅し、また各機関が公表しているすべての情報を収集しているわけではありません。(2) 掲載情報は、発信元の機関から提供されている情報の趣旨を出来る限り改変しないよう翻訳・要約しています。
(3) 掲載情報の翻訳には、細心の注意を払っているが、誤訳や間違いを含む可能性があります。掲載情報と情報発信元の文章に相違がある場合は、情報発信元の文章が常に優先されます。
(4) 掲載情報は、情報収集時点のものであり、その後の新たな知見等により更新されている可能性があります。情報元のURLや記事内のリンクについては、リンク切れとなっている場合があります。
(5) 食品安全委員会が行った翻訳及び要約内容について、情報発信元の機関に確認は行っておりません。
２ 掲載情報と食品安全委員会の立場について
(1) 食品安全委員会は、国際機関、海外の政府機関や研究機関の情報をありのままにわかりやすく提供することがリスクコミュニケーションに資するものと位置付け、発足以来、本データベースを運用しています。(2) 本データベースは、海外の評価機関、研究機関の公表情報を翻訳・要約・集約したものであり、食品安全委員会としては、掲載情報の内容を検証しておらず、具体的には、その正誤及び真偽を一切確認していません。また、科学的な観点からの正確性を保証するものではありません。
(3) 本来は、収集された情報に対し食品安全委員会としての見解を付与しデータベースに掲載することが最善ではありますが、日々収集される情報1つ1つの内容を確認・検証し、食品安全委員会としての見解をまとめることは不可能であることから、やむを得ず情報発信元の情報をそのまま掲載しております。
(4) このため、掲載されている情報に記載されている意見・見解・主張は、情報発信機関又はその情報内で取り上げられている機関等によるものであり、食品安全委員会の考え方と異なる場合があります。
３ 利用者の責務
(1) 情報の利用に当たっては、必ず利用者自らが情報発信元の公式サイト等で最新の情報を確認し、利用者自身の責任で行うこと。専門的又は法的な判断が必要な場合には専門家に相談するなどにより最新の正確な情報を入手すること。(2) 2(2)～(4)のとおり、掲載されている情報は、
① 食品安全委員会として内容の正誤及び真偽を一切確認しておらず、
② 食品安全委員会の考え方とは異なる場合があることから、これを食品安全委員会の発信する情報として引用・転用することはせず、情報発信元の情報を直接、当該情報発信者のルールに基づき引用・転用すること。
(3) 情報発信元の情報に誤り等があることや、掲載情報の利用によって生じたいかなる損害や不利益についても、食品安全委員会は一切の責任を負わないこと。