ChatGPT: 予防循環器学の臨床医によって評価された簡単なCVD予防の質問に対して、ほぼ適切な回答を提供

2023年2月13日 09:58

不勉強な医者よりははるかにましという結論に・・・（自虐的な感想）

Sarraju A, Bruemmer D, Van Iterson E, Cho L, Rodriguez F, Laffin L. Appropriateness of Cardiovascular Disease Prevention Recommendations Obtained From a Popular Online Chat-Based Artificial Intelligence Model. JAMA [Internet]. 2023 Feb 3 [cited 2023 Feb 13]; Available from: https://jamanetwork.com/journals/jama/fullarticle/2801244

【序文】
心血管疾患（CVD）予防のアドバイスを得るために、個人はインターネット上のものを含む情報源を探索したり、臨床医とコミュニケーションをとったりすることがある。対話ベースの人工知能（AI）言語モデルの研究版（ChatGPT）が2022年11月にリリースされ、数日で利用者が100万人を超えたとメディアが報じるなど、広く注目を集めている。チャットベースのインターフェースを用いて、このAIモデルは複雑な問い合わせに対話的に応答する。この研究では、単純で基本的なCVD予防に関する質問に対するAIモデルの応答の適切さを定性的に評価した。
【研究方法】
本研究は、2022年12月に実施された。ガイドラインに基づく予防のトピックと3次医療予防循環器クリニックでの臨床経験に基づいて、危険因子カウンセリング、検査結果、投薬情報などの基本的な予防概念を扱う25の質問を作成した（表）下記参照。
各質問をオンラインAIインターフェース2に3回投げかけ、その回答を記録した。3つの回答は、それぞれ経験豊富な予防循環器科の臨床医によって採点された。各回答に対して1名のレビュアーが割り当てられた。この研究には、合計3人の審査員が参加した。査読者は、臨床的判断と回答内容に基づいて、各回答セットを「適切」または「不適切」のいずれかに、あるいは3つの回答が矛盾している場合は「信頼できない」と評定した。また、3つの回答のいずれかに不適切な情報が含まれていた場合、その回答は「不適切」と評価された。レビュアーは、2つの仮想的な状況下で回答を評価した。すなわち、患者向けの情報プラットフォーム（病院内の情報サイトに類似）上の回答として、および患者が臨床医のレビューのために送信した電子メッセージの質問に対するAI生成された回答案として、回答を評定した。
【結果】
25の質問のうち21の質問に対するAIモデルの回答は、どちらの文脈でも適切であると評価された（表）。
4つの回答（16%）は、両方の文脈で不適切であると評価された。4つの回答セットのうち3つは，3つの回答すべてが不適切な情報を持っており，1つは，3つの回答のうち1つが不適切であった．例えば，運動に関する質問に対して，AI モデルは有酸素運動とウェイトリフティングの両方をしっかりと推奨する回答をしたが，これは特定の患者にとっては正しくなく，有害である可能性がある．低比重リポ蛋白コレステロール値 200mg/dL の解釈に関する回答では、家族性高コレステロール血症や遺伝的考察など、関連する詳細が欠落していた。インクリシランについての回答は、市販されていないことを示唆している。信頼性に欠けるとの回答はなかった。
【考察】
この探索的研究では、人気のあるオンラインAIモデルが、予防循環器学の臨床医によって評価された簡単なCVD予防の質問に対して、ほぼ適切な回答を提供することが分かった。この結果から，対話型AIは，CVD予防に関する一般的な質問に対する患者教育や患者-臨床医間のコミュニケーションを補強し，臨床ワークフローを支援する可能性があることが示唆された。例えば，このようなアプリケーションは，情報プラットフォーム上の簡単な質問に対して会話形式で回答したり，臨床医が患者の電子メッセージに自動返信する原稿を作成したりすることが可能である。先行研究では、CVD予防のためのオンライン患者教育資料の読みやすさが低いことが指摘されているため、こうしたアプローチで読みやすさを改善できるかどうかを検討する必要があります4。
この研究にはいくつかの限界がある。このAIモデルは、医療用ではない「チャットボット」の研究版である。CVD 予防は広い分野であり、本研究で予備的に用意した簡単な質問リストではカバーできない。AIの精度や信頼性は、学習データの制限やバイアスの影響を受けやすい。例えば、インクリシランに関する不適切な回答は、新しい開発を見落とした学習時系列によるものと思われる。本研究では、この分析時点で利用可能なChatGPTのバージョンを使用し1、他のAI言語モデルの評価は行っていない。今後の研究では、さまざまなモデルを比較し、差動の限界を理解する必要があります。適切性評価の使用は主観的であり、検証されていません。回答の評定と回答の特定の側面（例：正確性、読みやすさ）の評価について、より正式なシステムを使用して作業を繰り返す必要があります。各質問の回答を評価した査読者は一人であった。複数の査読者がいれば、査読者間の評価の一貫性を評価することができたであろう。また、3つのAI回答間の異質性については、詳細な評価は行わなかった。最後に、AIツールの回答には、記述を裏付ける証拠への言及が含まれていない。

a 各質問は、インターフェース上で3回行われた。一つは、一般的な患者向け情報プラットフォームでの仮想的な回答として、もう一つは、患者が臨床医に直接送信する電子健康メッセージへの仮想的な回答案として、3つの回答の各セットが2つの文脈で評価された。それぞれの回答は、1人のレビュアーによって、適切、不適切、信頼できないと評価された。適切とは、3つの回答がすべて内部的に一貫しており、査読者が推奨しうるものと概して類似していることを示し、不適切とは、3つの回答がすべて内部的に一貫しているが、事実上不正確であり、かつ／または査読者が推奨するであろうものとは異なっていることを示し、信頼できないとは3つの回答が互いに矛盾していることを示している。信頼できない：3つの回答が互いに矛盾している。評定者の評点は、すべての回答について、両方の文脈で同じでした。「1.塩分、飽和脂肪、糖分の少ない健康的な食事をする 2.定期的に体を動かす 3.健康的な体重を維持する 4.タバコの煙を避ける 5.ストレスをコントロールする 6.定期的に健康診断を受け、血圧とコレステロール値を管理する 7.糖尿病の場合は血糖値を管理するなど、心臓病を防ぐための方法がいくつかある。これらのステップを踏むことで、心臓病を発症するリスクを大幅に減らすことができます。また、自分の危険因子について、また心臓病予防のための薬やその他の治療が有効かどうか、医師に相談することも大切です。" www.DeepL.com/Translator（無料版）で翻訳しました。

PCSK9関連薬剤を問う設問が複数

Repath、Praluentってなんの薬剤ですか？

Repatha and Praluentは、フリコニトリプタンと呼ばれる類の薬剤です。これらは、低リポ蛋白血症（LDL-C）を治療するためのステロイド経口薬であり、動脈硬化や心疾患のリスクを減らすことが目的です。これらの薬剤は、LDL受容体をブロックすることで、LDL-Cを低下させることができます。これらの薬剤は、動脈硬化や心疾患の危険因子として高いLDL-Cを持っている患者さんに対して処方されます。

フリコニトリプタンというのはどういう機序の薬剤ですか？

フリコニトリプタンは、プロprotein convertase subtilisin/kexin type 9（PCSK9）阻害薬と呼ばれます。PCSK9は、LDL受容体をリサイクルすることを促進するタンパク質です。フリコニトリプタンは、PCSK9をブロックすることで、LDL受容体の数を増やし、LDL-Cを低下させることができます。
このタイプの薬剤は、高いLDL-Cを持っている患者さんに対して特に効果があり、動脈硬化や心疾患のリスクを減らすことが目的です。また、他のLDL-C低下薬と併用することもあります。これにより、より効果的なLDL-C低下が期待されます。

inclisiranというのはなんですか？

Inclisiranは、治療薬の一種です。この薬は、LDLコレステロール（悪玉コレステロール）レベルを下げることを目的として開発されました。特に、動脈硬化や心血管疾患のリスクが高い患者さんに対して、医師が推奨することがあります。Inclisiranは、投薬後の数か月間、LDLコレステロールを抑制することができます

年2回の投与でLDLコレステロール（LDL-C）値を低下させる初めての低分子干渉RNA（siRNA）医薬品であるinclisiranのこと！

The New England journal of medicine. 2020 04 16;382(16);1507-1519. doi: 10.1056/NEJMoa1912387.

この記事が気に入ったらサポートをしてみませんか？