健康研究の評価を改善する
新しいツールが健康研究の問題のある研究を特定することを目指している。
― 1 分で読む
目次
無作為対照試験(RCT)は、特定の治療法が安全で効果的かを確認するために使われる重要な研究だよ。この試験では、参加者をランダムに異なるグループに割り当てるんだけど、治療を受けるグループとプラセボを受けるグループに分かれることが多くて、研究者が治療の真の効果を見極めるのに役立つんだ。
系統的レビューの重要性
系統的レビューは、特定の健康介入に関するすべての関連RCTを集めることで、医療において重要な役割を果たすよ。これらの研究を慎重に評価して、治療が効果的かどうか、害を及ぼすかどうかを判断するんだ。でも、時々、レビューに含まれる研究が信頼できないこともあるんだ。これは、研究に間違ったデータが含まれていたり、研究が正しく行われていなかったりする場合に起こるよ。
問題のある研究
問題のある研究とは、データや結果の正確性に深刻な疑念があるものだよ。いろんな理由でこうしたことが起こるんだけど、研究中に患者の状態を誤ってコーディングしたり、研究の進行方法に問題があったりすることがあるんだ。これらの問題が意図的なものなのか、単なるミスなのかにかかわらず、ジャーナルの編集者や査読者には見逃されてしまうことが多いんだ。その結果、こうした問題のある研究が出版され、系統的レビューに含まれることがあるんだよ。
研究の妥当性の評価
系統的レビューが実施されるとき、含まれる研究は通常、その方法に基づいて評価されるんだ。研究とそのデータが本物で、著者が重要なミスを犯していないという前提があるんだ。でも、多くの問題のある研究は表面的には堅固に見えることがあって、品質チェックをすり抜けることがあるんだ。残念ながら、こうした問題のあるRCTを見つけるための標準的な方法は現在存在していないよ。この評価の欠如が、欠陥のある研究が系統的レビューに含まれることを許してしまい、治療に関する信頼できない情報が流れる原因になるんだ。
検出ツールの必要性
問題のある研究に関連するリスクを考えると、こうした問題を系統的に見つける方法を見つけることが重要になるんだ。INSPECT-SRプロジェクトは、健康介入のRCTをレビューする際に問題のある研究を特定するために特別に設計されたツールを開発することを目指しているよ。このツールは、研究の信頼性を確認するための一連のチェックを通じてユーザーを導くことが期待されているんだ。
信頼性チェックの収集
INSPECT-SRツールの開発の第一歩は、研究の信頼性を評価するための包括的なチェックリストを作成することだったよ。これを行うために、研究者たちは専門家や関連する経験を持つ人々に調査を行ったんだ。目的は、チェックのリストを作成するだけでなく、既存のチェックに関するフィードバックも集めることだったんだ。
初期リストの作成
初期のチェックリストは、さまざまな情報源から形成されたよ。主な焦点はRCTにあったけど、研究者たちはRCTに特化したチェックに制限せず、幅広いチェックが考慮されるようにしたんだ。ただし、目的に対して無関係だと判断されたいくつかのチェックはリストから除外されたよ。
研究者たちは以前の研究や専門家の意見を用いてチェックをまとめたんだ。既存のチェックリストを調べて、関連項目を取り入れ、重要なチェックが見落とされないようにしたよ。その過程では、チェックを研究結果、チームの背景、研究の実施、出版の詳細、個々の患者データなど、5つの主なカテゴリに整理したんだ。
オンライン調査の実施
初期リストが準備できたら、それをオンライン調査として実施したよ。参加者には研究の目的が伝えられ、問題のある研究を評価する経験について尋ねられたんだ。チェックのリストが提示され、コメントを提供したり、知っている追加のチェックを提案するよう促されたよ。調査は匿名で行われ、個人情報は収集されなかったんだ。
参加資格のある人には、ジャーナル編集者、研究の整合性専門家、およびこうした研究を評価した経験のある研究者が含まれていたよ。研究者たちは、さまざまな国や背景から多様な参加者を募集するためにいろんな戦略を用いたんだ。
フィードバックの収集
研究者たちは、堅実なフィードバックを得るために最低でも50件の調査回答を目指したんだ。調査は多くの参加者の興味を引きつけ、回答をレビューした後、71人の有資格者が調査に回答したことが確認されたんだ。
参加者の特性が記録され、多くの回答者は研究者または査読者として問題のある研究を評価する経験が豊富だったんだ。このフィードバックはチェックリストを洗練させたり、この分野に積極的に関与している人々の視点を理解するのに貴重だったよ。
提案と修正
調査の回答を分析した後、研究者たちはコメントの中に共通のテーマを見つけたんだ。多くの参加者がさまざまなチェックの文言を明確にして理解しやすくするための変更を提案したよ。一部のチェックは誤解されていて、より良い説明や指針が必要であることを示していたんだ。
参加者は、リストに追加できそうな新しいチェックについてもたくさん提案してくれたんだ。これらの提案はレビューされ、いくつかは十分に価値があると判断されてリストに含まれることになったよ。研究者たちは、新しいチェックのカテゴリを整理し、受け取ったフィードバックに基づいてリストを更新したんだ。
明確なガイダンスの重要性
調査結果からの大きな教訓は、チェックに伴う明確なガイダンスが必要だということだったよ。多くの参加者は経験豊富だったけど、特定の統計的方法や概念に苦労していたんだ。このツールは特に統計に強い背景がない人たちにも使いやすくすることを目指しているので、チェックに付随するガイダンスは徹底的でわかりやすくする必要があるってことが明らかになったんだ。
ツールの実用性についてもフィードバックがあったよ。一部の回答者は、広範なチェックリストがユーザーを圧倒するかもしれないと懸念を示していたんだ。チェックを簡素化するために、まずはより簡単な評価を行えるように整理することが提案されたよ。
制限への対処
この研究の認識された制限は、参加者の地理的多様性の欠如だったんだ。ほとんどの回答者はヨーロッパ、オーストラリア、北アメリカに基づいていたんだ。ツールの効果をグローバルに確保するために、研究者たちはより広範な国や文脈からの視点を含めるためにアウトリーチを改善する計画を立てているよ。
さらに、研究者たちは一部のチェックはすべての状況に適用できないことにも気づいて、特に個々の参加者データが利用できない場合には、このデータにアクセスできるケースに特化したツールの追加拡張を開発することを検討しているんだ。
これからの展望
INSPECT-SRプロジェクトの次のステップは、修正されたチェックリストをさまざまな方法で評価すること、つまり既存の系統的レビューにこれらのチェックを適用することを含むよ。研究者たちはさらなる調査や合意形成の会議を行ってツールを洗練させ、ユーザーのニーズに応えられるようにするつもりなんだ。
最終的な目標は、健康に関連する系統的レビューにおける問題のある研究を評価するための実用的で証拠に基づいたツールを作ることだよ。専門家を巻き込み、フィードバックを集めることで、研究の整合性を高め、健康介入の安全性と有効性を確保するリソースを開発することを目指しているんだ。
タイトル: A survey of experts to identify methods to detect problematic studies: Stage 1 of the INSPECT-SR Project
概要: BackgroundRandomised controlled trials (RCTs) inform healthcare decisions. Unfortunately, some published RCTs contain false data, and some appear to have been entirely fabricated. Systematic reviews are performed to identify and synthesise all RCTs which have been conducted on a given topic. This means that any of these problematic studies are likely to be included, but there are no agreed methods for identifying them. The INSPECT-SR project is developing a tool to identify problematic RCTs in systematic reviews of healthcare-related interventions. The tool will guide the user through a series of checks to determine a studys authenticity. The first objective in the development process is to assemble a comprehensive list of checks to consider for inclusion. MethodsWe assembled an initial list of checks for assessing the authenticity of research studies, with no restriction to RCTs, and categorised these into five domains: Inspecting results in the paper; Inspecting the research team; Inspecting conduct, governance, and transparency; Inspecting text and publication details; Inspecting the individual participant data. We implemented this list as an online survey, and invited people with expertise and experience of assessing potentially problematic studies to participate through professional networks and online forums. Participants were invited to provide feedback on the checks on the list, and were asked to describe any additional checks they knew of, which were not featured in the list. ResultsExtensive feedback on an initial list of 102 checks was provided by 71 participants based in 16 countries across five continents. Fourteen new checks were proposed across the five domains, and suggestions were made to reword checks on the initial list. An updated list of checks was constructed, comprising 116 checks. Many participants expressed a lack of familiarity with statistical checks, and emphasized the importance of feasibility of the tool. ConclusionsA comprehensive list of trustworthiness checks has been produced. The checks will be evaluated to determine which should be included in the INSPECT-SR tool.
著者: Jack D Wilkinson, C. Heal, G. A. Antoniou, E. Flemyng, A. Avenell, V. Barbour, E. M. Bordewijk, N. J. Brown, M. Clarke, J. Dumville, S. Grohmann, L. C. Gurrin, J. A. Hayden, K. E. Hunter, E. Lam, T. Lasserson, T. Li, S. Lensen, J. Liu, A. Lundh, G. Meyerowitz-Katz, B. W. Mol, N. E. O'Connell, L. Parker, B. Redman, A. L. Seidler, k. Sheldrick, E. Sydenham, M. v. Wely, D. L. Dahly, L. Bero, J. J. Kirkham
最終更新: 2024-03-25 00:00:00
言語: English
ソースURL: https://www.medrxiv.org/content/10.1101/2024.03.18.24304479
ソースPDF: https://www.medrxiv.org/content/10.1101/2024.03.18.24304479.full.pdf
ライセンス: https://creativecommons.org/licenses/by/4.0/
変更点: この要約はAIの助けを借りて作成されており、不正確な場合があります。正確な情報については、ここにリンクされている元のソース文書を参照してください。
オープンアクセスの相互運用性を利用させていただいた medrxiv に感謝します。