Skip to main page content
U.S. flag

An official website of the United States government

Dot gov

The .gov means it’s official.
Federal government websites often end in .gov or .mil. Before sharing sensitive information, make sure you’re on a federal government site.

Https

The site is secure.
The https:// ensures that you are connecting to the official website and that any information you provide is encrypted and transmitted securely.

Access keys NCBI Homepage MyNCBI Homepage Main Content Main Navigation
Meta-Analysis
. 2017 Apr;60(2):86-93.
doi: 10.1503/cjs.010616.

Are outcomes reported in surgical randomized trials patient-important? A systematic review and meta-analysis

Sam Adie  1 , Ian A Harris  1 , Justine M Naylor  1 , Rajat Mittal  1
Affiliations
Meta-Analysis

Are outcomes reported in surgical randomized trials patient-important? A systematic review and meta-analysis

Sam Adie et al. Can J Surg. 2017 Apr.

Abstract
in English, French

Background: The dangers of using surrogate outcomes are well documented. They may have little or no association with their patient-important correlates, leading to the approval and use of interventions that lack efficacy. We sought to assess whether primary outcomes in surgical randomized controlled trials (RCTs) are more likely to be patient-important outcomes than surrogate or laboratory-based outcomes.

Methods: We reviewed RCTs assessing an operative intervention published in 2008 and 2009 and indexed in MEDLINE, EMBASE or the Cochrane Central Register of Controlled Trials. After a pilot of the selection criteria, 1 reviewer selected trials and another reviewer checked the selection. We extracted information on outcome characteristics (patient-important, surrogate, or laboratory-based outcome) and whether they were primary or secondary outcomes. We calculated odds ratios (OR) and pooled in random-effects meta-analysis to obtain an overall estimate of the association between patient importance and primary outcome specification.

Results: In 350 included RCTs, a total of 8258 outcomes were reported (median 18 per trial. The mean proportion (per trial) of patient-important outcomes was 60%, and 66% of trials specified a patient-important primary outcome. The most commonly reported patient-important primary outcomes were morbid events (41%), intervention outcomes (11%), function (11%) and pain (9%). Surrogate and laboratory-based primary outcomes were reported in 33% and 8% of trials, respectively. Patient-important outcomes were not associated with primary outcome status (OR 0.82, 95% confidence interval 0.63-1.1, I2 = 21%).

Conclusion: A substantial proportion of surgical RCTs specify primary outcomes that are not patient-important. Authors, journals and trial funders should insist that patient-important outcomes are the focus of study.

Contexte: Les dangers de l'utilisation de critères de substitution sont bien documentés. Ils peuvent avoir peu de liens, voire aucun, avec leurs corrélats importants pour le patient, menant à l'approbation et à l'utilisation d'interventions inefficaces. Nous avons tenté de déterminer si les résultats primaires d'essais cliniques randomisés en chirurgie sont plus susceptibles d'être des résultats importants pour le patient que des critères de substitution ou des résultats de laboratoire.

Méthodes: Nous avons examiné des essais cliniques randomisés portant sur l'évaluation d'une intervention chirurgicale, publiés en 2008 et 2009 et répertoriés dans MEDLINE, EMBASE ou le Cochrane Central Register of Controlled Trials. Après l'essai du critère de sélection, un examinateur a choisi les essais et un autre examinateur a vérifié la sélection. Nous avons obtenu les renseignements sur les caractéristiques des résultats (importants pour le patient, de substitution ou de laboratoire) et déterminé s'il s'agissait de résultats primaires ou secondaires. Nous avons calculé le rapport des cotes (RC) et regroupé une méta-analyse à effets aléatoires afin d'obtenir une estimation globale du lien entre l'importance pour le patient et la spécification du résultat primaire.

Résultats: Un total de 8258 résultats ont été signalés dans les 350 essais cliniques randomisés inclus (pour une médiane de 18 par essai). La proportion moyenne (par essai) de résultats importants pour le patient était de 60 %, et 66 % des essais précisaient un résultat primaire important pour le patient. Les résultats primaires importants pour le patient les plus couramment signalés étaient les événements morbides (41 %), les résultats liés à une intervention (11 %), le fonctionnement (11 %) et la douleur (9 %). Des résultats primaires de substitution ou de laboratoire ont été signalés dans 33 % et 8 % des essais, respectivement. Les résultats importants pour le patient n'étaient pas associés à la situation du résultat primaire (RC 0,82, intervalle de confiance de 95 %, 0,63-1,1, I2 = 21 %).

Conclusion: Un nombre important d'essais cliniques randomisés en chirurgie précisent des résultats primaires qui ne sont pas importants pour le patient. Les auteurs, les revues et les organismes de financement des essais devraient insister pour que les résultats importants pour le patient soient l'objet principal de l'étude.

PubMed Disclaimer

Figures

Fig. 1
Fig. 1
Selection of studies for inclusion in the review and meta-analysis.
Fig. 2
Fig. 2
Association between patient importance and specification as a primary outcome. Black points indicate odds ratios (ORs), grey squares indicate the relative weight of each trial, lines indicate 95% confidence intervals (CIs), and the diamond and dashed line the pooled OR.
See this image and copyright information in PMC

References

    1. Korolija D, Wood-Dauphinee S, Pointner R. Patient-reported outcomes. How important are they? Surg Endosc. 2007;21:503–7. - PubMed
    1. Fleming TR, DeMets DL. Surrogate end points in clinical trials: Are we being misled? Ann Intern Med. 1996;125:605–13. - PubMed
    1. Bucher HC, Guyatt GH, Cook DJ, et al. User’s guides to the medical literature: XIX. Applying clinical trial results. A. How to use an article measuring the effect of an intervention on surrogate end points. Evidence-Based Medicine Working Group. JAMA. 1999;282:771–8. - PubMed
    1. Gandhi GY, Murad MH, Fujiyoshi A, et al. Patient-important outcomes in registered diabetes trials. JAMA. 2008;299:2543–9. - PubMed
    1. Efficace F, Horneber M, Lejeune S, et al. Methodological quality of patient-reported outcome research was low in complementary and alternative medicine in oncology. J Clin Epidemiol. 2006;59:1257–65. - PubMed

MeSH terms