S'abonner

Data reproducibility issues and their potential impact on conclusions from evidence syntheses of randomized controlled trials in sleep medicine - 04/12/22

Doi : 10.1016/j.smrv.2022.101708 
Chang Xu a, b, Suhail A.R. Doi c, Xiaoqin Zhou d, Lifeng Lin e, Luis Furuya-Kanamori f, Fangbiao Tao a, b,
a Ministry of Education Key Laboratory for Population Health Across-life Cycle & Anhui Provincial Key Laboratory of Population Health and Aristogenics, Anhui Medical University, Anhui, China 
b School of Public Health, Anhui Medical University, Anhui, China 
c Department of Population Medicine, College of Medicine, QU Health, Qatar University, Doha, Qatar 
d Department of Clinical Research Management, West China Hospital, Sichuan University, China 
e Department of Epidemiology and Biostatistics, University of Arizona, Tucson, AZ, USA 
f UQ Centre for Clinical Research, Faculty of Medicine, The University of Queensland, Brisbane, Australia 

Corresponding author. Ministry of Education Key Laboratory for Population Health Across-life Cycle, Anhui Medical University, Anhui, China.Ministry of Education Key Laboratory for Population Health Across-life CycleAnhui Medical UniversityAnhuiChina

Abstract

In this study, we examined the data reproducibility issues in systematic reviews in sleep medicine. We searched for systematic reviews of randomized controlled trials published in sleep medicine journals. The metadata in meta-analyses among the eligible systematic reviews were collected. The original sources of the data were reviewed to see if the components used in the meta-analyses were correctly extracted or estimated. The impacts of the data reproducibility issues were investigated. We identified 48 systematic reviews with 244 meta-analyses of continuous outcomes and 54 of binary outcomes. Our results suggest that for continuous outcomes, 20.03% of the data used in meta-analyses cannot be reproduced at the trial level, and 43.44% of the data cannot be reproduced at the meta-analysis level. For binary outcomes, the proportions were 14.14% and 40.74%. In total, 83.33% of the data cannot be reproduced at the systematic review level. Our further analysis suggested that these reproducibility issues would lead to as much as 6.52% of the available meta-analyses changing the direction of the effects, and 9.78% changing the significance of the P-values. Sleep medicine systematic reviews and meta-analyses face serious issues in terms of data reproducibility, and further efforts are urgently needed to improve this situation.

Le texte complet de cet article est disponible en PDF.

Keywords : Reproducibility, Data extraction errors, Evidence synthesis practice, Sleep medicine

Abbreviations : CI, IQR, MD, OR, PRISMA, RCT, RR, SD, SMD


Plan


© 2022  Elsevier Ltd. Tous droits réservés.
Ajouter à ma bibliothèque Retirer de ma bibliothèque Imprimer
Export

    Export citations

  • Fichier

  • Contenu

Vol 66

Article 101708- décembre 2022 Retour au numéro
Article précédent Article précédent
  • Comparison of the effectiveness of cognitive behavioral therapy for insomnia, cognitive behavioral therapy for pain, and hybrid cognitive behavioral therapy for insomnia and pain in individuals with comorbid insomnia and chronic pain: A systematic review and network meta-analysis
  • Kiyoka Enomoto, Tomonori Adachi, Haruo Fujino, Masato Kugo, Sakura Tatsumi, Jun Sasaki
| Article suivant Article suivant
  • Commentary on Alimoradi et al.: Effects of cognitive behavioral therapy for insomnia on quality of life
  • Zhongbo Liu, Xiaoqiang Wang, Xiyan He

Bienvenue sur EM-consulte, la référence des professionnels de santé.
L’accès au texte intégral de cet article nécessite un abonnement.

Déjà abonné à cette revue ?

Elsevier s'engage à rendre ses eBooks accessibles et à se conformer aux lois applicables. Compte tenu de notre vaste bibliothèque de titres, il existe des cas où rendre un livre électronique entièrement accessible présente des défis uniques et l'inclusion de fonctionnalités complètes pourrait transformer sa nature au point de ne plus servir son objectif principal ou d'entraîner un fardeau disproportionné pour l'éditeur. Par conséquent, l'accessibilité de cet eBook peut être limitée. Voir plus

Mon compte


Plateformes Elsevier Masson

Déclaration CNIL

EM-CONSULTE.COM est déclaré à la CNIL, déclaration n° 1286925.

En application de la loi nº78-17 du 6 janvier 1978 relative à l'informatique, aux fichiers et aux libertés, vous disposez des droits d'opposition (art.26 de la loi), d'accès (art.34 à 38 de la loi), et de rectification (art.36 de la loi) des données vous concernant. Ainsi, vous pouvez exiger que soient rectifiées, complétées, clarifiées, mises à jour ou effacées les informations vous concernant qui sont inexactes, incomplètes, équivoques, périmées ou dont la collecte ou l'utilisation ou la conservation est interdite.
Les informations personnelles concernant les visiteurs de notre site, y compris leur identité, sont confidentielles.
Le responsable du site s'engage sur l'honneur à respecter les conditions légales de confidentialité applicables en France et à ne pas divulguer ces informations à des tiers.


Tout le contenu de ce site: Copyright © 2026 Elsevier, ses concédants de licence et ses contributeurs. Tout les droits sont réservés, y compris ceux relatifs à l'exploration de textes et de données, a la formation en IA et aux technologies similaires. Pour tout contenu en libre accès, les conditions de licence Creative Commons s'appliquent.