THE FAULTY STATISTICS OF COMPLEMENTARY ALTERNATIVE MEDICINE (CAM)

THE FAULTY STATISTICS OF COMPLEMENTARY ALTERNATIVE MEDICINE (CAM) by M Pandolfi, G Carreras. European Journal of Internal Medicine, June 2014

ABSTRACT The authors illustrate the difficulties involved in obtaining a valid statistical significance in clinical studies especially when the prior probability of the hypothesis under scrutiny is low. Since the prior probability of a research hypothesis is directly related to its scientific plausibility, the commonly used frequentist statistics, which does not take into account this probability, is particularly unsuitable for studies exploring matters in various degree disconnected from science such as complementary alternative medicine (CAM) interventions. Any statistical significance obtained in this field should be considered with great caution and may be better applied to more plausible hypotheses (like placebo effect) than that examined – which usually is the specific efficacy of the intervention. 

Since achieving meaningful statistical significance is an essential step in the validation of medical interventions, CAM practices, producing only outcomes inherently resistant to statistical validation, appear not to belong to modern evidence-based medicine. 

La tesi di questo articolo, per ora apparso online, è che le medicine non convenzionali o CAM non possono essere considerate "evidence-based" come asserito da chi le sostiene perchè i loro trial clinici si sono finora serviti di una statistica inferenziale non adatta a valutarli. Questa statistica (detta frequentistica che si esprime in termini di p-value e che non prende in considerazione la probabilità a priori dell'ipotesi in esame) può funzionare negli ordinari studi clinici che testano ipotesi plausibili ma non può essere impiegata nel caso delle CAM le cui ipotesi cliniche (in genere l'effetto specifico dell'intervento) hanno una bassa probabilità a priori di essere corrette dato le insufficienti basi scientifiche di questi interventi. Così, i risultati positivi talvolta ottenuti in questi studi vanno attribuiti a ipotesi di ricerca più probabili quali l'effetto placebo.