La mia comprensione è che un'analisi di potenza è post hoc se e solo se utilizza la dimensione dell'effetto osservato come dimensione dell'effetto della popolazione target.
La mia comprensione è che un'analisi di potenza è post hoc se e solo se utilizza la dimensione dell'effetto osservato come dimensione dell'effetto della popolazione target.
Risposte:
Nel mio campo vedo persone che eseguono analisi di potenza post-hoc quando lo scopo del documento è quello di dimostrare che alcuni effetti che ci si potrebbe aspettare di essere presenti (o a causa di letteratura precedente, buon senso, ecc.) Non lo sono, almeno secondo a qualche test di significatività.
Tuttavia, in queste situazioni, il ricercatore è un po 'in difficoltà - potrebbe aver ottenuto un risultato non significativo o perché l'effetto non è realmente presente nella popolazione o perché lo studio non è stato sufficientemente potenziato per rilevare il effetto anche se fosse presente. Lo scopo dell'analisi di potenza, quindi, è quello di mostrare che, dato anche un effetto banalmente piccolo sulla popolazione, lo studio avrebbe avuto un'alta probabilità di rilevare tale effetto.
Per un esempio concreto di questo uso dell'analisi di potenza post-hoc, vedere questo documento collegato.
Puoi sempre calcolare la probabilità che uno studio avrebbe prodotto un risultato significativo per una determinata dimensione dell'effetto a priori. In teoria, ciò dovrebbe essere fatto prima di condurre uno studio perché non ha senso condurre uno studio a bassa potenza che ha una bassa probabilità di produrre un risultato significativo quando è presente un effetto. Tuttavia, puoi anche calcolare la potenza dopo lo studio per rendersi conto che uno studio aveva una bassa potenza o, probabilmente, un'alta potenza per rilevare anche un piccolo effetto.
Il termine potenza post-hoc o osservata viene utilizzato per l'analisi della potenza che utilizza le dimensioni degli effetti osservati in un campione per calcolare la potenza presupponendo che la dimensione dell'effetto osservato sia una stima ragionevole della dimensione dell'effetto reale. Molti statistici hanno sottolineato che il potere osservato in un singolo studio non è molto informativo perché le dimensioni dell'effetto non sono stimate con sufficiente precisione per essere informative. Più recentemente, i ricercatori hanno iniziato a esaminare il potere osservato per una serie di studi per esaminare in media quanto siano potenti gli studi e se gli studi riportano risultati più significativi di quanto il potere effettivo degli studi giustificherebbe.