Come quantificare l'insignificanza statistica?

Sono relativamente nuovo alle statistiche e capisco che la mia domanda potrebbe essere completamente errata. Sto testando il mio algoritmo contro un altro. Mentre le uscite non sono identiche, voglio mostrare che le differenze sono "statisticamente insignificanti". Come posso quantificare questo, per fare il mio punto?

correlation statistical-significance dataset

— Adam_G
fonte

Dipende dal tipo di dati con cui hai a che fare e dalla grandezza dei tuoi campioni. Puoi modificare il tuo post per includere una risposta più dettagliata?

— nought101

Il test di equivalenza viene sottoposto a polvere per rifiutare la non equivalenza. Ti costringe a scegliere la dimensione del campione abbastanza grande da avere potenza. Senza invertire l'ipotesi nulla e alternativa in piccoli campioni avresti pochissimo cambiamento nel rifiutare l'ipotesi nulla di nessuna differenza. Ma non rifiutare non equivale ad accettare a causa della mancanza di potere, ecco perché Blackwelder rende la non equavalenza l'ipotesi nulla e mostrare l'equivalenza richiede il rifiuto del nulla.

— Michael R. Chernick,

Si noti che l'ipotesi nulla è che la differenza nelle medie sia maggiore di un delta specificato (la finestra di equivalenza).

— Michael R. Chernick,

Se si stanno confrontando due gruppi e non si desidera mostrare alcuna differenza significativa, si parla di test di equivalenza. In sostanza, inverte l'ipotesi nulla e alternativa. L'idea è di definire un intervallo di insignificanza chiamato finestra di equivalenza. Questo è usato molto quando si cerca di dimostrare che un farmaco generico è un sostituto adatto per un farmaco commercializzato. Una buona fonte da leggere al riguardo è l'articolo di William Blackwelder intitolato "Provare l'ipotesi nulla" negli studi clinici .

— Michael R. Chernick
fonte

Grazie Michael. Immagino di dover fare ancora un po 'di lavoro prima di poter dichiarare i dati "significativi" o "insignificanti". Inizierò a esaminare questo, e farò sapere a voi ragazzi se ho domande di follow-up, che sono sicuro che lo farò.

— Adam_G,

Solo un ultimo commento. La versione unilaterale dell'equivalenza si chiama non inferiorità. Spesso i produttori di farmaci possono immettere sul mercato un cosiddetto farmaco "anch'io" che non deve nemmeno essere altrettanto efficace in termini di efficacia del concorrente commercializzato, purché non sia molto peggio (definito da un delta che è una finestra per la non inferiorità) Questo può essere fatto perché il prodotto offre qualche altro vantaggio al consumatore, come un minor numero di dosi al giorno o come nel caso di un anticoagulante che non necessita di monitoraggio INR

— Michael R. Chernick,