Statistiche e Big Data correlation

4

Correzione dei valori p per più test in cui i test sono correlati (genetica)

Ho valori di p da molti test e vorrei sapere se in realtà c'è qualcosa di significativo dopo aver corretto per più test. La complicazione: i miei test non sono indipendenti. Il metodo a cui sto pensando (una variante del metodo del prodotto di Fisher, Zaykin et al., Genet Epidemiol …

24 correlation multiple-comparisons statistical-significance genetics

3

Come testare l'autocorrelazione dei residui?

Ho una matrice con due colonne che hanno molti prezzi (750). Nell'immagine qui sotto ho tracciato i residui della seguente regressione lineare: lm(prices[,1] ~ prices[,2]) Guardando l'immagine, sembra essere una forte autocorrelazione dei residui. Tuttavia, come posso verificare se l'autocorrelazione di tali residui è forte? Quale metodo dovrei usare? Grazie!

23 r regression correlation autocorrelation

3

Genera dati correlati casuali tra una variabile binaria e una continua

Voglio generare due variabili. Uno è una variabile di risultato binario (dire successo / fallimento) e l'altro è l'età in anni. Voglio che l'età sia correlata positivamente con il successo. Ad esempio, dovrebbero esserci più successi nei segmenti di età superiore rispetto a quelli inferiori. Idealmente, dovrei essere in grado …

23 correlation random-variable random-generation binary-data

2

Clustering delle variabili in base alle correlazioni tra di loro

Domande: Ho una grande matrice di correlazione. Invece di raggruppare singole correlazioni, voglio raggruppare le variabili in base alle loro correlazioni reciproche, vale a dire se la variabile A e la variabile B hanno correlazioni simili alle variabili da C a Z, allora A e B dovrebbero far parte dello …

23 correlation clustering correlation-matrix

2

Definizione del tempo di autocorrelazione (per dimensioni del campione effettive)

Ho trovato due definizioni in letteratura per il tempo di autocorrelazione di una serie temporale debolmente stazionaria: τun'= 1 + 2 ∑k = 1∞ρKcontroτB= 1 + 2 ∑k = 1∞|ρK|τun'=1+2ΣK=1∞ρKcontroτB=1+2ΣK=1∞|ρK| \tau_a = 1+2\sum_{k=1}^\infty \rho_k \quad \text{versus} \quad \tau_b = 1+2\sum_{k=1}^\infty \left|\rho_k\right| dove è l'autocorrelazione al ritardok. ρK= Cov [ Xt, …

23 r time-series correlation

5

Quando A e B sono variabili correlate positivamente, possono avere un effetto opposto sulla loro variabile di risultato C?

A è positivamente correlato a B. C è il risultato di A e B, ma l'effetto di A su C è negativo e l'effetto di B su C è positivo. Questo può succedere?

22 regression correlation

1

Utilizzo della correlazione come metrica della distanza (per il clustering gerarchico)

Vorrei raggruppare gerarchicamente i miei dati, ma piuttosto che usare la distanza euclidea, vorrei usare la correlazione. Inoltre, poiché il coefficiente di correlazione varia da -1 a 1, con -1 e 1 che indicano "coregolamentazione" nel mio studio, sto trattando sia -1 che 1 come d = 0. Quindi il …

22 correlation clustering distance hierarchical-clustering

2

Shrunken

C'è stato un po 'di confusione nella mia testa riguardo a due tipi di stimatori del valore della popolazione del coefficiente di correlazione di Pearson. A. Fisher (1915) ha mostrato che per la popolazione normale bivariata empirica è un prevenuto negativamente stimatore , anche se la polarizzazione può essere di …

22 correlation pearson-r unbiased-estimator estimators point-estimation

2

Generazione di dati con una data matrice di covarianza campione

Data una matrice di covarianza ΣSΣs\boldsymbol \Sigma_s , come generare dati in modo tale da avere la matrice di covarianza di esempio Σ^= ΣSΣ^=Σs\hat{\boldsymbol \Sigma} = \boldsymbol \Sigma_s ? Più in generale: siamo spesso interessati a generare dati da una densità f( x | θ )f(x|θ) f(x \vert \boldsymbol\theta) , …

22 correlation sampling random-generation covariance-matrix

1

Cosa potrebbe causare grandi differenze nel coefficiente di correlazione tra la correlazione di Pearson e Spearman per un determinato set di dati?

Il coefficiente di Pearson tra due variabili è piuttosto elevato (r = .65). Ma quando classifico i valori delle variabili ed eseguo una correlazione di Spearman, il valore del cliente è molto più basso (r = .30). Qual è l'interpretazione di questo?

22 correlation spearman-rho

2

Buona risorsa online con suggerimenti sull'associazione grafica tra due variabili numeriche in varie condizioni

Contesto: Nel frattempo ho acquisito una serie di euristiche su come tracciare in modo efficace l'associazione tra due variabili numeriche. Immagino che la maggior parte delle persone che lavorano con i dati avrebbe un insieme simile di regole. Esempi di tali regole potrebbero essere: Se una delle variabili è inclinata …

22 data-visualization correlation teaching rule-of-thumb scatterplot

3

Stima non distorta della matrice di covarianza per moltiplicare i dati censurati

Le analisi chimiche dei campioni ambientali sono spesso censurate di seguito ai limiti di segnalazione o ai vari limiti di rilevazione / quantificazione. Quest'ultimo può variare, generalmente in proporzione ai valori di altre variabili. Ad esempio, potrebbe essere necessario diluire un campione con un'alta concentrazione di un composto per l'analisi, …

22 correlation estimation censoring covariance-matrix unbiased-estimator

1

Test statistici comuni come modelli lineari

(AGGIORNAMENTO: mi sono approfondito e ho pubblicato i risultati qui ) L'elenco dei test statistici nominati è enorme. Molti dei test comuni si basano sull'inferenza da semplici modelli lineari, ad esempio un test t di un campione è solo y = β + ε che viene testato rispetto al modello …

22 regression correlation anova t-test linear-model

1

C'è qualche differenza tra e ?

Il coefficiente di correlazione è solitamente scritto con una maiuscola ma a volte no. Mi chiedo se c'è davvero una differenza tra e ? può significare qualcos'altro oltre a un coefficiente di correlazione?r 2 R 2 rRRRr2r2r^2R2R2R^2rrr

22 correlation terminology r-squared

4

Differenza tra i presupposti alla base di una correlazione e una pendenza test di significatività

La mia domanda è nata da una discussione con @whuber nei commenti di un'altra domanda . Nello specifico, il commento di @whuber è stato il seguente: Uno dei motivi per cui potrebbe sorprenderti è che le ipotesi alla base di un test di correlazione e di un test di pendenza …

21 regression correlation p-value assumptions

Domande taggate «correlation»