Statistiche e Big Data

1

Notazione in abbonamento nelle aspettative

Qual è il significato esatto della notazione dei pedici nelle aspettative condizionali nel quadro della teoria delle misure? Questi pedici non compaiono nella definizione di aspettativa condizionale, ma possiamo vedere ad esempio in questa pagina di Wikipedia . (Nota che non è stato sempre così, la stessa pagina qualche mese …

64 conditional-expectation notation

3

Quando utilizzare equazioni di stima generalizzate rispetto a modelli di effetti misti?

Da un po 'di tempo uso felicemente modelli di effetti misti con dati longitudinali. Vorrei poter inserire le relazioni AR in lmer (penso di aver ragione nel non poterlo fare?) Ma non penso che sia disperatamente importante, quindi non mi preoccupo troppo. Ho appena incontrato equazioni di stima generalizzate (GEE) …

63 mixed-model gee

9

Elenco di situazioni in cui un approccio bayesiano è più semplice, più pratico o più conveniente

Ci sono stati molti dibattiti nelle statistiche tra bayesiani e frequentisti. In genere li trovo piuttosto scoraggianti (anche se penso che sia morto). D'altra parte, ho incontrato diverse persone che hanno una visione del tutto pragmatica del problema, dicendo che a volte è più conveniente condurre un'analisi frequentista e talvolta …

63 bayesian frequentist

3

Riferimenti contenenti argomenti contro il test di significatività dell'ipotesi nulla?

Negli ultimi anni ho letto una serie di articoli che discutono contro l'uso di test di significatività dell'ipotesi nulla nella scienza, ma non ho pensato di mantenere un elenco persistente. Di recente un collega mi ha chiesto un simile elenco, quindi ho pensato di chiedere a tutti qui di aiutarlo …

63 hypothesis-testing statistical-significance references p-value

10

Taleb e il cigno nero

Il libro di Taleb "The Black Swan" è stato un best seller del New York Times quando è uscito diversi anni fa. Il libro è ora alla sua seconda edizione. Dopo l'incontro con gli statistici a un JSM (una conferenza statistica annuale), Taleb ha attenuato in qualche modo la sua …

63 extreme-value rare-events

8

La PCA è seguita da una rotazione (come varimax) è ancora PCA?

Ho provato a riprodurre alcune ricerche (usando PCA) da SPSS in R. Nella mia esperienza, la principal() funzione dal pacchetto è psychstata l'unica funzione che si è avvicinata (o se la mia memoria mi serve bene, esaurita) per abbinare l'output. Per abbinare gli stessi risultati di SPSS, ho dovuto usare …

63 r spss pca factor-analysis factor-rotation

5

Spiega la differenza tra regressione multipla e regressione multivariata, con un uso minimo di simboli / matematica

La regressione multipla e multivariata è davvero diversa? Che cosa è un variata in ogni modo?

63 regression multiple-regression terminology multivariate-regression

10

Qual è la differenza tra i dati discreti e continui di dati?

63 continuous-data discrete-data

4

Funzione Softmax vs Sigmoid nel classificatore logistico?

Cosa decide la scelta della funzione (Softmax vs Sigmoid) in un classificatore logistico? Supponiamo che ci siano 4 classi di output. Ciascuna delle funzioni di cui sopra fornisce le probabilità che ciascuna classe sia l'output corretto. Quindi quale prendere per un classificatore?

63 machine-learning logistic classification softmax

4

Come devono essere riportati i piccoli valori ? (e perché R pone un minimo su 2.22e-16?)

Per alcuni test R, esiste un limite inferiore per i calcoli del valore p di . Non sono sicuro del perché sia questo numero, se c'è una buona ragione o se è arbitrario. Molti altri pacchetti di statistiche vanno solo a , quindi questo è un livello di precisione molto …

63 r p-value reporting precision

3

Qual è la differenza tra una rete neurale e una rete di credenze profonde?

Ho l'impressione che quando le persone si riferiscono a una rete di "convinzioni profonde" si tratti sostanzialmente di una rete neurale ma di dimensioni molto grandi. È corretto o una rete di credenze profonde implica anche che l'algoritmo stesso è diverso (ovvero, nessuna rete neurale feed forward ma forse qualcosa …

62 machine-learning neural-networks deep-learning deep-belief-networks

6

Perché l'algoritmo di clustering k-mean usa solo la metrica della distanza euclidea?

Esiste uno scopo specifico in termini di efficienza o funzionalità perché l'algoritmo k-mean non utilizza ad esempio la cosine (dis) somiglianza come metrica della distanza, ma può usare solo la norma euclidea? In generale, il metodo K-mean sarà conforme e sarà corretto quando verranno prese in considerazione o utilizzate distanze …

62 clustering k-means distance-functions euclidean

4

Ipotesi relative alle stime di incertezza del bootstrap

Apprezzo l'utilità del bootstrap per ottenere stime di incertezza, ma una cosa che mi ha sempre infastidito è che la distribuzione corrispondente a tali stime è la distribuzione definita dal campione. In generale, sembra una cattiva idea credere che le nostre frequenze di campionamento assomiglino esattamente alla distribuzione sottostante, quindi …

62 bootstrap uncertainty

3

Come tracciare un albero di esempio da randomForest :: getTree ()? [chiuso]

Chiunque ha ricevuto suggerimenti sulla libreria o sul codice su come tracciare effettivamente un paio di alberi di esempio da: getTree(rfobj, k, labelVar=TRUE) (Sì, lo so che non dovresti farlo operativamente, RF è una scatola nera, ecc. Ecc. Voglio controllare visivamente la sanità mentale di un albero per vedere se …

62 r data-visualization random-forest cart

8

Bayesiani: schiavi della funzione di verosimiglianza?

Nel suo libro "Tutte le statistiche", il Prof. Larry Wasserman presenta il seguente esempio (11.10, pagina 188). Supponiamo di avere una densità tale che , dove è una funzione nota (non negativa, integrabile) e la costante di normalizzazione è sconosciuta .ffff(x)=cg(x)f(x)=cg(x)f(x)=c\,g(x)c > 0gggc>0c>0c>0 Siamo interessati a quei casi in cui …

62 bayesian mathematical-statistics