Statistiche e Big Data

1

Cosa sono le norme e in che modo sono rilevanti per la regolarizzazione?

Ultimamente ho visto molti articoli su rappresentazioni sparse e la maggior parte di loro usa la norma e minimizza. La mia domanda è: qual è la norma e la norma mista ? E come sono rilevanti per la regolarizzazione?ℓpℓp\ell_pℓpℓp\ell_pℓp,qℓp,q\ell_{p, q} Grazie

12 machine-learning regularization sparse

2

Borsa di parole vs modello spaziale vettoriale?

Qual è / sono le differenze tra questi modelli di rappresentazione del testo: sacco di parole e modello dello spazio vettoriale?

12 machine-learning text-mining

4

Quali sono i test statistici standard per vedere se i dati seguono distribuzioni esponenziali o normali?

12 distributions hypothesis-testing normal-distribution

3

Qual è la differenza tra linearmente dipendente e linearmente correlato?

Spiegare qual è la differenza tra se due variabili sono linearmente dipendenti o linearmente correlate . Ho cercato l'articolo di Wikipedia ma non ho avuto un esempio corretto. Per favore spiegalo con l'esempio.

12 correlation non-independent

1

Distribuzione normale multivariata del coefficiente di regressione?

Durante la lettura di un libro di testo sulla regressione ho riscontrato il seguente paragrafo: La stima dei minimi quadrati di un vettore di coefficienti di regressione lineare ( ) èββ\beta β^=(XtX)−1Xtyβ^=(XtX)−1Xty \hat{\beta} = (X^{t}X)^{-1}{X^t}y che, se considerato come una funzione dei dati yyy (considerando i predittori XXX come costanti), …

12 multiple-regression

1

Come posso adattare un modello di effetti misti non lineari per dati di misure ripetute usando nlmer ()?

Sto cercando di analizzare i dati di misure ripetute e sto lottando per farli funzionare R. I miei dati sono essenzialmente i seguenti, ho due gruppi di trattamento. Ogni soggetto in ciascun gruppo viene testato ogni giorno e viene assegnato un punteggio (la percentuale corretta su un test). I dati …

12 r mixed-model repeated-measures lme4-nlme

2

Cosa indica quando la correlazione di Spearman è una quantità definita inferiore a Pearson?

Ho un sacco di set di dati correlati. Le correlazioni di Pearson tra le coppie sono in genere decisamente più grandi delle correlazioni di Spearman. Ciò suggerisce che qualsiasi correlazione è lineare, ma ci si potrebbe aspettare che anche se Pearson e Spearman fossero gli stessi. Che cosa significa quando …

12 correlation spearman-rho pearson-r

3

Relazione tra due serie storiche: ARIMA

Date le seguenti due serie temporali ( x , y ; vedi sotto), qual è il metodo migliore per modellare la relazione tra le tendenze a lungo termine in questi dati? Entrambe le serie storiche hanno test significativi di Durbin-Watson se modellate in funzione del tempo e nessuna delle due …

12 regression time-series arima

1

Prova che se esiste un momento superiore, esiste anche un momento inferiore

Il momento di una variabile casuale è finito se \ mathbb E (| X ^ r |) <\ infty rrrXXXE(|Xr|)<∞E(|Xr|)<∞ \mathbb E(|X^r|)< \infty Sto cercando di mostrare che per qualsiasi numero intero positivo s<rs<rs<r , allora anche il momento sss -th E[|Xs|]E[|Xs|]\mathbb E[|X^s|] è finito.

12 self-study moments function

4

Bootstrap, Monte Carlo

Mi è stata posta la seguente domanda come parte dei compiti: Progettare e implementare uno studio di simulazione per esaminare le prestazioni del bootstrap per ottenere intervalli di confidenza al 95% sulla media di un campione univariato di dati. L'implementazione può essere in R o SAS. Gli aspetti delle prestazioni …

12 r self-study bootstrap monte-carlo

3

Come ricampionare in R senza ripetere le permutazioni?

In R, se set.seed () e quindi utilizzo la funzione di esempio per randomizzare un elenco, posso garantire che non genererò la stessa permutazione? vale a dire ... set.seed(25) limit <- 3 myindex <- seq(0,limit) for (x in seq(1,factorial(limit))) { permutations <- sample(myindex) print(permutations) } Questo produce [1] 1 2 …

12 r sampling combinatorics resampling

2

Le foreste casuali mostrano una propensione alla previsione?

Penso che questa sia una domanda semplice, anche se il ragionamento alla base del perché o del perché potrebbe non esserlo. Il motivo per cui mi chiedo è che di recente ho scritto la mia implementazione di una RF e sebbene funzioni bene, non sta funzionando come mi aspettavo (basato …

12 algorithms random-forest cart

3

Effetto marginale del modello Probit e Logit

Qualcuno può spiegare come calcolare l'effetto marginale del modello Probit e Logit in parole povere? Sono nuovo nelle statistiche e sono confuso su questi due modelli.

12 logistic interpretation logit probit

5

Quale linguaggio di programmazione mi consiglia di prototipare un problema di apprendimento automatico?

Attualmente lavora in Octave, ma a causa della scarsa documentazione i progressi sono molto lenti. Quale lingua è facile da imparare e usare e ben documentata per risolvere i problemi di apprendimento automatico? Sto cercando di prototipare su un piccolo set di dati (migliaia di esempi), quindi la velocità non …

12 r machine-learning matlab software python

2

Come posso impostare un poisson gonfiato a zero in JAGS?

Sto cercando di impostare un modello poisson gonfiato a zero in R e JAGS. Sono nuovo di JAGS e ho bisogno di alcune indicazioni su come farlo. Ho provato con quanto segue in cui y [i] è la variabile osservata model { for (i in 1:I) { y.null[i] <- 0 …

12 r poisson-distribution jags zero-inflation