Statistiche e Big Data

3

Kernel PCA con kernel lineare equivale a PCA standard?

Se nel kernel PCA scelgo un kernel lineare , il risultato sarà diverso dal normale PCA lineare ? Le soluzioni sono fondamentalmente diverse o esiste qualche relazione ben definita?K(x,y)=x⊤yK(x,y)=x⊤yK(\mathbf{x},\mathbf{y}) = \mathbf x^\top \mathbf y

17 pca kernel-trick

1

Individuazione della radice per la funzione stocastica

Supponiamo di avere una funzione che possiamo osservare solo attraverso del rumore. Non possiamo calcolare direttamente f ( x ) , solo f ( x ) + η dove η è un rumore casuale. (In pratica: calcolo f ( x ) usando un metodo Monte Carlo.)f(x)f(x)f(x)f(x)f(x)f(x)f(x)+ηf(x)+ηf(x) + \etaηη\etaf(x)f(x)f(x) Quali metodi …

17 approximation

2

Un test statistico può restituire un valore p pari a zero?

Non intendo un valore vicino allo zero (arrotondato a zero da alcuni software statistici) ma piuttosto un valore letteralmente zero. In tal caso, significherebbe che anche la probabilità di ottenere i dati ottenuti assumendo che l'ipotesi nulla sia vera è zero? Quali sono (alcuni esempi) di test statistici che possono …

17 hypothesis-testing statistical-significance p-value

2

Interpretazione della regressione logistica ordinale

Ho eseguito questa regressione logistica ordinale in R: mtcars_ordinal <- polr(as.factor(carb) ~ mpg, mtcars) Ho ottenuto questo riassunto del modello: summary(mtcars_ordinal) Re-fitting to get Hessian Call: polr(formula = as.factor(carb) ~ mpg, data = mtcars) Coefficients: Value Std. Error t value mpg -0.2335 0.06855 -3.406 Intercepts: Value Std. Error t value …

17 r regression logistic interpretation ordered-logit

3

La "statistica test" è un valore o una variabile casuale?

Sono uno studente che frequenta il mio primo corso di Statistica ora. Sono confuso dal termine "statistica test". Di seguito (l'ho visto in alcuni libri di testo), sembra essere un valore specifico calcolato da un campione specifico. t = ¯ x - μ 0tttt = x¯¯¯- μ0S / n--√t=X¯-μ0S/n t=\frac{\overline{x} …

17 hypothesis-testing t-test random-variable definition

1

Il valore R-quadrato è appropriato per confrontare i modelli?

Sto cercando di identificare il modello migliore per prevedere i prezzi delle automobili, utilizzando i prezzi e le funzionalità disponibili sui siti di annunci classificati automobilistici. Per questo ho usato un paio di modelli della libreria scikit-learn e modelli di reti neurali di pybrain e neurolab. L'approccio che ho usato …

17 machine-learning neural-networks random-forest r-squared elastic-net

3

Test statistico per due distribuzioni in cui è noto solo un riepilogo di 5 numeri

Ho due distribuzioni in cui sono noti solo il riepilogo a 5 numeri (minimo, 1 ° quartile, mediana, 3 ° quartile, massimo) e la dimensione del campione. In risposta alla domanda qui , non tutti i punti dati sono disponibili. Esiste un test statistico non parametrico che mi consenta di …

17 distributions nonparametric

9

Calcolo dell'indice di Rand

Sto cercando di capire come calcolare l'indice Rand di un algoritmo di cluster, ma sono bloccato al punto come calcolare i veri e falsi negativi. Al momento sto usando l'esempio del libro An Introduction in Information Retrieval (Manning, Raghavan & Schütze, 2009). A pagina 359 parlano di come calcolare l'indice …

17 clustering

2

Due effetti principali negativi ma effetto di interazione positivo?

Ho due effetti principali, V1 e V2. Gli effetti di V1 e V2 sulle variabili di risposta sono negativi. Tuttavia, per qualche motivo sto ottenendo un coefficiente positivo per il termine di interazione V1 * V2. Come posso interpretarlo? tale situazione è possibile?

17 regression interaction

1

I modelli residui autocorrelati rimangono anche nei modelli con strutture di correlazione appropriate e come selezionare i modelli migliori?

Contesto Questa domanda utilizza R, ma riguarda questioni statistiche generali. Sto analizzando gli effetti dei fattori di mortalità (percentuale di mortalità dovuta a malattia e parassitismo) sul tasso di crescita della popolazione delle falene nel tempo, in cui le popolazioni larvali sono state campionate da 12 siti una volta all'anno …

17 model-selection autocorrelation residuals panel-data spatio-temporal

1

Cosa fanno gli "effetti" di funzione in R?

Non capisco la spiegazione nel Rfile di aiuto di effects () : Per un modello lineare adattato da lmo aov, gli effetti sono i valori non correlati di singolo grado di libertà ottenuti proiettando i dati sui sottospazi ortogonali successivi generati dalla decomposizione QR durante il processo di adattamento. Qualcuno …

17 r regression

2

La codifica variabile qualitativa nella regressione porta a "singolarità"

Ho una variabile indipendente chiamata "qualità"; questa variabile ha 3 modalità di risposta (cattiva qualità; media qualità; alta qualità). Voglio introdurre questa variabile indipendente nella mia regressione lineare multipla. Quando ho una variabile binaria indipendente (variabile fittizia, posso codificare 0/ 1) è facile introdurla in un modello di regressione lineare …

17 r regression categorical-data multicollinearity categorical-encoding

1

Quali sono gli algoritmi efficienti per calcolare la decomposizione del valore singolare (SVD)?

L'articolo di Wikipedia sull'analisi dei componenti principali afferma che Esistono algoritmi efficienti per calcolare l'SVD di senza dover formare la matrice , quindi il calcolo dell'SVD è ora il modo standard per calcolare un'analisi dei componenti principali da una matrice di dati, a meno che non sia necessaria solo una …

17 pca algorithms svd numerics

1

Domande sul principio di verosimiglianza

Attualmente cerco di capire il principio di verosimiglianza e sinceramente non lo capisco affatto. Quindi, scriverò tutte le mie domande come un elenco, anche se quelle potrebbero essere domande piuttosto elementari. Cosa significa esattamente "tutte le informazioni" nel contesto di questo principio? (come in tutte le informazioni in un campione …

17 bayesian likelihood likelihood-principle

2

Come adattare una distribuzione discreta per contare i dati?

Ho il seguente istogramma dei dati di conteggio. E vorrei inserirvi una distribuzione discreta. Non sono sicuro di come dovrei procedere. Dovrei prima sovrapporre una distribuzione discreta, diciamo distribuzione binomiale negativa, sull'istogramma in modo da ottenere i parametri della distribuzione discreta e quindi eseguire un test di Kolmogorov – Smirnov …

17 r poisson-distribution discrete-data computational-statistics negative-binomial