Statistiche e Big Data

1

Come testare la mediana di una popolazione?

Ho un campione di 250 unità. La distribuzione è asimmetrica. Voglio testare un'ipotesi che la mediana della popolazione sia diversa dalla 3.5, quindi penso che un test a un campione sarebbe appropriato. So che il test dei ranghi di Wilcoxon non è appropriato perché la distribuzione non è simmetrica. È …

9 hypothesis-testing median

3

Stimare la massa di frutta in un sacchetto solo dai totali correlati?

Un istruttore della mia università ha posto una domanda del genere (non per i compiti da quando la lezione è finita e io non ci ho partecipato). Non riesco a capire come affrontarlo. La domanda riguarda 2 buste contenenti ciascuna un assortimento di diversi tipi di frutta: La prima busta …

9 regression estimation

2

Il campionamento basato sulla catena Markov è il “migliore” per il campionamento Monte Carlo? Sono disponibili schemi alternativi?

Catena di Markov Monte Carlo è un metodo basato sulle catene di Markov che ci consente di ottenere campioni (in un'impostazione Monte Carlo) da distribuzioni non standard da cui non è possibile prelevare campioni direttamente. La mia domanda è: perché la catena Markov è "all'avanguardia" per il campionamento Monte Carlo. …

9 sampling mcmc monte-carlo markov-chain stochastic-approximation

1

Soluzione all'esercizio 2.2a.16 di "Statistiche affidabili: l'approccio basato sulle funzioni di influenza"

A pagina 180 di statistiche affidabili: l'approccio basato sulle funzioni di influenza si trova la seguente domanda: 16: Mostra che per gli stimatori invarianti di posizione sempre . Trova il limite superiore corrispondente sul punto di campione finito , entrambi nel caso in cui è dispari o è pari.ε∗≤12ε∗≤12\varepsilon^*\leq\frac{1}{2}ε∗nεn∗\varepsilon^*_nnnnnnn La …

9 self-study robust

3

Dimensione VC di un rettangolo

Il libro "Introduzione all'apprendimento automatico" di Ethem Alpaydın afferma che la dimensione VC di un rettangolo allineato agli assi è 4. Ma come può un rettangolo frantumare un insieme di quattro punti collineari con punti positivi e negativi alternati ?? Qualcuno può spiegare e dimostrare la dimensione VC di un …

9 classification vc-dimension

1

Come interpretare la varianza dell'effetto casuale in un modello misto lineare generalizzato

In un modello misto lineare generalizzato logistico (famiglia = binomiale), non so come interpretare la varianza degli effetti casuali: Random effects: Groups Name Variance Std.Dev. HOSPITAL (Intercept) 0.4295 0.6554 Number of obs: 2275, groups: HOSPITAL, 14 Come interpreto questo risultato numerico? Ho un campione di pazienti trapiantati renali in uno …

9 r lme4-nlme

1

Derivazione interessante di R al quadrato

Anni fa ho trovato questa identità attraverso la sperimentazione giocando con dati e trasformazioni. Dopo averlo spiegato al mio professore di statistica, è arrivato alla lezione successiva con una prova di una pagina usando la notazione vettoriale e matrice. Purtroppo ho perso il foglio che mi ha dato. (Era il …

9 regression r-squared

2

Genera matrice definita positiva simmetrica con un modello di sparsità predefinito

Sto cercando di generare una matrice di correlazione (psd simmetrica) con una struttura di sparsità pre-specificata (specificata da un grafico su nodi ). I nodi collegati nel grafico hanno correlazione , resto tutti sono 0 e la diagonale è tutto 1.p ρ ∼ U ( 0 , 1 )p×pp×pp\times ppppρ∼U(0,1)ρ∼U(0,1)\rho …

9 correlation matrix sparse correlation-matrix

3

ImageNet: cosa significa l'errore cinque principali?

Uno dei metodi di valutazione per il concorso ImageNet (classificare immagini di 1.000 categorie) è l'errore top-5, cosa significa? Vedi: http://www.image-net.org/challenges/LSVRC/

9 machine-learning classification computer-vision

2

Campionamento CDF inverso per una distribuzione mista

La versione breve fuori contesto Sia yyy una variabile casuale con CDF F( ⋅ ) ≡ { θθ + ( 1 - θ ) × CDFlog-normale( ⋅ ; μ , σ) y = 0 y> 0F(⋅)≡{θ y = 0 θ+(1−θ)×CDFlog-normal(⋅;μ,σ) y > 0 F(\cdot) \equiv \cases{\theta & y = 0 …

9 r distributions sampling simulation copula

2

Come si relazionano i residui ai disturbi sottostanti?

Nel metodo dei minimi quadrati vogliamo stimare i parametri sconosciuti nel modello: Yj= α + βXj+ εj( j = 1 ... n )Yj=α+βxj+εj(j=1...n)Y_j = \alpha + \beta x_j + \varepsilon_j \enspace (j=1...n) Una volta che lo abbiamo fatto (per alcuni valori osservati), otteniamo la linea di regressione adattata: Yj= α^+ …

9 regression least-squares residuals heteroscedasticity assumptions

1

Cosa sta facendo PCA con i dati autocorrelati?

Solo perché alcuni corrispondenti hanno posto una domanda interessante riguardo ai metodi di calcolo dell'autocorrelazione, ho iniziato a giocarci, quasi senza alcuna conoscenza delle serie temporali e dell'autocorrelazione. Il corrispondente ha organizzato i suoi dati ( punti dati di una serie temporale) spostati di un intervallo di tempo ciascuno in …

9 time-series pca

2

Il controllo delle probabilità proporzionali presuppone una regressione logistica ordinale usando la funzione polr

Ho usato la funzione 'polr' nel pacchetto MASS per eseguire una regressione logistica ordinale per una variabile di risposta categoriale ordinale con 15 variabili esplicative continue. Ho usato il codice (mostrato sotto) per verificare che il mio modello soddisfi il presupposto delle quote proporzionali seguendo i consigli forniti nella guida …

9 r logistic assumptions ordered-logit polr

1

Le stime dell'intercetta e della pendenza nella regressione lineare semplice sono indipendenti?

Considera un modello lineare yi=α+βxi+ϵiyi=α+βxi+ϵiy_i= \alpha + \beta x_i + \epsilon_i e stime per la pendenza e intercettare e usando i minimi quadrati ordinari. Questo riferimento per una statistica matematica rende l'affermazione che e sono indipendenti (nella loro prova del loro teorema). ß alfa ßα^α^\hat{\alpha}β^β^\hat{\beta}α^α^\hat{\alpha}β^β^\hat{\beta} Non sono sicuro di capire …

9 regression

1

Quali criteri utilizzare per separare le variabili in variabili esplicative e le risposte ai metodi di ordinazione in ecologia?

Ho diverse variabili che interagiscono all'interno di una popolazione. Fondamentalmente ho fatto un inventario di millepiedi e misurato alcuni altri valori del terreno, come: Le specie e la quantità di esemplari raccolti I diversi ambienti in cui si trovano gli animali il pH La percentuale di materiale organico la quantità …

9 pca multivariate-analysis ecology correspondence-analysis