Statistiche e Big Data

Domande e risposte per le persone interessate alle statistiche, all'apprendimento automatico, all'analisi dei dati, al data mining e alla visualizzazione dei dati

1
Come interpretare i risultati quando sia la cresta che il lazo funzionano separatamente ma producono coefficienti diversi
Sto eseguendo un modello di regressione sia con Lasso che con Ridge (per prevedere una variabile di esito discreto che varia da 0-5). Prima di eseguire il modello, utilizzo il SelectKBestmetodo di scikit-learnper ridurre il set di funzionalità da 250 a 25 . Senza una selezione iniziale delle caratteristiche, sia …
2
Leggere trame di scatole e baffi: è possibile raccogliere differenze significative tra i gruppi?
Supponiamo che stiamo guardando questo complotto box-and-whisker: Tra giovedì e venerdì, penso che la maggior parte sarebbe d'accordo sul fatto che sembra esserci una differenza significativa nel tempo dormito. È una congettura statisticamente valida, però? Possiamo discernere differenze significative dovute al fatto che nessuna delle gamme del quartile interno si …
1
Limiti di generalizzazione su SVM
Sono interessato ai risultati teorici della capacità di generalizzazione di Support Vector Machines, ad esempio limiti alla probabilità di errore di classificazione e alla dimensione Vapnik-Chervonenkis (VC) di queste macchine. Tuttavia, leggendo la letteratura ho avuto l'impressione che alcuni risultati ricorrenti simili tendano a differire leggermente da un autore all'altro, …
2
Apprendimento supervisionato con dati incerti?
Esiste una metodologia esistente per applicare un modello di apprendimento supervisionato a un set di dati incerto? Ad esempio, supponiamo di avere un set di dati con le classi A e B: +----------+----------+-------+-----------+ | FeatureA | FeatureB | Label | Certainty | +----------+----------+-------+-----------+ | 2 | 3 | A | …
2
Se il restringimento viene applicato in modo intelligente, funziona sempre meglio per stimatori più efficienti?
Supponiamo di avere due stimatori e che sono stimatori coerenti dello stesso parametro e tali che con in senso psd. Pertanto, asintoticamente è più efficiente di . Questi due stimatori si basano su diverse funzioni di perdita. β 2β0√βˆ1β^1\widehat{\beta}_1βˆ2β^2\widehat{\beta}_2β0β0\beta_0n−−√(βˆ1−β0)→dN(0,V1),n−−√(βˆ2−β0)→dN(0,V2)n(β^1−β0)→dN(0,V1),n(β^2−β0)→dN(0,V2)\sqrt{n}(\widehat{\beta}_1 -\beta_0) \stackrel{d}\rightarrow \mathcal{N}(0, V_1), \quad \sqrt{n}(\widehat{\beta}_2 -\beta_0) \stackrel{d}\rightarrow \mathcal{N}(0, V_2) β …
1
Regressione logistica per i dati dalle distribuzioni di Poisson
Da alcune note di apprendimento automatico che parlano di alcuni metodi di classificazione discriminatoria, in particolare la regressione logistica, dove y è l'etichetta di classe (0 o 1) e x è i dati, si dice che: se x|y=0∼Poisson(λ0)x|y=0∼Poisson(λ0)x|y = 0 \sim \mathrm{Poisson}(λ_0) e x|y=1∼Poisson(λ1)x|y=1∼Poisson(λ1)x|y = 1 \sim \mathrm{Poisson}(λ_1) , allora …
3
Controesempi in cui la mediana è al di fuori di [Mode-Mean]
Questo articolo è al di sopra della mia lega, ma parla di un argomento che mi interessa, la relazione tra media, modalità e mediana. Dice : È opinione diffusa che la mediana di una distribuzione unimodale sia "di solito" tra la media e la modalità. Tuttavia, questo non è sempre …
11 mean  median  mode 
2
Come iniziare a costruire un modello di regressione quando il predittore più fortemente associato è binario
Ho un set di dati contenente 365 osservazioni di tre variabili vale a dire pm, tempe rain. Ora voglio verificare il comportamento di pmin risposta ai cambiamenti in altre due variabili. Le mie variabili sono: pm10 = Risposta (dipendente) temp = predittore (indipendente) rain = predittore (indipendente) La seguente è …
Utilizzando il nostro sito, riconosci di aver letto e compreso le nostre Informativa sui cookie e Informativa sulla privacy.
Licensed under cc by-sa 3.0 with attribution required.