Statistiche e Big Data

Domande e risposte per le persone interessate alle statistiche, all'apprendimento automatico, all'analisi dei dati, al data mining e alla visualizzazione dei dati

1
Perché il test F nei modelli lineari gaussiani è più potente?
Per un modello lineare gaussiano Y=μ+σGY=μ+σGY=\mu+\sigma Gμμ\muWWWGGGRnRn\mathbb{R}^nFFFH0:{μ∈U}H0:{μ∈U}H_0\colon\{\mu \in U\}U⊂WU⊂WU \subset Wf=ϕ(2logsupμ∈W,σ>0L(μ,σ|y)supμ∈U,σ>0L(μ,σ|y)).f=ϕ(2log⁡supμ∈W,σ>0L(μ,σ|y)supμ∈U,σ>0L(μ,σ|y)).f=\phi\left( 2\log \frac{\sup_{\mu \in W, \sigma>0} L(\mu, \sigma | y)}{\sup_{\mu \in U, \sigma>0} L(\mu, \sigma | y)} \right). Come possiamo sapere che questa statistica fornisce il test più potente per (forse dopo aver scartato casi particolari insoliti)? Ciò non deriva …

3
Bayesian vs MLE, problema di overfitting
Nel libro PRML di Bishop, afferma che il sovrautilizzo è un problema con la stima della massima verosimiglianza (MLE) e Bayesian può evitarlo. Ma penso che l'overfitting sia un problema in più per la selezione del modello, non per il metodo usato per fare la stima dei parametri. Cioè, supponiamo …



2
Il test
Ho appena letto in una rivista scientifica (molto popolare) piuttosto rispettata (il Primo Ministro tedesco, 02/2013, p.36) su un esperimento interessante (senza fonte, sfortunatamente). Ha attirato la mia attenzione perché intuitivamente dubitavo del significato del risultato, ma le informazioni fornite erano sufficienti per riprodurre i test statistici. I ricercatori si …



1
Rapporto di probabilità vs rapporto di PDF
Sto usando Bayes per risolvere un problema di clustering. Dopo aver fatto alcuni calcoli, finisco con la necessità di ottenere il rapporto tra due probabilità: P(A)/P(B)P(A)/P(B)P(A)/P(B) per essere in grado di ottenere P(H|D)P(H|D)P(H|D) . Queste probabilità sono ottenute dall'integrazione di due diversi KDE multivariati 2D come spiegato in questa risposta …


10
Parole comuni che hanno particolari significati statistici
Non sono uno statistico, ma il mio lavoro di ricerca prevede statistiche (analisi dei dati, lettura di pubblicazioni, ecc.). Mi è stato nuovamente ricordato da un commento su una delle mie domande pubblicate qui che ci sono alcune parole comuni che hanno significati o connotazioni particolarmente specifici per coloro che …

2
MLE significa sempre che conosciamo il PDF sottostante dei nostri dati e EM significa che non lo sappiamo?
Ho alcune semplici domande concettuali che vorrei chiarire per quanto riguarda l'MLE (stima della massima verosimiglianza) e quale collegamento abbia, eventualmente, con EM (massimizzazione delle aspettative). A quanto ho capito, se qualcuno dice "Abbiamo usato l'MLE", significa automaticamente che hanno un modello esplicito del PDF dei loro dati? Mi sembra …

2
Intuizione dietro la funzione di densità delle distribuzioni t
Sto studiando la distribuzione t di Student e ho iniziato a chiedermi come si deriverebbe la funzione di densità delle distribuzioni t (da wikipedia, http://en.wikipedia.org/wiki/Student%27s_t-distribution ): f( t ) = Γ ( v + 12)v π--√Γ ( v2)( 1 + t2v)- v + 12f(t)=Γ(v+12)vπΓ(v2)(1+t2v)−v+12f(t) = \frac{\Gamma(\frac{v+1}{2})}{\sqrt{v\pi}\:\Gamma(\frac{v}{2})}\left(1+\frac{t^2}{v} \right)^{-\frac{v+1}{2}} dove è il …




Utilizzando il nostro sito, riconosci di aver letto e compreso le nostre Informativa sui cookie e Informativa sulla privacy.
Licensed under cc by-sa 3.0 with attribution required.