Statistiche e Big Data

6

Cosa si intende quando diciamo di avere un modello saturo?

59 modeling regression

3

Media errore assoluto O radice quadrata media errore?

Perché usare il Root Mean Squared Error (RMSE) invece del Mean Absolute Error (MAE) ?? Ciao Ho studiato l'errore generato in un calcolo: inizialmente ho calcolato l'errore come errore al quadrato normalizzato della radice. Guardando un po 'più da vicino, vedo gli effetti della quadratura dell'errore che dà più peso …

59 least-squares mean rms mae

4

Qual è la ragione per cui una funzione di probabilità non è un pdf?

Qual è il motivo per cui una funzione di probabilità non è un pdf (funzione di densità di probabilità)?

59 likelihood pdf

12

Test a due code ... Non sono proprio convinto. Qual e il punto?

Il seguente estratto è dalla voce, Quali sono le differenze tra i test a una coda e due code? , sul sito di aiuto per le statistiche dell'UCLA. ... considera le conseguenze della mancanza di un effetto nell'altra direzione. Immagina di aver sviluppato un nuovo farmaco che ritieni sia un …

58 hypothesis-testing statistical-significance inference

6

Modo di principio di collasso delle variabili categoriali con molti livelli?

Quali tecniche sono disponibili per il collasso (o il raggruppamento) di molte categorie a poche, allo scopo di usarle come input (predittore) in un modello statistico? Considera una variabile come quella di uno studente universitario (disciplina scelta da uno studente universitario). Non è ordinato e categorico, ma può potenzialmente avere …

58 regression categorical-data dimensionality-reduction feature-construction many-categories

11

Rompicapo: come generare 7 numeri interi con uguale probabilità usando una moneta distorta che ha un pr (testa) = p?

Questa è una domanda che ho trovato su Glassdoor : come si possono generare 7 numeri interi con uguale probabilità usando una moneta che ha un ?P r ( Testa ) = p ∈ ( 0 , 1 )Pr(Head)=p∈(0,1)\mathbb{Pr}(\text{Head}) = p\in(0,1) Fondamentalmente, hai una moneta che può essere o non …

58 probability binomial random-generation

2

Come posso cambiare il titolo di una legenda in ggplot2? [chiuso]

Ho una trama che sto realizzando in ggplot2 per riassumere i dati che provengono da un set di dati a celle 2 x 4 x 3. Sono stato in grado di creare pannelli per la variabile a 2 livelli usando facet_grid(. ~ Age)e di impostare gli assi xey aes(x=4leveledVariable, y=DV). …

58 r data-visualization ggplot2

10

Errore di convalida inferiore all'errore di addestramento?

Ho trovato due domande qui e qui su questo problema, ma non c'è ancora una risposta o spiegazione ovvia. Faccio valere lo stesso problema in cui l'errore di convalida è inferiore all'errore di addestramento nella mia rete neurale di convoluzione. Cosa significa?

58 machine-learning mathematical-statistics neural-networks cross-validation

1

Comprensione della curva ROC

Ho difficoltà a comprendere la curva ROC. C'è qualche vantaggio / miglioramento nell'area sotto la curva ROC se costruisco modelli diversi da ciascun sottoinsieme univoco dell'insieme di addestramento e lo uso per produrre una probabilità? Ad esempio, se ha valori di e costruisco il modello usando dal 1 ° al …

57 r roc

7

Come funziona il trucco di reparameterizzazione per VAE e perché è importante?

Come funziona il trucco di reparameterizzazione per autoencoders variazionali (VAE)? Esiste una spiegazione intuitiva e semplice senza semplificare la matematica sottostante? E perché abbiamo bisogno del 'trucco'?

57 mathematical-statistics autoencoders variational-bayes generative-models

13

10 teste di fila aumentano la possibilità che il prossimo lancio sia una coda?

Suppongo che sia vero: assumere una moneta giusta, ottenere 10 teste di fila mentre si lancia una moneta non aumenta la probabilità che il prossimo lancio di una moneta sia una coda , indipendentemente dalla quantità di probabilità e / o gergo statistico che viene lanciato (scusa i giochi di …

57 probability independence intuition games bernoulli-process

1

Perché la trasformazione radice quadrata è consigliata per i dati di conteggio?

Si consiglia spesso di prendere la radice quadrata quando si hanno i dati di conteggio. (Per alcuni esempi su CV, vedi la risposta di @ HarveyMotulsky qui , o la risposta di @ whuber qui .) D'altra parte, quando si adatta un modello lineare generalizzato con una variabile di risposta …

57 generalized-linear-model data-transformation poisson-distribution count-data variance-stabilizing

7

Esempi in cui il metodo dei momenti può battere la massima probabilità in piccoli campioni?

Gli stimatori della massima verosimiglianza (MLE) sono asintoticamente efficienti; vediamo il risultato pratico in quanto spesso fanno meglio delle stime del metodo dei momenti (MoM) (quando differiscono), anche a campioni di piccole dimensioni Qui "meglio di" significa nel senso che in genere hanno una varianza minore quando entrambi sono imparziali …

57 estimation maximum-likelihood mse method-of-moments efficiency

4

Ha senso aggiungere un termine quadratico ma non il termine lineare a un modello?

Ho un modello (misto) in cui uno dei miei predittori dovrebbe a priori essere solo quadraticamente correlato al predittore (a causa della manipolazione sperimentale). Quindi, vorrei aggiungere solo il termine quadratico al modello. Due cose mi impediscono di farlo: Penso di aver letto da qualche parte che dovresti sempre includere …

57 regression polynomial

11

Risorse per l'apprendimento della catena Markov e dei modelli Markov nascosti

Sto cercando risorse (tutorial, libri di testo, webcast, ecc.) Per conoscere Markov Chain e HMM. Il mio background è di biologo e attualmente sono coinvolto in un progetto relativo alla bioinformatica. Inoltre, quali sono le basi matematiche necessarie di cui ho bisogno per avere una comprensione sufficiente dei modelli e …

57 references markov-process hidden-markov-model bioinformatics