Statistiche e Big Data

2

In che modo la regressione multipla può davvero “controllare” le covariate?

Conosciamo tutti gli studi osservazionali che tentano di stabilire un legame causale tra un predittore non randomizzato X e un risultato includendo ogni potenziale confondente immaginabile in un modello di regressione multipla. Così "controllando" tutti i confonditori, sostiene l'argomento, isoliamo l'effetto del predittore di interesse. Sto sviluppando un crescente disagio …

45 multiple-regression ancova observational-study

1

Come interpretare il tipo I, il tipo II e il tipo III ANOVA e MANOVA?

La mia domanda principale è come interpretare l'output (coefficienti, F, P) quando si esegue un ANOVA di tipo I (sequenziale)? Il mio problema di ricerca specifico è un po 'più complesso, quindi spezzerò il mio esempio in parti. Innanzitutto, se sono interessato all'effetto della densità del ragno (X1) sulla crescita …

45 r hypothesis-testing anova manova sums-of-squares

8

Quali sono i contro dell'analisi bayesiana?

Quali sono alcune obiezioni pratiche all'uso dei metodi statistici bayesiani in qualsiasi contesto? No, non intendo il solito carping sulla scelta del precedente. Sarò felice se questo non ottiene risposte.

45 bayesian

6

Come eseguire un test usando R per vedere se i dati seguono una distribuzione normale

Ho un set di dati con la seguente struttura: a word | number of occurrence of a word in a document | a document id Come posso eseguire un test per la distribuzione normale in R? Probabilmente è una domanda facile ma io sono un principiante R.

45 r distributions normality-assumption

6

Motivazione della distanza di Kolmogorov tra le distribuzioni

Esistono molti modi per misurare quanto sono simili le due distribuzioni di probabilità. Tra i metodi che sono popolari (in diversi ambienti) ci sono: la distanza di Kolmogorov: la sup-distanza tra le funzioni di distribuzione; la distanza di Kantorovich-Rubinstein: la massima differenza tra le aspettative rispetto alle due distribuzioni di …

45 distributions probability hypothesis-testing mathematical-statistics

5

Cosa possiamo dire della media della popolazione da una dimensione del campione di 1?

Mi chiedo cosa possiamo dire, se non altro, della popolazione media, quando tutto quello che ho è una misurazione, (dimensione del campione di 1). Ovviamente, ci piacerebbe avere più misurazioni, ma non possiamo ottenerle.y 1μμ\muy1y1y_1 Mi sembra che dato che la media del campione, , è banalmente uguale a , …

45 mean sample-size small-sample unbiased-estimator

8

Tutti i modelli sono inutili? È possibile un modello esatto o utile?

Questa domanda mi sta venendo in mente da più di un mese. Il numero di febbraio 2015 di Amstat News contiene un articolo del professor Mark van der Laan di Berkeley che rimprovera le persone per l'utilizzo di modelli inesatti. Afferma che usando i modelli, la statistica è quindi un'arte …

45 machine-learning maximum-likelihood modeling nonparametric parametric

5

Regressione quando i residui OLS non sono normalmente distribuiti

Esistono diversi thread su questo sito che discutono su come determinare se i residui di OLS sono distribuiti asintoticamente normalmente. Un altro modo per valutare la normalità dei residui con il codice R è fornito in questa eccellente risposta . Questa è un'altra discussione sulla differenza pratica tra residui standardizzati …

45 regression least-squares residuals assumptions normality-assumption

10

Che cosa sono esattamente i Big Data?

Mi è stato chiesto in diverse occasioni la domanda: Cosa sono i Big Data? Sia dagli studenti che dai miei parenti che stanno raccogliendo il buzz intorno alle statistiche e alla ML. Ho trovato questo post CV . E sento di essere d'accordo con l'unica risposta lì. Anche la pagina …

44 large-data

6

Il reciproco di una probabilità rappresenta qualcosa?

Mi chiedevo se il reciproco di P (X = 1) rappresenta qualcosa in particolare?

44 probability

4

Come vengono applicati i kernel alle mappe caratteristiche per produrre altre mappe caratteristiche?

Sto cercando di comprendere la parte di convoluzione delle reti neurali convoluzionali. Guardando la figura seguente: Non ho problemi a comprendere il primo livello di convoluzione in cui abbiamo 4 kernel diversi (di dimensioni ), che contiamo con l'immagine di input per ottenere 4 mappe caratteristiche.k×kk×kk \times k Quello che …

44 machine-learning neural-networks deep-learning conv-neural-network

6

Qual è il tuo grafico statistico preferito?

Questo è uno dei miei preferiti Questo esempio è in una vena umoristica (il merito va a un mio ex professore, Steven Gortmaker), ma sono anche interessato ai grafici che ritieni meravigliosamente catturare e comunicare una visione statistica o un metodo, insieme alle tue idee su di esso. Una voce …

44 data-visualization

4

Perché gli statistici dicono che un risultato non significativo significa "non puoi rifiutare il nulla" invece di accettare l'ipotesi nulla?

I test statistici tradizionali, come i due t-test dei campioni, si concentrano sul tentativo di eliminare l'ipotesi che non vi sia differenza tra una funzione di due campioni indipendenti. Quindi, scegliamo un livello di confidenza e diciamo che se la differenza di mezzi è oltre il livello del 95%, possiamo …

44 hypothesis-testing statistical-significance confidence-interval equivalence tost

5

Statistiche pubblicate su articoli accademici

Ho letto molti articoli accademici evolutivi / ecologici, a volte con lo scopo specifico di vedere come le statistiche vengono utilizzate "nel mondo reale" al di fuori del libro di testo. Normalmente prendo le statistiche negli articoli come vangelo e uso gli articoli per aiutarmi nel mio apprendimento statistico. Dopotutto, …

44 publication-bias academia

1

Varianza del prodotto di più variabili casuali

Conosciamo la risposta per due variabili indipendenti: Var(XY)=E(X2Y2)−(E(XY))2=Var(X)Var(Y)+Var(X)(E(Y))2+Var(Y)(E(X))2Var(XY)=E(X2Y2)−(E(XY))2=Var(X)Var(Y)+Var(X)(E(Y))2+Var(Y)(E(X))2 {\rm Var}(XY) = E(X^2Y^2) − (E(XY))^2={\rm Var}(X){\rm Var}(Y)+{\rm Var}(X)(E(Y))^2+{\rm Var}(Y)(E(X))^2 Tuttavia, se prendessimo il prodotto di più di due variabili, , quale sarebbe la risposta in termini di varianze e valori previsti di ogni variabile?Var(X1X2⋯Xn)Var(X1X2⋯Xn){\rm Var}(X_1X_2 \cdots X_n)

44 variance random-variable independence