Statistiche e Big Data distributions

5

Intuizione sulla divergenza di Kullback-Leibler (KL)

Ho imparato l'intuizione alla base della divergenza di KL in quanto una funzione di distribuzione del modello differisce dalla distribuzione teorica / reale dei dati. La fonte sto leggendo continua a dire che la comprensione intuitiva della 'distanza' tra queste due distribuzioni è utile, ma non dovrebbe essere preso alla …

48 distributions distance intuition kullback-leibler

5

Se il test t e l'ANOVA per due gruppi sono equivalenti, perché i loro presupposti non sono equivalenti?

Sono sicuro di averlo completamente avvolto intorno alla testa, ma non riesco proprio a capirlo. Il test t confronta due distribuzioni normali usando la distribuzione Z. Ecco perché c'è un'ipotesi di normalità nei DATI. ANOVA equivale alla regressione lineare con variabili fittizie e utilizza somme di quadrati, proprio come OLS. …

47 distributions regression normality-assumption t-test anova

3

Interpretazione del predittore e / o della risposta trasformati in tronchi

Mi chiedo se fa differenza nell'interpretazione se solo le variabili dipendenti, dipendenti e indipendenti, o solo le variabili indipendenti, vengono trasformate in log. Considera il caso di log(DV) = Intercept + B1*IV + Error Posso interpretare il IV come l'aumento percentuale, ma come cambia quando lo faccio log(DV) = Intercept …

46 regression data-transformation interpretation regression-coefficients logarithm r dataset stata hypothesis-testing contingency-tables hypothesis-testing statistical-significance standard-deviation unbiased-estimator t-distribution r functional-data-analysis maximum-likelihood bootstrap regression change-point regression sas hypothesis-testing bayesian randomness predictive-models nonparametric terminology parametric correlation effect-size loess mean pdf quantile-function bioinformatics regression terminology r-squared pdf maximum multivariate-analysis references data-visualization r pca r mixed-model lme4-nlme distributions probability bayesian prior anova chi-squared binomial generalized-linear-model anova repeated-measures t-test post-hoc clustering variance probability hypothesis-testing references binomial profile-likelihood self-study excel data-transformation skewness distributions statistical-significance econometrics spatial r regression anova spss linear-model

6

Come eseguire un test usando R per vedere se i dati seguono una distribuzione normale

Ho un set di dati con la seguente struttura: a word | number of occurrence of a word in a document | a document id Come posso eseguire un test per la distribuzione normale in R? Probabilmente è una domanda facile ma io sono un principiante R.

45 r distributions normality-assumption

6

Motivazione della distanza di Kolmogorov tra le distribuzioni

Esistono molti modi per misurare quanto sono simili le due distribuzioni di probabilità. Tra i metodi che sono popolari (in diversi ambienti) ci sono: la distanza di Kolmogorov: la sup-distanza tra le funzioni di distribuzione; la distanza di Kantorovich-Rubinstein: la massima differenza tra le aspettative rispetto alle due distribuzioni di …

45 distributions probability hypothesis-testing mathematical-statistics

5

Numeri casuali uniformi falsi: distribuiti in modo più uniforme rispetto ai dati uniformi reali

Sto cercando un modo per generare numeri casuali che sembrano distribuiti in modo uniforme - e ogni test mostrerà che sono uniformi - tranne per il fatto che sono distribuiti in modo più uniforme rispetto ai dati uniformi reali . Il problema che ho con i "veri" randoms uniformi è …

43 distributions random-generation uniform quasi-monte-carlo

3

Quale ha la coda più pesante, lognormale o gamma?

(Questo si basa su una domanda che mi è appena arrivata via e-mail; ho aggiunto un contesto di una precedente breve conversazione con la stessa persona.) L'anno scorso mi è stato detto che la distribuzione gamma è più pesante di quella lognormale, e da allora mi è stato detto che …

41 distributions gamma-distribution lognormal heavy-tailed

8

Come posso verificare se determinati campioni vengono prelevati da una distribuzione di Poisson?

Conosco i test di normalità, ma come posso verificare "Poisson-ness"? Ho un campione di ~ 1000 numeri interi non negativi, che sospetto siano stati presi da una distribuzione di Poisson, e vorrei provarlo.

41 hypothesis-testing distributions poisson-distribution goodness-of-fit

3

Relazione empirica tra media, mediana e modalità

Per una distribuzione unimodale moderatamente distorta, abbiamo la seguente relazione empirica tra media, mediana e modalità: (Media - Modalità) ∼ 3(Media mediana)(Media - Modalità)~3(Media mediana) \text{(Mean - Mode)}\sim 3\,\text{(Mean - Median)} Come è stata derivata questa relazione? Karl Pearson ha tracciato migliaia di queste relazioni prima di formulare questa conclusione, …

40 distributions mathematical-statistics descriptive-statistics history

4

Statistiche dell'ordine approssimativo per normali variabili casuali

Esistono formule ben note per le statistiche degli ordini di determinate distribuzioni casuali? Soprattutto le statistiche del primo e dell'ultimo ordine di una normale variabile casuale, ma sarebbe apprezzata anche una risposta più generale. Modificare: per chiarire, sto cercando formule approssimative che possono essere valutate più o meno esplicitamente, non …

39 distributions normal-distribution approximation order-statistics

9

Come posso modellare in modo efficiente la somma delle variabili casuali di Bernoulli?

YYYXiXiX_ipipip_iY=∑XiY=∑XiY=\sum X_iPr(Xi=1)=piPr(Xi=1)=pi\Pr(X_i=1)=p_iPr(Xi=0)=1−piPr(Xi=0)=1−pi\Pr(X_i=0)=1-p_i Sono interessato a rispondere rapidamente a domande come (dove viene fornito ).Pr(Y<=k)Pr(Y<=k)\Pr(Y<=k)kkk Attualmente utilizzo simulazioni casuali per rispondere a tali domande. Traccio casualmente ogni X_i inXiXiX_i base alla sua pipip_i , quindi somma tutti i valori XiXiX_i per ottenere Y′Y′Y' . Ripeto questo processo alcune migliaia di volte …

38 r distributions binomial random-variable poisson-binomial

3

Come funziona l'approssimazione del punto di sella?

Come funziona l'approssimazione del punto di sella? Per quale tipo di problema è utile? (Sentiti libero di usare un esempio o esempi particolari a titolo illustrativo) Ci sono svantaggi, difficoltà, cose a cui fare attenzione o trappole per gli incauti?

38 distributions mathematical-statistics mgf saddlepoint-approximation partial-moments

2

Distanza Kullback – Leibler vs Kolmogorov-Smirnov

Vedo che ci sono molte differenze formali tra le misure di distanza Kullback – Leibler vs Kolmogorov-Smirnov. Tuttavia, entrambi vengono utilizzati per misurare la distanza tra le distribuzioni. Esiste una situazione tipica in cui uno dovrebbe essere usato anziché l'altro? Qual è la logica per farlo?

37 distributions distance-functions kolmogorov-smirnov kullback-leibler

2

Comprensione dei parametri all'interno della distribuzione binomiale negativa

Stavo cercando di adattare i miei dati a vari modelli e ho capito che la fitdistrfunzione della libreria MASSdi Rmi dà Negative Binomialla soluzione migliore. Ora dalla pagina wiki , la definizione è data come: La distribuzione NegBin (r, p) descrive la probabilità di k fallimenti e r successi nelle …

37 r distributions modeling negative-binomial

10

Perché si presume che i tempi di sopravvivenza siano distribuiti esponenzialmente?

Sto imparando l'analisi di sopravvivenza da questo post su UCLA IDRE e sono stato inciampato nella sezione 1.2.1. Il tutorial dice: ... se si sapesse che i tempi di sopravvivenza sono distribuiti in modo esponenziale , allora la probabilità di osservare un tempo di sopravvivenza ... Perché si presume che …

36 distributions survival assumptions exponential

Domande taggate «distributions»