Statistiche e Big Data

4

Clustering di una matrice di correlazione

Ho una matrice di correlazione che indica come ogni articolo è correlato all'altro articolo. Quindi per un N articoli, ho già una matrice di correlazione N * N. Usando questa matrice di correlazione come posso raggruppare gli oggetti N nei bin M in modo da poter dire che gli oggetti …

20 clustering python k-means

3

Perché è richiesto il fattore di normalizzazione nel teorema di Bayes?

Il teorema di Bayes va P(model|data)=P(model)×P(data|model)P(data)P(model|data)=P(model)×P(data|model)P(data) P(\textrm{model}|\textrm{data}) = \frac{P(\textrm{model}) \times P(\textrm{data}|\textrm{model})}{P(\textrm{data})} Va tutto bene. Ma ho letto da qualche parte: Fondamentalmente, P (dati) non è altro che una costante normalizzante, cioè una costante che rende la densità posteriore integrata a una. Sappiamo che e . 0 ≤ P ( dati …

20 probability bayesian conditional-probability bayes

4

"L'area totale sotto una funzione di densità di probabilità è 1" - rispetto a cosa?

Concettualmente afferro il significato della frase "l'area totale sotto un PDF è 1". Dovrebbe significare che le probabilità che il risultato sia nell'intervallo totale delle possibilità è del 100%. Ma non riesco davvero a capirlo da un punto di vista "geometrico". Se, ad esempio, in un PDF l'asse x rappresenta …

20 probability pdf integral

2

Scegli tra

Antefatto: sto dando una presentazione ai colleghi al lavoro sui test delle ipotesi e ne capisco la maggior parte, ma c'è un aspetto che mi sto annodando cercando di capire e spiegare agli altri. Questo è quello che penso di sapere (per favore correggilo se sbagli!) Le statistiche che sarebbero …

20 hypothesis-testing normal-distribution t-test assumptions z-test

2

Specifica di una differenza nel modello di differenze con più periodi di tempo

Quando stima una differenza nel modello di differenze con due periodi di tempo, il modello di regressione equivalente sarebbe un. Yi s t= α + γS∗ Tr e a t m e n t + λ dt+ δ∗ ( Tr e a t m e n t ∗ dt) + …

20 regression modeling econometrics panel-data difference-in-difference

2

Caret train funziona per glmnet con convalida incrociata sia per alpha che lambda?

Il caretpacchetto R esegue la convalida incrociata su entrambi alphae lambdaper il glmnetmodello? In esecuzione questo codice, eGrid <- expand.grid(.alpha = (1:10) * 0.1, .lambda = (1:10) * 0.1) Control <- trainControl(method = "repeatedcv",repeats = 3,verboseIter =TRUE) netFit <- train(x =train_features, y = y_train, method = "glmnet", tuneGrid = eGrid, …

20 r machine-learning cross-validation caret glmnet

4

Generazione di variabili casuali da una miscela di distribuzioni normali

Come posso campionare da una distribuzione della miscela, e in particolare una miscela di distribuzioni normali in R? Ad esempio, se volessi provare da: 0.3× N( 0 , 1 )+0.5× N( 10 , 1 )+0.2× N( 3 , .1 )0.3×N(0,1)+0.5×N(10,1)+0.2×N(3,.1) 0.3\!\times\mathcal{N}(0,1)\; + \;0.5\!\times\mathcal{N}(10,1)\; + \;0.2\!\times\mathcal{N}(3,.1) come potrei farlo?

20 r random-generation mixture

3

Approccio più delicato alle statistiche bayesiane

Di recente ho iniziato a leggere la 2a edizione di "Introduzione alla statistica bayesiana" di Bolstad. Ho avuto una lezione di statistica introduttiva che ha riguardato principalmente test statistici e sono quasi attraverso una lezione di analisi di regressione. Quali altri libri posso usare per integrare la mia comprensione di …

20 hypothesis-testing bayesian

3

Come interpretare il termine di intercettazione in un GLM?

Sto usando R e ho analizzato i miei dati con GLM con collegamento binomiale. Voglio sapere qual è il significato dell'intercetta nella tabella di output. L'intercettazione di uno dei miei modelli è significativamente diversa, tuttavia la variabile no. Cosa significa questo? Qual è l'intercettazione. Non so se mi sto solo …

20 r generalized-linear-model

2

Cosa succede quando includo una variabile quadrata nella mia regressione?

con la mia regressione OLS: dove D è una variabile fittizia, le stime diventano diverse da zero con un valore p basso. Quindi eseguo un test di RESET Ramsey e scopro di avere un po 'di errori nell'equazione, quindi includo un quadrato x: y = β 0 + β 1 …

20 regression multiple-regression interpretation least-squares polynomial

2

Perché la backpropagation non funziona quando si inizializzano i pesi con lo stesso valore?

Perché la backpropagation non funziona quando si inizializza tutto il peso con lo stesso valore (diciamo 0,5), ma funziona bene quando si danno numeri casuali? L'algoritmo non dovrebbe calcolare l'errore e funzionare da lì, nonostante il fatto che inizialmente i pesi siano gli stessi?

20 machine-learning neural-networks backpropagation

2

Perché le distribuzioni di probabilità sono indicate con una tilde?

Qual è il significato della tilde quando si specificano le distribuzioni di probabilità? Per esempio: Z∼Normal(0,1).Z∼Normal(0,1).Z \sim \mbox{Normal}(0,1).

20 probability distributions notation

5

Perché preoccuparsi di approssimazioni di basso rango?

Se si dispone di una matrice con n righe e colonne m, è possibile utilizzare SVD o altri metodi per calcolare un'approssimazione di basso rango della matrice data. Tuttavia, l'approssimazione di basso rango avrà ancora n righe e m colonne. In che modo le approssimazioni di basso rango possono essere …

20 r matrix approximation

5

Esiste una funzione R che calcolerà la matrice di dissomiglianza del coseno? [chiuso]

Chiuso. Questa domanda è fuori tema . Al momento non accetta risposte. Vuoi migliorare questa domanda? Aggiorna la domanda in modo che sia in argomento per Cross Validated. Chiuso l'anno scorso . Vorrei creare una mappa di calore con raggruppamento di righe basato sulle distanze del coseno. Sto usando R …

20 r clustering similarities

4

Intuizione statistica / senso dei dati

Sono uno studente universitario del secondo anno, sto studiando matematica e ho parlato con uno dei miei professori in merito alla differenza tra abilità matematica e capacità statistica. Una delle principali differenze che ha sollevato è stata il "senso dei dati", che ha spiegato come una combinazione di abilità tecnica …

20 references philosophical