Statistiche e Big Data

1

Sto cercando di modellare alcuni dati usando il glmnetpacchetto in R. Supponiamo di avere i seguenti dati training_x <- data.frame(variable1 = c(1, 2, 3, 2, 3), variable2 = c(1, 2, 3, 4, 5)) y <- c(1, 2, 3, 4, 5) (Questa è una semplificazione; i miei dati sono molto più …

13 r glmnet

4

Cerco una vera illustrazione della citazione di Fisher su DoE

Il mio team e io vorremmo fare una presentazione ai non statistici dell'azienda circa l'utilità della progettazione degli esperimenti. Questi non statistici sono anche i nostri clienti e di solito non ci consultano prima di raccogliere i loro dati. Conosci alcuni esempi reali che illustrerebbero bene la famosa citazione di …

13 experiment-design

1

Qual è la differenza tra wilcox.test e coin :: wilcox_test in R?

Queste due funzioni esistono in R ma non conosco le loro differenze. Sembra che restituiscano gli stessi valori p solo quando si chiama wilcox.testcon correct=FALSE, e wilcox_test(nel pacchetto monete) con distribution="aymptotic". Per altri valori restituiscono valori p diversi. Inoltre wilcox.testrestituisce sempre W = 0 per il mio set di dati, …

13 r hypothesis-testing p-value wilcoxon-mann-whitney

2

Come ottenere i risultati di un test post-hoc Tukey HSD in una tabella che mostra le coppie raggruppate?

Mi piacerebbe eseguire un test post-hoc TukeyHSD dopo il mio Anova a due vie con R, ottenendo una tabella contenente le coppie ordinate raggruppate per differenza significativa. (Mi dispiace per il testo, sono ancora nuovo con le statistiche.) Vorrei avere qualcosa del genere: Quindi, raggruppati con stelle o lettere. Qualche …

13 r anova multiple-comparisons post-hoc tukey-hsd

1

Risposte all'esame di statistiche divertenti [chiuso]

Chiuso. Questa domanda è fuori tema . Al momento non accetta risposte. Vuoi migliorare questa domanda? Aggiorna la domanda in modo che sia in argomento per Cross Validated. Chiuso 7 anni fa . Correggere gli esami è probabilmente il compito più noioso di un insegnante. Ma potrebbe essere divertente per …

13 teaching humor

1

Utilizzo del metodo generalizzato dei momenti (GMM) per calcolare il parametro di regressione logistica

Voglio calcolare i coefficienti per una regressione che è molto simile alla regressione logistica (In realtà regressione logistica con un altro coefficiente: quandoApotrebbe essere dato). Ho pensato di usare GMM per calcolare i coefficienti, ma non sono sicuro di quali siano le condizioni del momento che dovrei usare.A1+e−(b0+b1x1+b2x2+…),A1+e−(b0+b1x1+b2x2+…), \frac{A}{1 + …

13 logistic generalized-moments

3

Come testare l'uniformità in diverse dimensioni?

Testare l'uniformità è qualcosa di comune, tuttavia mi chiedo quali siano i metodi per farlo per una nuvola di punti multidimensionale.

13 hypothesis-testing uniform

4

Inizializzazione di centri K-media mediante sottocampioni casuali del set di dati?

Se ho un determinato set di dati, quanto sarebbe intelligente inizializzare i centri di cluster usando i campioni casuali di quel set di dati? Ad esempio, supponiamo che io voglia 5 clusters. Prendo 5 random samplesdi dire, size=20%del dataset originale. Potrei quindi prendere la media di ciascuno di questi 5 …

13 clustering k-means unsupervised-learning

1

Quando fallisce la legge dei grandi numeri?

La domanda è semplicemente cosa si afferma nel titolo: quando fallisce la legge dei grandi numeri? Quello che voglio dire è, in quali casi la frequenza di un evento non tenderà alla probabilità teorica?

13 probability mathematical-statistics law-of-large-numbers

3

Quali sono le riviste buone e disponibili gratuitamente per tenere traccia degli ultimi sviluppi nell'apprendimento automatico?

Sentiti libero di sostituire le "riviste" con qualsiasi altro utile portale di conoscenza. Sono interessato a tenere d'occhio i nuovi sviluppi dell'apprendimento automatico, in vista di applicazioni pratiche. Non sono un accademico che cerca di pubblicare il mio lavoro (almeno non in questo campo), ma voglio essere consapevole di potenziali …

13 machine-learning references

2

Regressione lineare quando si conosce solo

Supponiamo Xβ=YXβ=YX\beta =Y . Non sappiamo YYY esattamente, solo la sua correlazione con ogni predittore, XtYXtYX^\mathrm{t}Y . La soluzione ordinaria dei minimi quadrati (OLS) è β=(XtX)−1XtYβ=(XtX)−1XtY\beta=(X^\mathrm{t} X)^{-1} X^\mathrm{t}Y e non c'è nessun problema. Supponiamo però che XtXXtXX^\mathrm{t}X sia quasi singolare (multicollinearità) e che sia necessario stimare il parametro cresta ottimale. …

13 regression multicollinearity

6

Foresta casuale: come gestire i nuovi livelli di fattore nel set di test?

Sto cercando di fare previsioni usando un modello di foresta casuale in R. Tuttavia, ricevo errori poiché alcuni fattori hanno valori diversi nel set di test rispetto al set di training. Ad esempio, un fattore Cat_2ha valori 34, 68, 76, ecc., Nel set di test che non compaiono nel set …

13 r categorical-data random-forest

3

Comprensione concettuale della radice significa errore al quadrato e deviazione di polarizzazione media

Vorrei acquisire una comprensione concettuale di Root Mean Squared Error (RMSE) e Mean Bias Deviation (MBD). Avendo calcolato queste misure per i miei confronti di dati, sono stato spesso perplesso nello scoprire che l'RMSE è alto (ad esempio, 100 kg), mentre l'MBD è basso (ad esempio, meno dell'1%). Più specificamente, …

13 standard-deviation bias

1

Regressione logistica bayesiana regolarizzata in JAGS

Esistono diversi documenti matematici che descrivono il lazo bayesiano, ma voglio un codice JAGS testato e corretto che posso usare. Qualcuno potrebbe pubblicare un codice BUGS / JAGS di esempio che implementa la regressione logistica regolarizzata? Qualsiasi schema (L1, L2, Elasticnet) sarebbe fantastico, ma è preferito Lasso. Mi chiedo anche …

13 bayesian logistic lasso jags regularization

2

Genera campioni di dati dalla regressione di Poisson

Mi chiedevo come avresti generato i dati da un'equazione di regressione di Poisson in R? Sono un po 'confuso su come affrontare il problema. Quindi, se presumo, abbiamo due predittori e X 2 che sono distribuiti N ( 0 , 1 ) . E l'intercetta è 0 ed entrambi i …

13 r regression poisson-distribution simulation