Statistiche e Big Data

3

Diagnostica per la regressione logistica?

Per la regressione lineare, possiamo verificare i grafici diagnostici (grafici dei residui, grafici QQ normali, ecc.) Per verificare se le ipotesi di regressione lineare sono violate. Per la regressione logistica, ho difficoltà a trovare risorse che spiegano come diagnosticare il modello di regressione logistica adatto. Scavando alcune note del corso …

74 regression logistic

29

Esempi di insegnamento: la correlazione non significa causalità

C'è un vecchio detto: "La correlazione non significa causalità". Quando insegno, tendo a usare i seguenti esempi standard per illustrare questo punto: numero di cicogne e tasso di natalità in Danimarca; numero di sacerdoti in America e alcolismo; all'inizio del XX secolo è stato osservato che esisteva una forte correlazione …

74 correlation teaching

6

Perché usare la discesa gradiente per la regressione lineare, quando è disponibile una soluzione matematica a forma chiusa?

Sto seguendo i corsi di Machine Learning online e ho appreso la Discesa del gradiente per il calcolo dei valori ottimali nell'ipotesi. h(x) = B0 + B1X perché dobbiamo usare la pendenza del gradiente se riusciamo a trovare facilmente i valori con la formula seguente? Questo sembra semplice e anche …

74 regression machine-learning gradient-descent

5

Che cos'è la regolarizzazione in inglese?

A differenza di altri articoli, ho trovato la voce di Wikipedia per questo argomento illeggibile per una persona non matematica (come me). Ho capito l'idea di base, secondo cui preferisci modelli con meno regole. Quello che non capisco è come si passa da un insieme di regole a un "punteggio …

74 regularization

4

Una rivista di psicologia ha vietato i valori p e gli intervalli di confidenza; è davvero saggio smettere di usarli?

Il 25 febbraio 2015 la rivista Basic and Applied Social Psychology ha pubblicato un editoriale che vieta i valori e gli intervalli di confidenza di tutti gli articoli futuri.ppp In particolare, dicono (la formattazione e l'enfasi sono mie): [...] prima della pubblicazione, gli autori dovranno rimuovere tutte le tracce dell'NHSTP …

73 hypothesis-testing confidence-interval p-value effect-size psychology

6

Nessuna correlazione non implica alcuna causalità?

So che la correlazione non implica la causalità ma un'assenza di correlazione implica l'assenza di causalità?

73 correlation causality

3

Che cos'è la "massima probabilità limitata" e quando dovrebbe essere utilizzata?

Ho letto nell'abstract di questo documento che: "La procedura di massima verosimiglianza (ML) di Hartley aud Rao viene modificata adattando una trasformazione di Patterson e Thompson che suddivide la verosimiglianza in due parti, una delle quali priva degli effetti fissi. Massimizzare questa parte produce ciò che viene chiamato verosimiglianza massima …

73 mixed-model maximum-likelihood reml

6

Modello per la previsione del numero di visualizzazioni Youtube di Gangnam Style

Il video musicale di PSY "Gangnam style" è popolare, dopo poco più di 2 mesi ha circa 540 milioni di spettatori. L'ho imparato dai miei figli del preteen a cena la scorsa settimana e presto la discussione è andata nella direzione di se fosse possibile fare una sorta di previsione …

73 modeling web

15

Buona GUI per R adatta a un principiante che vuole imparare la programmazione in R?

Esiste una GUI per R che rende più facile per un principiante iniziare a studiare e programmare in quella lingua?

73 r

11

Avere un lavoro nel data mining senza dottorato

Sono stato molto interessato al data mining e all'apprendimento automatico per un po ', in parte perché mi sono laureato in quell'area a scuola, ma anche perché sono davvero molto più entusiasta nel cercare di risolvere problemi che richiedono un po' più di pensiero rispetto alla semplice programmazione conoscenza e …

73 machine-learning data-mining careers phd

2

Che cos'è un "kernel" in un inglese semplice?

Esistono diversi usi distinti: stima della densità del kernel trucco del kernel smoothing del kernel Spiega cosa significa il "kernel" in loro, in parole povere, con parole tue.

73 kernel-trick kernel-smoothing

6

Scelta di un metodo di clustering

Quando si utilizza l'analisi dei cluster su un set di dati per raggruppare casi simili, è necessario scegliere tra un gran numero di metodi di clustering e misure di distanza. A volte, una scelta potrebbe influenzare l'altra, ma ci sono molte possibili combinazioni di metodi. Qualcuno ha qualche consiglio su …

73 clustering distance-functions methodology

9

Come dovrebbero essere trattati i valori anomali nell'analisi della regressione lineare?

Spesso a un analista statistico viene consegnato un set di dati impostato e viene chiesto di adattare un modello utilizzando una tecnica come la regressione lineare. Molto spesso il set di dati è accompagnato da una dichiarazione di non responsabilità simile a "Oh sì, abbiamo sbagliato a raccogliere alcuni di …

73 regression outliers

6

C'è qualche buona ragione per usare PCA invece di EFA? Inoltre, PCA può essere un sostituto dell'analisi fattoriale?

In alcune discipline, PCA (analisi dei componenti principali) viene sistematicamente utilizzato senza alcuna giustificazione e PCA ed EFA (analisi dei fattori esplorativi) sono considerati sinonimi. Di recente ho quindi utilizzato PCA per analizzare i risultati di uno studio di validazione della scala (21 articoli su scala Likert a 7 punti, …

73 pca factor-analysis eda

4

Quando utilizzare il framework Fisher e Neyman-Pearson?

Recentemente ho letto molto sulle differenze tra il metodo di verifica delle ipotesi di Fisher e la scuola di pensiero Neyman-Pearson. La mia domanda è, ignorando per un momento le obiezioni filosofiche; quando dovremmo usare l'approccio di Fisher alla modellistica statistica e quando dovremmo usare il metodo dei livelli di …

73 hypothesis-testing p-value methodology