Statistiche e Big Data

Domande e risposte per le persone interessate alle statistiche, all'apprendimento automatico, all'analisi dei dati, al data mining e alla visualizzazione dei dati

Qual è il modo migliore per ricordare la differenza tra sensibilità, specificità, precisione, accuratezza e richiamo?

Nonostante abbia visto questi termini 502847894789 volte, non riesco a ricordare per la vita di me la differenza tra sensibilità, specificità, precisione, accuratezza e richiamo. Sono concetti piuttosto semplici, ma i nomi per me non sono molto intuitivi, quindi continuo a confonderli. Qual è un buon modo di pensare a …

50 terminology accuracy sensitivity-specificity

Soglia di probabilità di classificazione

Ho una domanda sulla classificazione in generale. Sia f un classificatore, che genera un insieme di probabilità dati alcuni dati D. Normalmente, si direbbe: beh, se P (c | D)> 0,5, assegneremo una classe 1, altrimenti 0 (sia un binario classificazione). La mia domanda è: cosa succede se scopro che …

49 machine-learning classification binary-data threshold

Quanto dovrebbe essere grande la dimensione del lotto per la discesa gradiente stocastica?

Comprendo che la discesa gradiente stocastica può essere utilizzata per ottimizzare una rete neurale mediante backpropagation aggiornando ogni iterazione con un diverso campione del set di dati di training. Quanto dovrebbe essere grande la dimensione del lotto?

49 machine-learning neural-networks gradient-descent backpropagation

Come si dovrebbe interpretare il confronto di medie di diverse dimensioni del campione?

Prendi il caso delle valutazioni dei libri su un sito web. Il libro A è valutato da 10.000 persone con una valutazione media di 4,25 e la varianza . Allo stesso modo il libro B è valutato da 100 persone e ha una valutazione di 4.5 con .σ = 0,25σ=0.5σ=0.5\sigma …

49 t-test mean sample-size

Perché il coefficiente di correlazione tra le variabili casuali X e XY tende ad essere 0,7

Tratto da Statistiche pratiche per la ricerca medica in cui Douglas Altman scrive a pagina 285: ... per due quantità qualsiasi X e Y, X sarà correlato a XY. In effetti, anche se X e Y sono campioni di numeri casuali, ci aspetteremmo che la correlazione di X e XY …

49 correlation random-variable intuition

In che modo regressione, test t e ANOVA sono tutte versioni del modello lineare generale?

Come sono tutte le versioni dello stesso metodo statistico di base?

49 regression self-study anova generalized-linear-model t-test

La "valutazione media" di Amazon è fuorviante?

Se ho capito bene, le valutazioni dei libri su una scala 1-5 sono punteggi Likert. Cioè, un 3 per me potrebbe non essere necessariamente un 3 per qualcun altro. È un IMO su scala ordinale. Non si dovrebbero veramente medie scale ordinali ma si può sicuramente prendere la modalità, la …

49 mean ordinal-data likert

Bootstrap vs. jackknife

Entrambi i metodi bootstrap e jackknife possono essere usati per stimare il bias e l'errore standard di una stima e i meccanismi di entrambi i metodi di ricampionamento non sono molto diversi: campionare con la sostituzione vs. tralasciare un'osservazione alla volta. Tuttavia, jackknife non è così popolare come bootstrap nella …

49 r confidence-interval bootstrap jackknife

Perché la regressione logistica è un classificatore lineare?

Poiché stiamo usando la funzione logistica per trasformare una combinazione lineare dell'input in un output non lineare, come può la regressione logistica essere considerata un classificatore lineare? La regressione lineare è proprio come una rete neurale senza lo strato nascosto, quindi perché le reti neurali sono considerate classificatori non lineari …

49 logistic classification neural-networks

Calcolo manuale del valore P dal valore t nel test t

Ho un set di dati di esempio con 31 valori. Ho eseguito un test t a due code usando R per verificare se la media vera è uguale a 10: t.test(x=data, mu=10, conf.level=0.95) Produzione: t = 11.244, df = 30, p-value = 2.786e-12 alternative hypothesis: true mean is not equal …

49 r statistical-significance t-test p-value

Qual è la differenza tra effetti casuali, effetti fissi e modello marginale?

Sto cercando di espandere la mia conoscenza delle statistiche. Vengo da un background di scienze fisiche con un approccio "basato sulla ricetta" ai test statistici, dove diciamo che è continuo, è normalmente distribuito - regressione OLS . Nella mia lettura mi sono imbattuto nei termini: modello di effetti casuali, modello …

49 random-effects-model fixed-effects-model marginal

Tempo di calcolo casuale della foresta in R

Sto usando il pacchetto party in R con 10.000 righe e 34 funzionalità e alcune funzionalità dei fattori hanno più di 300 livelli. Il tempo di elaborazione è troppo lungo. (Ci sono volute 3 ore finora e non è ancora finito.) Voglio sapere quali elementi hanno un grande effetto sul …

49 r random-forest

Metriche delle prestazioni per valutare l'apprendimento non supervisionato

Per quanto riguarda l'apprendimento non supervisionato (come il clustering), ci sono metriche per valutare le prestazioni?

49 machine-learning clustering data-mining unsupervised-learning

Cosa sono le variabili casuali iid?

Come spiegheresti iid (indipendente e distribuito in modo identico) a persone non tecniche?

49 random-variable intuition

Correlazione = 0,2 significa che esiste un'associazione "solo in 1 su 5 persone"?

In The Idiot Brain: A Neuroscientist spiega a cosa ti serve davvero la testa , Dean Burnett ha scritto La correlazione tra altezza e intelligenza viene generalmente citata in circa , il che significa che altezza e intelligenza sembrano essere associate solo in su .0.20.20.2111555 Per me, questo sembra sbagliato: …

48 correlation neuroscience

Utilizzando il nostro sito, riconosci di aver letto e compreso le nostre Informativa sui cookie e Informativa sulla privacy.

Licensed under cc by-sa 3.0 with attribution required.