Statistiche e Big Data machine-learning

3

Come simulare dati statisticamente significativi?

Sono in terza media e sto cercando di simulare i dati per un progetto di fiera della scienza di apprendimento automatico. Il modello finale verrà utilizzato sui dati del paziente e prevede la correlazione tra determinati periodi della settimana e l'effetto che ciò ha sull'aderenza del farmaco all'interno dei dati …

18 machine-learning statistical-significance t-test python simulation

7

Dati distorti nell'apprendimento automatico

Sto lavorando a un progetto di Machine Learning con dati che sono già (fortemente) distorti dalla selezione dei dati. Supponiamo che tu abbia una serie di regole codificate. Come si crea un modello di apprendimento automatico per sostituirlo, quando tutti i dati che può utilizzare sono dati già filtrati da …

18 machine-learning classification data-mining bias extrapolation

3

Modelli iconici (giocattolo) di reti neurali

I miei professori di fisica alla scuola elementare, così come il premio Nobel Feynman, presentavano sempre quelli che chiamavano modelli di giocattoli per illustrare concetti e metodi di base in fisica, come l'oscillatore armonico, il pendolo, la trottola e la scatola nera. Quali modelli di giocattoli vengono utilizzati per illustrare …

18 machine-learning neural-networks deep-learning

4

Perché Q-Learning usa epsilon-greedy durante i test?

Nell'articolo di DeepMind su Deep Q-Learning per i videogiochi Atari ( qui ), usano un metodo avido di epsilon per l'esplorazione durante l'allenamento. Ciò significa che quando si seleziona un'azione in allenamento, questa viene scelta come azione con il valore q più alto o un'azione casuale. La scelta tra questi …

18 machine-learning reinforcement-learning q-learning deep-rl

1

Opinioni sul sovracampionamento in generale e l'algoritmo SMOTE in particolare [chiuso]

Chiuso . Questa domanda è basata sull'opinione . Al momento non accetta risposte. Vuoi migliorare questa domanda? Aggiorna la domanda in modo che possa essere risolta con fatti e citazioni modificando questo post . Chiuso 2 anni fa . Qual è la tua opinione sul sovracampionamento della classificazione in generale …

18 machine-learning classification oversampling

1

Effettuiamo davvero analisi di regressione multivariata con coefficienti * milioni * / variabili indipendenti?

Sto dedicando un po 'di tempo all'apprendimento automatico (mi dispiace per la ricorsione :) e non potrei fare a meno di essere incuriosito dalla regola empirica della scelta di Discendente pendenza rispetto alla risoluzione diretta dell'equazione per i coefficienti di regressione computazionale, nel caso della regressione lineare multivariata. Regola empirica: …

18 machine-learning multiple-regression large-data

2

Velocità, spese di calcolo di PCA, LASSO, rete elastica

Sto cercando di confrontare la complessità computazionale / la velocità di stima di tre gruppi di metodi per la regressione lineare, come distinto in Hastie et al. "Elements of Statistical Learning" (2a edizione), capitolo 3: Selezione del sottoinsieme Metodi di restringimento Metodi che utilizzano direzioni di input derivate (PCR, PLS) …

18 machine-learning estimation feature-selection algorithms time-complexity

4

Perché suddividere i dati nel set di training e test non è sufficiente

So che per accedere alle prestazioni del classificatore devo dividere i dati in training / test set. Ma leggendo questo : Quando si valutano impostazioni diverse ("iperparametri") per gli stimatori, come l'impostazione C che deve essere impostata manualmente per un SVM, sussiste il rischio di un overfitting sul set di …

18 machine-learning cross-validation

1

Come viene riportata la matrice di confusione dalla convalida incrociata di K-fold?

Supponiamo che esegua la convalida incrociata K-fold con K = 10 pieghe. Ci sarà una matrice di confusione per ogni piega. Quando si riportano i risultati, devo calcolare qual è la matrice di confusione media o semplicemente sommare le matrici di confusione?

18 machine-learning cross-validation accuracy

3

Perché la statistica gap per k-medie suggerisce un cluster, anche se ce ne sono ovviamente due?

Sto usando K-means per raggruppare i miei dati e stavo cercando un modo per suggerire un numero di cluster "ottimale". Le statistiche sui gap sembrano essere un modo comune per trovare un buon numero di cluster. Per qualche motivo restituisce 1 come numero di cluster ottimale, ma quando guardo i …

18 r machine-learning clustering k-means

2

Hidden Markov Model vs Markov Transition Model vs State-Space Model ...?

Per la tesi di laurea magistrale, sto lavorando allo sviluppo di un modello statistico per le transizioni tra stati diversi, definito dallo stato sierologico. Per ora, non fornirò troppi dettagli in questo contesto, poiché la mia domanda è più generale / teorica. Comunque, la mia intuizione è che dovrei usare …

18 machine-learning self-study hidden-markov-model

2

Perché ottimizzare un mix di gaussiano direttamente dal punto di vista computazionale?

Considera la probabilità di log di una miscela di gaussiani: l(Sn;θ)=∑t=1nlogf(x(t)|θ)=∑t=1nlog{∑i=1kpif(x(t)|μ(i),σ2i)}l(Sn;θ)=∑t=1nlog⁡f(x(t)|θ)=∑t=1nlog⁡{∑i=1kpif(x(t)|μ(i),σi2)}l(S_n; \theta) = \sum^n_{t=1}\log f(x^{(t)}|\theta) = \sum^n_{t=1}\log\left\{\sum^k_{i=1}p_i f(x^{(t)}|\mu^{(i)}, \sigma^2_i)\right\} Mi chiedevo perché era difficile dal punto di vista computazionale massimizzare quell'equazione direttamente? Stavo cercando una chiara intuizione solida sul perché dovrebbe essere ovvio che è difficile o forse una spiegazione …

18 machine-learning gaussian-mixture expectation-maximization

1

In che modo la foresta casuale estrema differisce dalla foresta casuale?

L'implementazione di ER è più efficiente ( Extreme Gradient Boostingè come aumentare il gradiente) - la differenza è importante dal punto di vista pratico? C'è un pacchetto R che li implementa. È un nuovo algoritmo che supera l'implementazione "generica" (pacchetto RandomForest da R) non solo in termini di efficienza o …

18 r machine-learning algorithms random-forest

2

Perché l'elaborazione del linguaggio naturale non rientra nel dominio di Machine Learning? [chiuso]

Allo stato attuale, questa domanda non è adatta al nostro formato di domande e risposte. Ci aspettiamo che le risposte siano supportate da fatti, riferimenti o competenze, ma questa domanda probabilmente solleciterà dibattiti, argomenti, sondaggi o discussioni estese. Se ritieni che questa domanda possa essere migliorata e possibilmente riaperta, visita …

18 machine-learning text-mining natural-language

2

In che modo l'analisi discriminante lineare riduce le dimensioni?

Ci sono parole da "Gli elementi dell'apprendimento statistico" a pagina 91: I centroidi K nello spazio di input p-dimensionale si estendono nella maggior parte del sottospazio dimensionale K-1 e se p è molto più grande di K, si tratterà di un notevole calo di dimensioni. Ho due domande: Perché i …

18 machine-learning discriminant-analysis

Domande taggate «machine-learning»