Statistiche e Big Data

4

Reti neurali artificiali EQUIVALENTE alla regressione lineare con caratteristiche polinomiali?

Voglio migliorare la mia comprensione delle reti neurali e dei loro vantaggi rispetto ad altri algoritmi di apprendimento automatico. La mia comprensione è la seguente e la mia domanda è: Puoi correggere e integrare la mia comprensione per favore? :) La mia comprensione: (1) Reti neurali artificiali = una funzione …

11 regression machine-learning

3

Perché la probabilità nel filtro Kalman viene calcolata utilizzando i risultati del filtro anziché i risultati più fluidi?

Sto usando il filtro Kalman in un modo molto standard. Il sistema è rappresentato dall'equazione di stato e dall'equazione di osservazione .xt+1=Fxt+vt+1xt+1=Fxt+vt+1x_{t+1}=Fx_{t}+v_{t+1}yt=Hxt+Azt+wtyt=Hxt+Azt+wty_{t}=Hx_{t}+Az_{t}+w_{t} I libri di testo insegnano che dopo aver applicato il filtro Kalman e aver ottenuto le "previsioni a un passo" (o "stima filtrata"), dovremmo usarli per calcolare la …

11 likelihood kalman-filter

3

Come implementare la regolarizzazione L2 verso un punto arbitrario nello spazio?

Ecco qualcosa che ho letto nel libro Deep Learning di Ian Goodfellow . Nel contesto delle reti neurali, "la penalità della norma del parametro L2 è comunemente nota come riduzione del peso. Questa strategia di regolarizzazione avvicina i pesi all'origine [...]. Più in generale, potremmo regolarizzare i parametri in modo …

11 machine-learning neural-networks deep-learning regularization

2

La percentuale di errore è una funzione convessa del parametro di regolarizzazione lambda?

Nella scelta del parametro di regolarizzazione lambda in Ridge o Lasso, il metodo consigliato è provare diversi valori di lambda, misurare l'errore nel set di convalida e infine scegliere quel valore di lambda che restituisce l'errore più basso. Non è un problema per me se la funzione f (lambda) = …

11 cross-validation error regularization validation optimization

4

Correlazione tra X e XY

Se ho due variabili casuali indipendenti X e Y, qual è la correlazione tra X e il prodotto XY? Se questo è sconosciuto, sarei interessato a sapere almeno cosa succede nel caso specifico di X e Y normali con zero media, se è più facile da risolvere.

11 correlation

5

Perché rifiutiamo l'ipotesi nulla a livello 0,05 e non a livello 0,5 (come facciamo nella classificazione)

Il test di ipotesi è simile a un problema di classificazione. Quindi, diciamo, abbiamo 2 possibili etichette per un'osservazione (soggetto): colpevole contro non colpevole. Lascia che il non colpevole sia l'ipotesi nulla. Se considerassimo il problema dal punto di vista della classificazione, formeremmo un classificatore che predirebbe la probabilità del …

11 probability hypothesis-testing classification p-value

5

Come generare una sequenza con media ?

So come generare una sequenza con media . Ad esempio, in Matlab, se voglio generare una sequenza di lunghezza , è:0 ± 1 10000±1±1\pm 1000±1±1\pm 1100001000010000 2*(rand(1, 10000, 1)<=.5)-1 Tuttavia, come generare una sequenza con media , ovvero con leggermente preferito?±1±1\pm 110.050.050.05111

11 distributions sampling random-generation

2

La suddivisione dei dati in set di test e training è puramente una cosa "statistica"?

Sono uno studente di fisica che studia apprendimento automatico / scienza dei dati, quindi non intendo per questa domanda iniziare alcun conflitto :) Tuttavia, gran parte di qualsiasi programma di laurea in fisica è fare laboratori / esperimenti, il che significa molti dati elaborazione e analisi statistica. Tuttavia, noto una …

11 regression machine-learning cross-validation dataset experiment-design

2

Informazioni reciproche come probabilità

Le informazioni reciproche sull'entropia comune potrebbero essere: 0 ≤ I( X, Y)H( X, Y)≤ 10≤io(X,Y)H(X,Y)≤1 0 \leq \frac{I(X,Y)}{H(X,Y)} \leq 1 essere definito come: "La probabilità di trasmettere un'informazione da X a Y"? Mi dispiace di essere così ingenuo, ma non ho mai studiato la teoria dell'informazione e sto solo cercando …

11 information-theory mutual-information

1

Cosa fai se i tuoi gradi di libertà superano la fine dei tuoi tavoli?

I gradi di libertà nella mia tabella F non salgono abbastanza in alto per il mio grande campione. Ad esempio, se ho una F con 5 e 6744 gradi di libertà, come posso trovare il valore critico del 5% per un ANOVA? E se stessi facendo un test chi-quadro con …

11 chi-squared degrees-of-freedom f-distribution tables

1

Pesi casuali e di classe

Domanda in una frase: qualcuno sa come determinare pesi di buona classe per una foresta casuale? Spiegazione: Sto giocando con set di dati non bilanciati. Voglio usare il Rpacchetto randomForestper formare un modello su un set di dati molto distorto con solo piccoli esempi positivi e molti esempi negativi. Lo …

11 r random-forest

1

Punta e lastra bayesiane contro metodi penalizzati

Sto leggendo le diapositive di Steven Scott sul pacchetto BSTS R (le puoi trovare qui: diapositive ). Ad un certo punto, quando si parla di includere molti regressori nel modello strutturale delle serie temporali, introduce i picchi di picco e di lastra dei coefficienti di regressione e afferma che sono …

11 r bayesian feature-selection penalized bsts

1

Perché Netflix dovrebbe passare dal suo sistema di valutazione a cinque stelle a un sistema like / antipatia?

Netflix era solito basare i suoi suggerimenti sulle valutazioni inviate da un utente di altri film / spettacoli. Questo sistema di valutazione aveva cinque stelle. Ora, Netflix consente agli utenti di apprezzare / non amare (pollice su / pollice giù) film / spettacoli. Sostengono che sia più facile valutare i …

11 variance predictive-models prediction

5

Stai dimostrando che lo stimatore OLS è equivalente alla scala?

Non ho una definizione formale di equivalenza di scala, ma ecco cosa dice Introduzione all'apprendimento statistico a pag. 217: I coefficienti standard dei minimi quadrati ... sono equivalenti alla scala : moltiplicare XjXjX_j per una costante porta semplicemente a un ridimensionamento delle stime del coefficiente dei minimi quadrati per un …

11 least-squares linear-model

2

Devo segnalare risultati non significativi?

Ho eseguito un test Kruskal Wallis e per alcune delle domande il valore p non è significativo. Lo riferirei allo stesso modo come se fosse significativo, indicando df, statistica test e valore p? Quindi sarebbe qualcosa del genere è stato condotto un test di Kruskal Wallis ma i risultati non …

11 spss kruskal-wallis reporting