Statistiche e Big Data

2

ROC medio per ripetute convalide incrociate di 10 volte con stime di probabilità

Sto pianificando di utilizzare una convalida incrociata ripetuta (10 volte) stratificata su circa 10.000 casi usando l'algoritmo di apprendimento automatico. Ogni volta che la ripetizione verrà eseguita con seme casuale diverso. In questo processo creo 10 istanze di stime di probabilità per ciascun caso. 1 istanza di stima della probabilità …

15 roc

2

Come vengono aggiornati i pesi nel metodo di apprendimento batch nelle reti neurali?

Qualcuno può dirmi come dovrei costruire una rete neurale usando il metodo batch? Ho letto che, in modalità batch, per tutti i campioni nel set di allenamento, calcoliamo i pesi di errore, delta e quindi delta per ciascun neurone nella rete e quindi invece di aggiornare immediatamente i pesi, li …

15 machine-learning neural-networks

1

Compresi i termini di interazione nella foresta casuale

Supponiamo di avere una risposta Y e i predittori X1, ...., Xn. Se dovessimo provare ad adattare Y tramite un modello lineare di X1, ...., Xn, ed è successo che la vera relazione tra Y e X1, ..., Xn non fosse lineare, potremmo essere in grado per riparare il modello …

15 machine-learning random-forest

3

Metriche per la valutazione degli algoritmi di classificazione

Sono interessato a esaminare diverse metriche per gli algoritmi di classificazione: ce ne sono alcuni elencati nella pagina di Wikipedia per imparare a classificare, tra cui: • Precisione media media (MAP); • DCG e NDCG; • Precisione @ n, NDCG @ n, dove "@n" indica che le metriche vengono valutate …

15 algorithms ranking

1

Che cos'è "Aspettativa di massima verosimiglianza mirata"?

Sto cercando di capire alcuni articoli di Mark van der Laan. È uno statistico teorico di Berkeley che lavora su problemi che si sovrappongono in modo significativo con l'apprendimento automatico. Un problema per me (oltre alla matematica profonda) è che spesso finisce per descrivere approcci di machine learning familiari usando …

15 mathematical-statistics estimation nonparametric autocorrelation censoring

2

Qual è la definizione di precisione Top-n?

Sto leggendo un articolo scientifico sulla classificazione delle immagini. Nei risultati sperimentali parlano della precisione top-1 e top-5 ma non ho mai sentito parlare del termine, né riesco a trovarlo usando google. Qualcuno può darmi una definizione o indicarmi da qualche parte? :)

15 machine-learning

1

Come interpretare l'ACF negativo (funzione di autocorrelazione)?

Quindi ho tracciato l'ACF / PACF dei ritorni di petrolio e mi aspettavo di vedere un po 'di autocorrelazione positiva ma con mia sorpresa ho solo un'autocorrelazione significativa negativa. Come devo interpretare il grafico sopra? Sembrano indicare che c'è una tendenza per i rendimenti del petrolio ad aumentare quando è …

15 time-series

3

Verifica se le distribuzioni multidimensionali sono uguali

Diciamo che ho due o più popolazioni campione di vettori a valore continuo n-dimensionali. Esiste un modo non parametrico per verificare se questi campioni provengono dalla stessa distribuzione? In tal caso, esiste una funzione in R o Python per questo?

15 r distributions nonparametric python

2

Perché il ridimensionamento è importante per la classificazione lineare SVM?

Quando si esegue la classificazione lineare SVM, è spesso utile normalizzare i dati di allenamento, ad esempio sottraendo la media e dividendo per la deviazione standard, e successivamente ridimensionare i dati del test con la deviazione media e standard dei dati di allenamento. Perché questo processo cambia drasticamente le prestazioni …

15 machine-learning svm standardization

3

Confronto di elenchi classificati

Supponiamo che due gruppi, composti da e n 2, ciascuno classifichi un insieme di 25 elementi dal più al meno importante. Quali sono i modi migliori per confrontare queste classifiche?n1n1n_1n2n2n_2 Chiaramente, è possibile eseguire 25 test di Mann-Whitney U, ma ciò comporterebbe 25 risultati di test da interpretare, che possono …

15 ranking group-differences

1

Correlazione a distanza rispetto a informazioni reciproche

Ho lavorato con le informazioni reciproche per qualche tempo. Ma ho trovato una misura molto recente nel "mondo di correlazione" che può anche essere usata per misurare l'indipendenza della distribuzione, la cosiddetta "correlazione a distanza" (anche chiamata correlazione browniana): http://en.wikipedia.org/wiki/Brownian_covariance . Ho controllato i documenti in cui è stata introdotta …

15 correlation mutual-information distance-covariance

2

Perché il test U di Mann-Whitney è significativo quando le mediane sono uguali?

Ho ricevuto risultati da un test di grado Mann-Whitney che non capisco. La mediana delle 2 popolazioni è identica (6.9). I quantili superiore e inferiore di ogni popolazione sono: 6,64 e 7,2 6.60 e 7.1 Il valore p risultante dal test che confronta queste popolazioni è 0,007. In che modo …

15 nonparametric median ranks wilcoxon-mann-whitney

1

Quali sono i più acuti noti limiti di coda per

Sia una variabile casuale distribuita chi-quadrato con gradi di libertà. Quali sono i limiti più netti noti per le seguenti probabilitàX∼ χ2KX~χK2X \sim \chi^2_kKKk P [X> t ] ≤ 1 - δ1( t , k )P[X>t]≤1-δ1(t,K) \mathbb{P}[X > t] \leq 1 - \delta_1(t, k) e P[X<z]≤1−δ2(z,k)P[X<z]≤1−δ2(z,k) \mathbb{P}[X < z] \leq …

15 probability chi-squared

1

Analisi della correlazione incrociata tra processi punto

Vorrei un consiglio su un metodo di analisi che sto usando, per sapere se è statisticamente valido. Ho misurato due punti processi e T 2 = t 2 1 , t 2 2 , . . . , T 2 m e voglio per determinare se gli eventi in T …

15 point-process cross-correlation

1

Qual è il derivato della funzione di attivazione ReLU?

Qual è la derivata della funzione di attivazione ReLU definita come: R e L U ( x ) = m a x ( 0 , x )ReLU(x)=max(0,x) \mathrm{ReLU}(x) = \mathrm{max}(0, x) Che dire del caso speciale in cui vi è una discontinuità nella funzione in ?x = 0x=0x=0

15 self-study neural-networks