Statistiche e Big Data algorithms

3

Chi ha creato la prima tabella normale standard?

Sto per introdurre la tabella normale standard nella mia classe di statistiche introduttive e questo mi ha fatto riflettere: chi ha creato la prima tabella normale standard? Come hanno fatto prima che arrivassero i computer? Rabbrividisco al pensiero di qualcuno che forza bruta calcolando a mano un migliaio di somme …

61 normal-distribution algorithms history tables

7

Il miglior algoritmo PCA per un numero enorme di funzionalità (> 10 K)?

In precedenza l'ho chiesto su StackOverflow, ma sembra che qui potrebbe essere più appropriato, dato che non ha ricevuto risposte su SO. È una specie di incrocio tra statistica e programmazione. Ho bisogno di scrivere un po 'di codice per fare PCA (Analisi dei componenti principali). Ho sfogliato i noti …

54 pca algorithms model-evaluation high-dimensional

6

Regressione lineare online efficiente

Sto analizzando alcuni dati in cui vorrei eseguire la regressione lineare ordinaria, tuttavia ciò non è possibile in quanto ho a che fare con un'impostazione online con un flusso continuo di dati di input (che diventerà rapidamente troppo grande per la memoria) e di cui ho bisogno per aggiornare le …

53 time-series regression algorithms real-time

10

Misura entropia / informazioni / schemi di una matrice binaria 2d

Voglio misurare l'entropia / la densità di informazioni / la somiglianza del modello di una matrice binaria bidimensionale. Vorrei mostrare alcune immagini per chiarimenti: Questo display dovrebbe avere un'entropia piuttosto elevata: UN) Questo dovrebbe avere entropia media: B) Queste immagini, infine, dovrebbero avere tutte un'entropia quasi zero: C) D) E) …

53 algorithms binary-data entropy pattern-recognition information

7

Rilevamento del periodo di una serie storica generica

Questo post è la continuazione di un altro post correlato a un metodo generico per il rilevamento anomalo nelle serie temporali . Fondamentalmente, a questo punto mi interessa un modo robusto per scoprire la periodicità / stagionalità di una serie storica generica influenzata da un sacco di rumore. Dal punto …

53 time-series algorithms frequency real-time

10

Qual è un buon algoritmo per stimare la mediana di un enorme set di dati read-once?

Sto cercando un buon algoritmo (che significa calcolo minimo, requisiti minimi di archiviazione) per stimare la mediana di un set di dati che è troppo grande per essere archiviato, in modo tale che ogni valore possa essere letto una sola volta (a meno che tu non lo memorizzi esplicitamente). Non …

48 algorithms median large-data

5

Qual è la differenza tra gli algoritmi forward-backward e Viterbi?

Voglio sapere quali sono le differenze tra l' algoritmo avanti-indietro e l' algoritmo di Viterbi per l'inferenza nei modelli nascosti di Markov (HMM).

44 algorithms hidden-markov-model viterbi-algorithm forward-backward

5

Implementazioni ottimizzate dell'algoritmo Random Forest

Ho notato che ci sono alcune implementazioni di foreste casuali come ALGLIB, Waffles e alcuni pacchetti R come randomForest. Qualcuno può dirmi se queste librerie sono altamente ottimizzate? Sono sostanzialmente equivalenti alle foreste casuali descritte in dettaglio in The Elements of Statistical Learning o sono stati aggiunti molti trucchi extra? …

43 random-forest algorithms model-evaluation

6

Quale algoritmo viene utilizzato nella regressione lineare?

Di solito sento parlare di "minimi quadrati ordinari". È l'algoritmo più utilizzato per la regressione lineare? Ci sono motivi per usarne uno diverso?

42 regression least-squares algorithms computational-statistics numerics

3

Quali sono le differenze tra i modelli di Markov nascosti e le reti neurali?

Mi sto solo bagnando i piedi nelle statistiche, quindi mi dispiace se questa domanda non ha senso. Ho usato i modelli Markov per prevedere stati nascosti (casinò ingiusti, lancio di dadi, ecc.) E reti neurali per studiare i clic degli utenti su un motore di ricerca. Entrambi avevano stati nascosti …

40 data-mining algorithms neural-networks markov-process

6

Approssimativo

Di recente ho osservato la simulazione Monte Carlo e l'ho usata per approssimare costanti come ππ\pi (cerchio all'interno di un rettangolo, area proporzionata). Tuttavia, non riesco a pensare a un metodo corrispondente per approssimare il valore di eee [numero di Eulero] usando l'integrazione di Monte Carlo. Hai qualche suggerimento su …

35 simulation monte-carlo algorithms random-generation numerical-integration

6

Data mining: come devo fare per trovare il modulo funzionale?

Sono curioso di sapere procedure ripetibili che possono essere utilizzati per scoprire la forma funzionale della funzione y = f(A, B, C) + error_termin cui il mio unico input è un insieme di osservazioni ( y, A, Be C). Si noti che la forma funzionale di fè sconosciuta. Considera il …

34 regression machine-learning algorithms model-selection data-mining

1

Differenza tra algoritmi k-medie standard e sferici

Vorrei capire qual è la principale differenza di implementazione tra algoritmi di clustering k-medie standard e sferici. In ogni passaggio, k-mean calcola le distanze tra i vettori degli elementi e i centroidi del cluster e riassegna il documento a questo cluster, il cui centroide è il più vicino. Quindi, tutti …

28 clustering data-mining algorithms k-means

3

Il miglior algoritmo bandito?

L'algoritmo bandit più noto è il limite di confidenza superiore (UCB) che ha reso popolare questa classe di algoritmi. Da allora presumo che ora ci siano algoritmi migliori. Qual è l'attuale migliore algoritmo (in termini di prestazioni empiriche o limiti teorici)? Questo algoritmo è in qualche modo ottimale?

27 machine-learning algorithms theory reinforcement-learning multiarmed-bandit

1

Come definire la condizione di terminazione per la discesa gradiente?

In realtà, volevo chiederti come posso definire la condizione terminale per la discesa del gradiente. Posso interromperlo in base al numero di iterazioni, ovvero considerando i valori dei parametri per, diciamo, 100 iterazioni? O dovrei aspettare in modo tale che i diversi valori dei due parametri "nuovo" e "vecchio" siano …

24 algorithms optimization gradient-descent

Domande taggate «algorithms»