Scienza dei dati python

2

Come sommare i valori raggruppati per due colonne in panda

Ho un Pandas DataFrame come questo: df = pd.DataFrame({ 'Date': ['2017-1-1', '2017-1-1', '2017-1-2', '2017-1-2', '2017-1-3'], 'Groups': ['one', 'one', 'one', 'two', 'two'], 'data': range(1, 6)}) Date Groups data 0 2017-1-1 one 1 1 2017-1-1 one 2 2 2017-1-2 one 3 3 2017-1-2 two 4 4 2017-1-3 two 5 Come posso generare …

21 python pandas dataframe

3

Unione di più frame di dati in ordine di riga in PySpark

Ho telai 10 di dati pyspark.sql.dataframe.DataFrame, ottenuti da randomSplitcome (td1, td2, td3, td4, td5, td6, td7, td8, td9, td10) = td.randomSplit([.1, .1, .1, .1, .1, .1, .1, .1, .1, .1], seed = 100)Ora voglio unire 9 td's in un singolo frame di dati, come devo fare? Ho già provato con …

21 python apache-spark cross-validation pyspark

2

train_test_split () errore: trovate variabili di input con numeri incoerenti di campioni

Abbastanza nuovo su Python ma costruendo il mio primo modello RF basato su alcuni dati di classificazione. Ho convertito tutte le etichette in dati numerici int64 e caricato in X e Y come una matrice numpy, ma sto provando un errore quando provo ad addestrare i modelli. Ecco come appaiono …

21 python scikit-learn sampling

3

Differenza tra OrdinalEncoder e LabelEncoder

Stavo esaminando la documentazione ufficiale di scikit-learn learn dopo aver letto un libro su ML e mi sono imbattuto nella seguente cosa: Nella Documentazione è data sklearn.preprocessing.OrdinalEncoder()mentre mentre nel libro è stata data sklearn.preprocessing.LabelEncoder(), quando ho verificato la loro funzionalità mi è sembrato lo stesso. Qualcuno può dirmi la differenza …

21 machine-learning python scikit-learn preprocessing encoding

2

Keras vs. tf.keras

Sono un po 'confuso nella scelta tra Keras (keras-team / keras) e tf.keras (tensorflow / tensorflow / python / keras /) per il mio nuovo progetto di ricerca. C'è un dibattito sul fatto che Keras non sia di proprietà di nessuno, quindi le persone sono più felici di contribuire e …

20 python deep-learning keras tensorflow

3

Implementazione Python della funzione di costo nella regressione logistica: perché la moltiplicazione dei punti in un'espressione ma la moltiplicazione degli elementi in un'altra

Ho una domanda di base che riguarda Python, intorpidimento e moltiplicazione delle matrici nel contesto della regressione logistica. Prima di tutto, vorrei scusarmi per non aver usato la notazione matematica. Sono confuso sull'uso della moltiplicazione dei punti matrice rispetto alla moltiplicazione saggia degli elementi. La funzione di costo è data …

18 python logistic-regression cost-function

1

Modi per gestire la funzionalità longitudine / latitudine [chiuso]

Chiuso . Questa domanda richiede dettagli o chiarezza . Al momento non accetta risposte. Vuoi migliorare questa domanda? Aggiungi dettagli e chiarisci il problema modificando questo post . Chiuso 3 anni fa . Sto lavorando a un set di dati di fantasia con 25 funzionalità. Due delle caratteristiche sono la …

18 machine-learning python feature-engineering feature-scaling normalization

3

esiste uno strumento di riordino dei dati per python / panda simile allo strumento R tidyr?

Sto lavorando a una sfida di Kaggle in cui alcune variabili sono rappresentate da righe anziché da colonne (interruzione della rete Telstra). Attualmente sto cercando l'equivalente di gather (), separate () e spread (), che si trova nello strumento R tidyr.

18 r python dataset data-cleaning pandas

4

Ricerca di iperparametri per LSTM-RNN usando Keras (Python)

Da Keras RNN Tutorial: "Gli RNN sono difficili. La scelta della dimensione del batch è importante, la scelta della perdita e l'ottimizzatore sono fondamentali, ecc. Alcune configurazioni non convergono." Quindi questa è più una domanda generale sull'ottimizzazione degli iperparametri di un LSTM-RNN su Keras. Vorrei sapere un approccio per trovare …

18 python neural-network deep-learning keras hyperparameter

3

Estrazione delle caratteristiche delle immagini in Python

Nella mia classe devo creare un'applicazione usando due classificatori per decidere se un oggetto in un'immagine è un esempio di phylum porifera (spugna di mare) o qualche altro oggetto. Tuttavia, mi sono completamente perso quando si tratta di tecniche di estrazione in Python. Il mio consulente mi ha convinto a …

18 python feature-extraction image-recognition

4

Migliora la velocità dell'implementazione di t-sne in Python per dati enormi

Vorrei ridurre la dimensionalità su quasi 1 milione di vettori ciascuno con 200 dimensioni ( doc2vec). Sto usando l' TSNEimplementazione dal sklearn.manifoldmodulo per questo e il problema principale è la complessità temporale. Anche con method = barnes_hut, la velocità di calcolo è ancora bassa. Qualche volta anche la memoria si …

18 python bigdata nlp scikit-learn dimensionality-reduction

4

Qual è il vantaggio di dividere il file tfrecord in frammenti?

Sto lavorando al riconoscimento vocale con Tensorflow e sto pianificando di addestrare LSTM NN con un set di dati ad onde enormi. A causa degli aumenti delle prestazioni, ho intenzione di utilizzare tfrecords. Ci sono molti esempi su Internet (Inception per es.) In cui i file di tfrecords sono divisi …

17 python tensorflow

3

Alla ricerca di un buon pacchetto per il rilevamento di anomalie nelle serie temporali

Esiste un pacchetto open source completo (preferibilmente in Python o R) che può essere utilizzato per il rilevamento di anomalie nelle serie temporali? Esiste un pacchetto SVM di una classe in scikit-learn ma non è per i dati di serie temporali. Sto cercando pacchetti più sofisticati che, ad esempio, utilizzano …

17 python time-series anomaly-detection

2

Esempio di callback di Keras per salvare un modello dopo ogni epoca?

Qualcuno può pubblicare un semplice esempio di Keras usando un callback per salvare un modello dopo ogni epoca? Posso trovare esempi di risparmio di pesi, ma voglio essere in grado di salvare un modello completamente funzionante dopo ogni epoca di allenamento.

17 python keras

8

Come contare il numero di valori mancanti in ogni riga nel frame di dati Pandas?

Come posso ottenere il numero di valore mancante in ogni riga nel frame di dati di Pandas. Vorrei dividere i frame di dati in frame di dati diversi che hanno lo stesso numero di valori mancanti in ogni riga. Qualche suggerimento?

17 python pandas

Domande taggate «python»