Programmazione dataframe

7

Come creare un DataFrame vuoto con uno schema specificato?

Voglio creare su DataFrame con uno schema specificato in Scala. Ho provato a usare JSON read (intendo leggere file vuoti) ma non credo che sia la migliore pratica.

94 scala apache-spark dataframe apache-spark-sql

5

Aggiungi colonna nel dataframe dall'elenco

Ho un dataframe con alcune colonne come questa: A B C 0 4 5 6 7 7 6 5 I possibili intervalli di valori in A sono solo da 0 a 7 . Inoltre, ho un elenco di 8 elementi come questo: List=[2,5,6,8,12,16,26,32] //There are only 8 elements in this …

94 python pandas dataframe

11

Come esplodere un elenco all'interno di una cella Dataframe in righe separate

Sto cercando di trasformare una cella panda contenente un elenco in righe per ciascuno di quei valori. Quindi, prendi questo: Se desidero decomprimere e impilare i valori nella nearest_neighborscolonna in modo che ogni valore sia una riga all'interno di ogni opponentindice, come dovrei farlo al meglio? Esistono metodi panda pensati …

93 python pandas dataframe

5

Ridenominazione dei nomi delle colonne di un DataFrame in Spark Scala

Sto cercando di convertire tutte le intestazioni / i nomi delle colonne di un DataFramein Spark-Scala. fin d'ora mi viene in mente il seguente codice che sostituisce solo il nome di una singola colonna. for( i <- 0 to origCols.length - 1) { df.withColumnRenamed( df.columns(i), df.columns(i).toLowerCase ); }

93 scala apache-spark dataframe apache-spark-sql

6

Converti le serie di panda in DataFrame

Ho una serie di panda sf: email email1@email.com [1.0, 0.0, 0.0] email2@email.com [2.0, 0.0, 0.0] email3@email.com [1.0, 0.0, 0.0] email4@email.com [4.0, 0.0, 0.0] email5@email.com [1.0, 0.0, 3.0] email6@email.com [1.0, 5.0, 0.0] E vorrei trasformarlo nel seguente DataFrame: index | email | list _____________________________________________ 0 | email1@email.com | [1.0, 0.0, 0.0] …

92 python pandas dataframe series

7

Sostituzione di pochi valori in una colonna dataframe panda con un altro valore

Ho un pandas dataframe df come illustrato di seguito: BrandName Specialty A H B I ABC J D K AB L Voglio sostituire "ABC" e "AB" nella colonna BrandName con A. Qualcuno può aiutarmi in questo?

92 python replace pandas dataframe

6

Ambiguità nella definizione di "asse" di Pandas Dataframe / Numpy Array

Sono stato molto confuso su come vengono definiti gli assi Python e se si riferiscono a righe o colonne di un DataFrame. Considera il codice seguente: >>> df = pd.DataFrame([[1, 1, 1, 1], [2, 2, 2, 2], [3, 3, 3, 3]], columns=["col1", "col2", "col3", "col4"]) >>> df col1 col2 col3 …

91 python arrays pandas numpy dataframe

9

Importa file CSV come DataFrame panda

Qual è il modo in cui Python legge un file CSV in un DataFrame panda (che posso quindi utilizzare per operazioni statistiche, può avere colonne di tipo diverso, ecc.)? Il mio file CSV "value.txt"ha il seguente contenuto: Date,"price","factor_1","factor_2" 2012-06-11,1600.20,1.255,1.548 2012-06-12,1610.02,1.258,1.554 2012-06-13,1618.07,1.249,1.552 2012-06-14,1624.40,1.253,1.556 2012-06-15,1626.15,1.258,1.552 2012-06-16,1626.15,1.263,1.558 2012-06-17,1626.15,1.264,1.572 In R leggiamo questo file …

91 python pandas csv dataframe

5

come dividere la colonna di tuple in dataframe panda?

Ho un dataframe panda (questo è solo un piccolo pezzo) >>> d1 y norm test y norm train len(y_train) len(y_test) \ 0 64.904368 116.151232 1645 549 1 70.852681 112.639876 1645 549 SVR RBF \ 0 (35.652207342877873, 22.95533537448393) 1 (39.563683797747622, 27.382483096332511) LCV \ 0 (19.365430594452338, 13.880062435173587) 1 (19.099614489458364, 14.018867136617146) RIDGE CV …

91 python numpy pandas dataframe tuples

5

Costruisci DataFrame panda dagli elementi nel dizionario annidato

Supponiamo di avere un dizionario annidato 'user_dict' con struttura: Livello 1: ID utente (intero lungo) Livello 2: Categoria (stringa) Livello 3: attributi assortiti (float, int, ecc ..) Ad esempio, una voce di questo dizionario sarebbe: user_dict[12] = { "Category 1": {"att_1": 1, "att_2": "whatever"}, "Category 2": {"att_1": 23, "att_2": "another"}} …

90 python pandas dataframe multi-index

5

Spark DataFrame groupBy e ordina in ordine decrescente (pyspark)

Sto usando pyspark (Python 2.7.9 / Spark 1.3.1) e ho un GroupObject del dataframe che devo filtrare e ordinare in ordine decrescente. Sto cercando di ottenerlo tramite questo pezzo di codice. group_by_dataframe.count().filter("`count` >= 10").sort('count', ascending=False) Ma genera il seguente errore. sort() got an unexpected keyword argument 'ascending'

90 python apache-spark dataframe pyspark apache-spark-sql

5

Spostare la colonna nel dataframe dei panda di uno?

Ho un dataframe dei panda. Voglio "ritardare" una delle mie colonne. Significa, ad esempio, spostare l'intera colonna "gdp" verso l'alto di uno e quindi rimuovere tutti i dati in eccesso nella parte inferiore delle righe rimanenti in modo che tutte le colonne abbiano di nuovo la stessa lunghezza. df = …

90 python pandas dataframe

13

Confrontando due dataframe e ottenendo le differenze

Ho due frame di dati. Esempi: df1: Date Fruit Num Color 2013-11-24 Banana 22.1 Yellow 2013-11-24 Orange 8.6 Orange 2013-11-24 Apple 7.6 Green 2013-11-24 Celery 10.2 Green df2: Date Fruit Num Color 2013-11-24 Banana 22.1 Yellow 2013-11-24 Orange 8.6 Orange 2013-11-24 Apple 7.6 Green 2013-11-24 Celery 10.2 Green 2013-11-25 Apple …

89 python pandas dataframe

6

Come aggiungere un suffisso (o prefisso) a ogni nome di colonna?

Voglio aggiungere il _xsuffisso a ogni nome di colonna in questo modo: featuresA = myPandasDataFrame.columns.values + '_x' Come faccio a fare questo? Inoltre, se volessi aggiungere x_come suffisso, come cambierebbe la soluzione?

89 python pandas dataframe

17

Aggiungi (inserisci) una colonna tra due colonne in un data.frame

Ho un data frame che ha le colonne a, be c. Vorrei aggiungere una nuova colonna d tra be c. So che potrei semplicemente aggiungere d alla fine usando cbind ma come posso inserirlo tra due colonne?

89 r dataframe insert

Domande taggate «dataframe»