Domande taggate «hadoop»

Hadoop è un progetto open source Apache che fornisce software per l'elaborazione distribuita affidabile e scalabile. Il nucleo è costituito da un file system distribuito (HDFS) e da un gestore di risorse (YARN). Vari altri progetti open source, come Apache Hive, utilizzano Apache Hadoop come livello di persistenza.

21
Hadoop Avviso "Impossibile caricare la libreria native-hadoop per la tua piattaforma"
Attualmente sto configurando hadoop su un server che esegue CentOs . Quando eseguo start-dfs.sho stop-dfs.sh, visualizzo il seguente errore: WARN util.NativeCodeLoader: impossibile caricare la libreria native-hadoop per la tua piattaforma ... usando le classi builtin-java dove applicabile Sto eseguendo Hadoop 2.2.0. Effettuando una ricerca online viene visualizzato questo link: http://balanceandbreath.blogspot.ca/2013/01/utilnativecodeloader-unable-to-load.html …
19
Differenza tra maiale e alveare? Perché entrambi? [chiuso]
Chiuso . Questa domanda è basata sull'opinione . Al momento non accetta risposte. Vuoi migliorare questa domanda? Aggiorna la domanda in modo che possa essere risolta con fatti e citazioni modificando questo post . Chiuso 4 anni fa . Migliora questa domanda Il mio background: 4 settimane nel mondo di …
256 hadoop  hive  apache-pig 
16
Quando usare Hadoop, HBase, Hive e Pig?
Quali sono i vantaggi dell'utilizzo di Hadoop o HBase o Hive ? Da quanto ho capito, HBase evita di usare map-reduce e ha una memoria orientata alla colonna in cima a HDFS. Hive è un'interfaccia di tipo sql per Hadoop e HBase . Vorrei anche sapere come Hive si confronta …
185 hadoop  hbase  hive  apache-pig 
14
Spark: carica il file CSV come DataFrame?
Vorrei leggere un CSV in Spark e convertirlo come DataFrame e memorizzarlo in HDFS con df.registerTempTable("table_name") Ho provato: scala> val df = sqlContext.load("hdfs:///csv/file/dir/file.csv") Errore che ho ricevuto: java.lang.RuntimeException: hdfs:///csv/file/dir/file.csv is not a Parquet file. expected magic number at tail [80, 65, 82, 49] but found [49, 59, 54, 10] at …
6
Differenza tra HBase e Hadoop / HDFS
Questa è una specie di domanda ingenua, ma sono nuovo nel paradigma NoSQL e non ne so molto. Quindi, se qualcuno può aiutarmi a capire chiaramente la differenza tra HBase e Hadoop o se dare alcuni suggerimenti che potrebbero aiutarmi a capire la differenza. Fino ad ora, ho fatto qualche …
130 hadoop  nosql  hbase  hdfs  difference 
13
Concatenamento di più lavori MapReduce in Hadoop
In molte situazioni di vita reale in cui si applica MapReduce, gli algoritmi finali finiscono per essere diversi passaggi di MapReduce. cioè Map1, Reduce1, Map2, Reduce2 e così via. Quindi hai l'output dell'ultima riduzione necessaria come input per la mappa successiva. I dati intermedi sono qualcosa che (in generale) non …
124 hadoop  mapreduce 
9
Il nodo del nome è in modalità provvisoria. Non posso andarmene
root# bin/hadoop fs -mkdir t mkdir: org.apache.hadoop.hdfs.server.namenode.SafeModeException: Cannot create directory /user/root/t. Name node is in safe mode. non in grado di creare nulla in hdfs L'ho fatto root# bin/hadoop fs -safemode leave Ma mostrando safemode: Unknown command qual è il problema? Soluzione
122 hadoop  hdfs 
18
Differenza tra tabelle interne Hive e tabelle esterne?
Qualcuno può dirmi la differenza tra la tabella esterna di Hive e le tabelle interne. So che la differenza arriva quando si lascia cadere il tavolo. Non capisco cosa intendi per dati e metadati vengono eliminati nelle tabelle interne e solo i metadati vengono eliminati nelle tabelle esterne. Qualcuno può …
110 hadoop  hive  hiveql 
Utilizzando il nostro sito, riconosci di aver letto e compreso le nostre Informativa sui cookie e Informativa sulla privacy.
Licensed under cc by-sa 3.0 with attribution required.