Il nodo del nome è in modalità provvisoria. Non posso andarmene

root# bin/hadoop fs -mkdir t
mkdir: org.apache.hadoop.hdfs.server.namenode.SafeModeException: Cannot create directory /user/root/t. Name node is in safe mode.

non in grado di creare nulla in hdfs

L'ho fatto

root# bin/hadoop fs -safemode leave

Ma mostrando

safemode: Unknown command

qual è il problema?

Soluzione

Per consentire forzatamente al namenode di lasciare la modalità di sicurezza, è necessario eseguire il seguente comando:

 bin/hadoop dfsadmin -safemode leave

Stai ricevendo un Unknown commanderrore per il tuo comando perché -safemodenon è un sottocomando per hadoop fs, ma è di hadoop dfsadmin.

Anche dopo il comando sopra, ti suggerirei di eseguire una volta in hadoop fsckmodo che eventuali incongruenze insinuate negli hdfs possano essere risolte.

Aggiornare:

Usa il hdfscomando invece del hadoopcomando per le distribuzioni più recenti. Il hadoopcomando è stato deprecato:

hdfs dfsadmin -safemode leave

hadoop dfsadminè stato deprecato, così come il hadoop fscomando, tutte le attività relative a hdf vengono spostate in un comando separato hdfs.

prova questo, funzionerà

sudo -u hdfs hdfs dfsadmin -safemode leave

Il comando non ha funzionato per me, ma quanto segue ha funzionato

hdfs dfsadmin -safemode leave

Ho usato il hdfscomando invece del hadoopcomando.

Dai un'occhiata a http://ask.gopivotal.com/hc/en-us/articles/200933026-HDFS-goes-into-readonly-mode-and-errors-out-with-Name-node-is-in-safe- mode- link anche

Se usi Hadoop versione 2.6.1 sopra, mentre il comando funziona, si lamenta che è deprezzato. In realtà non potevo usare il hadoop dfsadmin -safemode leaveperché stavo eseguendo Hadoop in un container Docker e quel comando fallisce magicamente quando viene eseguito nel container, quindi quello che ho fatto è stato questo. Ho controllato il documento e ho trovato dfs.safemode.threshold.pctnella documentazione che dice

Specifica la percentuale di blocchi che devono soddisfare il requisito di replica minimo definito da dfs.replication.min. Valori minori o uguali a 0 significano non attendere una particolare percentuale di blocchi prima di uscire dalla modalità sicura. Valori maggiori di 1 renderanno permanente la modalità provvisoria.

quindi ho cambiato il hdfs-site.xmlseguente (nelle versioni precedenti di Hadoop, a quanto pare è necessario farlo in hdfs-default.xml:

<configuration>
    <property>
        <name>dfs.safemode.threshold.pct</name>
        <value>0</value>
    </property>
</configuration>

Namenode entra in modalità sicura quando c'è carenza di memoria. Di conseguenza, l'HDFS diventa solo leggibile. Ciò significa che non è possibile creare alcuna directory o file aggiuntivo nell'HDFS. Per uscire dalla modalità di sicurezza, viene utilizzato il seguente comando:

hadoop dfsadmin -safemode leave

Se stai usando cloudera manager:

go to >>Actions>>Leave Safemode

Ma non sempre risolve il problema. La soluzione completa sta nel creare un po 'di spazio nella memoria. Usa il seguente comando per controllare l'utilizzo della memoria.

free -m

Se stai usando cloudera, puoi anche controllare se l'HDFS mostra alcuni segni di cattiva salute. Probabilmente deve mostrare qualche problema di memoria relativo al namenode. Assegna più memoria seguendo le opzioni disponibili. Non sono sicuro di quali comandi usare per lo stesso se non stai usando cloudera manager, ma ci deve essere un modo. Spero che sia d'aiuto! :)

Prova questo

sudo -u hdfs hdfs dfsadmin -safemode leave

controllare lo stato della modalità di sicurezza

sudo -u hdfs hdfs dfsadmin -safemode get

Se è ancora in modalità di sicurezza, uno dei motivi sarebbe la mancanza di spazio sufficiente nel tuo nodo, puoi controllare l'utilizzo del disco del nodo usando:

df -h

se la partizione root è piena, elimina i file o aggiungi spazio nella partizione root e riprova il primo passaggio.

modalità provvisoria attiva (HDFS è in modalità di sola lettura)
modalità sicura significa disattivata (HDFS è in modalità scrivibile e leggibile)

In Hadoop 2.6.0, possiamo controllare lo stato del nodo del nome con l'aiuto dei seguenti comandi:

PER CONTROLLARE lo stato del nodo del nome

$ hdfs dfsadmin -safemode get

PER ENTRARE IN MODALITÀ SICURA:

$ hdfs dfsadmin -safemode enter

PER LASCIARE la modalità SICURA

~$ hdfs dfsadmin -safemode leave

Eseguire il comando seguente utilizzando l'utente del sistema operativo HDFS per disabilitare la modalità provvisoria:

sudo -u hdfs hadoop dfsadmin -safemode leave

utilizzare il comando seguente per disattivare la modalità provvisoria

$> hdfs dfsadmin -safemode leave