J'essaie d'utiliser le ci-dessous pour répertorier mes DIRS dans HDFS:
127.0.0.1 ubuntu localhost #127.0.1.1 ubuntu # The following lines are desirable for IPv6 capable hosts ::1 ip6-localhost ip6-loopback fe00::0 ip6-localnet ff00::0 ip6-mcastprefix ff02::1 ip6-allnodes ff02::2 ip6-allrouters
7 Réponses :
est votre NN en cours d'exécution sur le port 50075 ? Vous n'avez réellement pas à le faire si vous voulez simplement énumérer tous les répertoires. Utilisez simplement hadoop fs -ls / . Cela listera tous vos répertoires dans votre répertoire racine.
Pouvez-vous vérifier votre nom d'hôte? Le même nom (Ubuntu) doit être disponible dans votre fichier / etc / hostname et / etc / hosts Fichier.
Assurez-vous que votre port TCP de NN est sur 50075, défini dans HDFS-SITE.XML
<property> <name>dfs.namenode.http-address.nn1</name> <value>r101072036.sqa.zmf:8000</value> </property>
Sur votre responsable de Cloudera, vérifiez sur le nœud Nom pour l'élément de configuration «Namenode Service RPC Port» ou «dfs.Namenode.ServicePC-Adresse». Ajoutez le même numéro de port de là sur l'URL. Et cela devrait fonctionner bien. 
in /usr/local/hadoop/etc/hadoop/core-site.xmlledececkesp >in place de localhost , utilisez 0.0.0.0 c'est-à-dire. modifier ceci a résolu le problème pour moi < / p>
HDFS ne fonctionne pas à 50075.
Pour vérifier votre port HDFS, utilisez la commande suivante sous Linux , vous obtiendrez la sortie quelque chose comme et corrigez votre URL en conséquence < / p>
Info Configuration.deprecation: fs.default.name est obsolète. Au lieu de cela, utilisez fs.defaultfs
Cette erreur se pose à cause de:
jps .)
- tuer ce qui est en cours d'exécution dans ce port particulier
Vérifiez ce qui est en cours d'exécution dans un port particulier par netstat -tulpn | Grep 8080
et tuer -9
- redémarrez le namenode