Dev Faq

Questions et réponses pour le hadoop :

Hadoop is an Apache open-source project that provides software for reliable and scalable distributed computing. The core consists of a distributed file system (HDFS) and a resource manager (YARN). Various other open-source projects, such as Apache Hive use Apache Hadoop as persistence layer.

0
votes

Les nœuds de données sont-ils dans un HDFS identique à celui des nœuds exécutants dans une grappe d'étincelle?

J'apprends à propos de Apache Spark and HDFS. Je comprends les deux pour la plupart bien que je sois confus à propos d'une chose. Ma question est la suivante: Les nœuds de donn ...
0 commentaire(s)
12
votes

Quelle est la complexité de calcul de la fraise MapReduce

étant donné que la complexité de la carte et réduire les tâches sont O (carte) = f (n) et o (réduisez) = g (n) a-t-il &eacu ...
2 commentaire(s)
12
votes

HDFS - LS: Échec de l'exception locale: com.google.protobuf.invalidprotocolbufferException:

J'essaie d'utiliser le ci-dessous pour répertorier mes DIRS dans HDFS: 127.0.0.1 ubuntu localhost #127.0.1.1 ubuntu # The following lines are desirable for IPv6 capable hos ...
0 commentaire(s)
12
votes

hadoop java.io.ioException: en exécutant namenode -format

j'ai ran namenode -format.C'est ma sortie. J'ai essayé de changer les autorisations de fichier chmod 777 hadoop. Je crois que cette ligne est l'erreur Erreur namenode.namenode: java.io ...
2 commentaire(s)