у нас есть следующие версии кластера hadoop (машина DATA-NODE находится на версии ОС Linux - 7.2) ambari - 2.6.1 HDP - 2.6.4 мы видели несколько сценариев, когда диски на компьютере с датанодом были заполнены на 100% и это потому, что...

у нас есть кластер Hadoop только с двумя узлами данных в конфигурации HDFS мы определили от Block replication до 3 so Block replication=3 Это нормально? к определенному Block replication=3 , когда у нас есть только два узла данных...

Я новичок в hadoop. Я установил hadoop - псевдораспределенный режим на одной машине. Моя конфигурация hdfs-site.xml по умолчанию: <configuration> <property> <name>dfs.replication</name>...

у нас есть кластер Hadoop ( HDP 2.6.5 кластер с амбари, с 25 машинами узлов данных) мы используем приложение потоковой передачи искр ( spark 2.1 запускаем Hortonworks 2.6.x ) текущая ситуация такова, что приложения потоковой передачи искры...

Я настроил кластер Dataproc в Google Cloud. Он работает и работает, и я могу получить доступ к HDFS и копировать файлы из SSH в консоли браузера. Так что проблема не на стороне Dataproc. Сейчас я использую Pentaho (программное обеспечение ELT) для...

Я работаю с hadoop 2.7, используя java , и у меня есть эта ошибка. Я могу создать файл, но я не могу написать в файле: Ошибки: ОШИБКА Файл /test/1.txt может быть реплицирован только на 0 узлов вместо minReplication (=1). Работает 1 узел...

У меня есть кластер под управлением Hadoop 1.2.1 с Giraph поверх. Сервер работает нормально, но когда я его останавливаю, я не могу запустить его снова. В журнале datanode появляется следующая ошибка: ERROR...

У меня кластер из 5 машин: 1 большой NameNode 4 стандартных узла данных Я хочу изменить свой текущий NameNode на DataNode без потери данных, хранящихся в HDFS, чтобы мой кластер мог стать: 1 стандартный NameNode 3 стандартных узла...