У меня проблемы с запуском конвейера в наборах потоков, я вижу следующую ошибку:
HADOOPFS_44 - Could not verify the base directory: 'java.net.ConnectException: Call From SDC/...... to ......failed on connection exception: java.net.ConnectException: Connection refused;
Подробнее см.: https://cwiki.apache.org/confluence/display/HADOOP2/ConnectionRefused