Я развернул кластер Alluxio
на основе кластера HDFS
. Когда я использую Alluxio Native Java Api для записи некоторых файлов в Alluxio с установкой типа записи ASYNC_THROUGH, кажется, что файлы (даже просто имеющие 1G) не записываются в HDFS, сохраняя состояние TO_BE_PERSISTED все время через несколько дней.
почему файлы alluxio все время сохраняют состояние TO_BE_PERSISTED
Ответы (1)
Я нахожу ответ. Я нахожу журнал «ОШИБКА DefaultAsyncPersistHandler — не все блоки файла /test/sample_data/order_detail_titile_2.0.txt хранятся в одном и том же воркере». При использовании ASYNC_THROUGH Alluxio запрашивает все блокировщики файлов в одном воркере. Нет проблем, когда я использую CACHE_THROUGH
person
Long.zhao
schedule
01.12.2017