почему файлы alluxio все время сохраняют состояние TO_BE_PERSISTED

Я развернул кластер Alluxio на основе кластера HDFS. Когда я использую Alluxio Native Java Api для записи некоторых файлов в Alluxio с установкой типа записи ASYNC_THROUGH, кажется, что файлы (даже просто имеющие 1G) не записываются в HDFS, сохраняя состояние TO_BE_PERSISTED все время через несколько дней.


person Long.zhao    schedule 28.11.2017    source источник


Ответы (1)


Я нахожу ответ. Я нахожу журнал «ОШИБКА DefaultAsyncPersistHandler — не все блоки файла /test/sample_data/order_detail_titile_2.0.txt хранятся в одном и том же воркере». При использовании ASYNC_THROUGH Alluxio запрашивает все блокировщики файлов в одном воркере. Нет проблем, когда я использую CACHE_THROUGH

person Long.zhao    schedule 01.12.2017