Find centralized, trusted content and collaborate around the technologies you use most.
Teams
Q&A for work
Connect and share knowledge within a single location that is structured and easy to search.
我已经部署了一个Alluxio基于集群的HDFS集群。当我使用Alluxio Native Java Api通过设置writetype ASYNC_THROUGH将一些文件写入Alluxio时,文件(即使只有1G)似乎没有写入HDFS,几天后一直保持TO_BE_PERSISTED状态。
Alluxio
HDFS
我找到了答案。我发现日志“错误 DefaultAsyncPersistHandler - 并非所有文件块 /test/sample_data/order_detail_titile_2.0.txt 都存储在同一个工作人员上”,当使用 ASYNC_THROUGH 时,Alluxio 请求一个工作人员中的所有文件阻止程序。我使用 CACHE_THROUGH 的地方没有问题