namenode - Hadoop 中的辅助名称节点

Question

假设检查点的默认时间是 1 小时。如果名称节点在距离上一个检查点 55 分钟后关闭。我们丢失了最后 55 分钟的数据（编辑日志文件数据未添加到 fsImage 中）？

Answer 1

取决于dfs.namenode.checkpoint.txns的 Checkpoint 节点配置参数

• dfs.namenode.checkpoint.period：两个定期检查点之间的秒数。
• dfs.namenode.checkpoint.txns：这将在每个“dfs.namenode.checkpoint.txns”事务中创建一个命名空间的检查点，无论“dfs.namenode.checkpoint.period”是否已过期。

假设你有你的dfs.namenode.checkpoint.period每 1h 和dfs.namenode.checkpoint.txns每 500 个交易，下一个检查点可以在一小时或每 500 个交易创建