美文网首页
EditLogTailer源码分析

EditLogTailer源码分析

作者: 大数据Zone | 来源:发表于2020-08-14 21:17 被阅读0次

今天来填在Hadoop HA 状态转换源码分析中留下的坑。

editLogTailer是一个编辑日志edit log的追踪器,它的主要作用就是当NameNode处于standby状态时用于从共享存储(NFS、QJM等)中的edit log拉取editlog数据。它的构造是在FSNamesystem的startStandbyServices()方法中,代码如下:

调用了start方法,追到start方法:

启动了EditLogTailer类里面的tailerThread这个线程。

所以我们就去看tailerThread的run方法,run方法,最终调用了doWork方法。

追到doWork方法:

shouldRun为true时一直循环,这个shouldRun是个volatile的boolean值,初始为true,只有调用EditLogTailer#stop方法的时候才会设为false。

接下来看while循环里:

自从上次日志滚动触发以来,如果StandBy NameNode没有读到任何事务的话,就没有必要触发一次日志滚动,如果是自从上次加载后过了太长时间,并且上次编辑日志滚动开始时的最新事务ID小于StandBy NameNode加载的最大事务ID,那么就去触发一次Active NN的log roll。

然后去调用了doTailEdits()方法去追踪editlog。

最后休眠sleepTimeMs毫秒,这个sleepTimeMs == "dfs.ha.tail-edits.period" * 1000

相关文章

网友评论

      本文标题:EditLogTailer源码分析

      本文链接:https://www.haomeiwen.com/subject/tqswdktx.html