为什么 hadoop mapper 任务的持续时间总是 3 秒的倍数?
Why are the durations of hadoop mapper tasks always a multiple of 3 seconds?
查看我的任务日志,我注意到所有映射器任务都在 3 秒的倍数后完成:
当我长时间查看日志时 运行 作业看到了同样的事情:
这背后的原因是什么?
因为在旧版本的 Hadoop 中 Task.PROGRESS_INTERVAL
被硬编码为 3000 毫秒
查看我的任务日志,我注意到所有映射器任务都在 3 秒的倍数后完成:
当我长时间查看日志时 运行 作业看到了同样的事情:
这背后的原因是什么?
因为在旧版本的 Hadoop 中 Task.PROGRESS_INTERVAL
被硬编码为 3000 毫秒