Spark 作业总正常运行时间小于作业开始时间与作业结束时间之间的差值

Spark job total uptime less than the difference between job start and job end time

提问人:Stefan Ss 提问时间:3/15/2023 更新时间:3/15/2023 访问量:50

问:

我有一个从上午 10 点开始的火花作业,并在 14 小时(凌晨 12 点)的阈值后被杀死。问题是,当我进入 WEB UI 时,总正常运行时间(在它被杀死之前,13 小时和 40 分钟后)是 9.5 小时。我不明白为什么会发生这种情况,以及这种行为的原因可能是什么。

apache-spark 正常运行时间

评论

1赞 Koedlt 3/16/2023
您能否分享一些您看到 14 小时和 9.5 小时时间的屏幕截图?

答: 暂无答案