我收到以下消息:

16/05/22 13:33:53 ERROR YarnScheduler: Lost executor 61 on <host>: Executor heartbeat timed out after 134828 ms
16/05/22 13:33:53 WARN TaskSetManager: Lost task 25.0 in stage 12.0 (TID 2214, <host>): ExecutorLostFailure (executor 61 lost)

是否会产生替代执行人?

最佳答案


是的,它会的。触发DAGScheduler及其较低级别的集群管理器实现(独立,YARN或Mesos)将注意到任务失败,并将在整个执行阶段将所述任务重新计划。
apache-spark - 当遗嘱执行人遗失了怎么办?-LMLPHP

有关更多信息,您可以在Advanced Spark TutorialMastering Apache Spark中找到。

关于apache-spark - 当遗嘱执行人遗失了怎么办?,我们在Stack Overflow上找到一个类似的问题:https://stackoverflow.com/questions/37377512/

10-11 06:54