开发者社区 问答 正文

Worker和Excutor的异同有哪些?

Worker和Excutor的异同有哪些?

展开
收起
游客ahv54x37wvm7u 2021-12-13 19:53:16 640 分享 版权
1 条回答
写回答
取消 提交回答
  • Worker 是指每个及节点上启动的一个进程,负责管理本节点,jps 可以看到 Worker 进程在运行。Excutor 每个Spark 程序在每个节点上启动的一个进程,专属于一个 Spark 程序,与 Spark 程序有相同的生命周期,负责 Spark 在节点上启动的 Task,管理内存和磁盘。如果一个节点上有多个 Spark 程序,那么相应就会启动多个执行器。

    2021-12-13 20:00:45
    赞同 展开评论
问答地址: