主要功能：管理当前节点内存，CPU的使用状况，接收master分配过来的资源指令，通过ExecutorRunner启动程序分配任务，worker就类似于包工头，管理分配新进程，做计算的服务，相当于process服务。
需要注意的是：
1）worker会不会汇报当前信息给master，worker心跳给master主要只有workid，它不会发送资源信息以心跳的方式给mater，master分配的时候就知道work，只有出现故障的时候才会发送资源。
2）worker不会运行代码，具体运行的是Executor是可以运行具体appliaction写的业务逻辑代码，操作代码的节点，它不会运行程序的代码的。
发布者：admin，如若转载，请注明出处：https://ai1024.vip/36798.html
赞 (0)
admin
Spark技术栈有哪些组件，每个组件都有什么功能，适合什么应用场景？
« 上一篇
2023年11月30日 am3:25
Mapreduce和Spark的都是并行计算，那么他们有什么相同和区别？
下一篇 »
2023年11月30日 am3:26
