1）累加器在全局唯一的，只增不减，记录全局集群的唯一状态；
2）在exe中修改它，在driver读取；
3）executor级别共享的，广播变量是task级别的共享两个application不可以共享累加器，但是同一个app不同的job可以共享。
发布者：admin，如若转载，请注明出处：https://ai1024.vip/36840.html
赞 (0)
admin
导致Executor产生FULL gc 的原因，可能导致什么问题？
« 上一篇
2023年11月30日 am3:26
spark hashParitioner的弊端是什么？
下一篇 »
2023年11月30日 am3:26
