性能问答>【赏金15元】spark中有这么一个配置要怎么平衡?>
7回复
2年前

【赏金15元】spark中有这么一个配置要怎么平衡?



spark中有这么一个配置,spark.locality.wait用来配置task数据本地化级别等待时常,默认是3s,但是发现有时候cpu利用率就很低,如果配成0发现task的数据本地化级别很多是node甚至rack级别的,请问这个该怎么平衡呢?或者有什么好的办法解决呢?

1205 阅读
请先登录,查看7条精彩评论吧
快去登录吧,你将获得
  • 浏览更多精彩评论
  • 和开发者讨论交流,共同进步