首页 > 试题广场 >

Spark中Task的数量是由什么决定的?

[单选题]
Spark中Task的数量是由什么决定的?
  • Stage
  • Job
  • Partition
  • TaskScheduler
spark阶段划分:
job:以行动算子划分,一个行动算子触发一个job
stage:是job的子集,以RDD宽依赖划分,遇到shuffle做一次划分
task:是stage的子集,以并行度(分区数)划分
发表于 2021-08-18 15:27:44 回复(0)