Spark中 sortByKey被划分到transformation中,却有action操作原因

今天跑一个任务, 在spark history Web UI中,sortByKey会触发一个job

Spark中 sortByKey被划分到transformation中,却有action操作原因

???sortByKey不是transform吗?

原因: Spark的sortBy,sortByKey会触发一个新的任务,这个Job是用于评估数据分布,评估结果用于后续的排序操作,并不是真正的排序操作。
Spark中 sortByKey被划分到transformation中,却有action操作原因