scheduler

小h漫谈(15):Spark运行基本流程

当一个 Spark 应用被提交时,首先需要为这个应用构建基本的运行环境,即由任务控制节点(Driver)创建一个 SparkContext 对象,由 SparkContext 负责与资源管理器(Cluster Manager)的通信以及进行资源的申请、任务的分

executor dag scheduler 2025-02-03 21:49  3