spark中submit的作用是什么

lewis 3年前 (2022-12-24) 阅读数 4 #技术

在Spark中，submit方法用于提交一个Spark应用程序，启动Spark应用程序的执行。通过submit方法，可以指定要运行的应用程序的主类、依赖的jar包、运行模式（本地模式或集群模式）、以及其他一些配置参数。一旦应用程序被提交，Spark会根据指定的配置和参数来启动应用程序的执行，并将任务分发到集群中的不同节点上进行计算。