学堂 学堂 学堂公众号手机端

StandaloneMode

lewis 2年前 (2023-11-08) 阅读数 5 #技术

  1. StandaloneMode:独立模式,Spark自身启动一个资源管理器,并通过内置的资源调度器来管理资源。

  2. YARNMode:使用Hadoop的YARN资源管理器来管理Spark作业的资源。

  3. MesosMode:使用ApacheMesos资源管理器来管理Spark作业的资源。


  4. KubernetesMode:使用Kubernetes容器编排引擎来管理Spark作业的资源。

  5. LocalMode:本地模式,Spark作业在本地机器上运行,不涉及资源管理器。

  6. AmazonEMRMode:在AmazonEMR上运行Spark作业,由EMR集群托管资源管理。

  7. DatabricksMode:在Databricks平台上运行Spark作业,由Databricks提供资源管理服务。

版权声明

本文仅代表作者观点,不代表博信信息网立场。

热门