牛客图书馆 > 读书笔记
  • 集群管理器

    集群管理器 Spark可以运行在各种集群管理器上,并通过集群管理器访问集群中的机器。如果只想在一堆机器上运行Spark,那么自带的独立模式是部署该集群最简单的方法。然而,如果你有一个需要与别的分布式应用共享的集群(比如既可以运行Spark作业又可以运行H...
    君一时一迈 编辑于 2019-07-19 19:03:08
  • 在集群上运行Spark

    Spark的一大好处就是可以通过增加机器数量并使用集群模式运行,来扩展程序的计算能力。 Spark可以在各种各样的集群管理器(Hadoop YARN、Apache Mesos,还有Spark自带的独立集群管理器)上运行,所以Spark应用既能适应专用集群...
    君一时一迈 编辑于 2019-07-13 01:31:50