作者:wepiehr | 来源:互联网 | 2023-01-06 19:46
本节书摘来自华章社区《Spark核心技术与高级应用》一书中的第2章,第2.3节运行Spark应用程序,作者于俊 向海 代其锋 马海平,更多章节内容可以访问云栖社区“华章社区”公众号查看
2.3 运行Spark应用程序
运行Spark应用程序主要包括Local模式运行、Standalone模式运行、YARN模式运行、Mesos模式运行(参考官方文档)。
2.3.1 Local模式运行Spark应用程序
Local模式运行Spark应用程序是最简单的方式,以计算圆周率的程序为例,进入安装主目录,如spark-1.5.0,执行命令:
# 提交Spark任务的入口 ./bin/spark-submit \ #主程序设置本地,local[*],其中*是指设置线程数 --master local[10] \ #选择主类名称 --class org.a