这篇文章主要讲解了“Mac怎么部署spark2.4.4”，文中的讲解内容简单清晰，易于学习与理解，下面请大家跟着小编的思路慢慢深入，一起来研究和学习“Mac怎么部署spark2.4.4”吧！
操作系统：macOS Mojave 10.14.6
JDK：1.8.0_211 (安装位置：/Library/Java/JavaVirtualMachines/jdk1.8.0_211.jdk/Contents/Home)
请参考《Mac部署hadoop3(伪分布式)》一文，在Mac上事先部署好hadoop3
安装scala：
brew install scala
配置scala的环境变量，打开文件<font color="blue">~/.bash_profile</font>，增加以下配置内容：
计算
安全
数据库
网络和加速
企业服务
export SCALA_HOME=/usr/local/Cellar/scala/2.13.0
export PATH=$PATH:$SCALA_HOME/bin执行命令<font color="blue">source ~/.bash_profile</font>，再验证scala：
base) zhaoqindeMBP:~ zhaoqin$ scala -version
Scala code runner version 2.13.0 -- Copyright 2002-2019, LAMP/EPFL and Lightbend, Inc.下载spark，地址是：http://spark.apache.org/downloads.html ，如下图红框： 
将下载的文件在<font color="blue">/usr/local/</font>目录下解压，并将文件夹名字从<font color="blue">spark-2.4.4-bin-hadoop2.7</font>改为<font color="blue">spark</font>
配置spark的环境变量，打开文件<font color="blue">~/.bash_profile</font>，增加以下配置内容：
export SPARK_HOME=/usr/local/spark
export PATH=$PATH:$SPARK_HOME/bin执行命令<font color="blue">source ~/.bash_profile</font>使配置生效；
打开文件<font color="blue">spark/conf/spark-env.sh</font>，在尾部增加以下三行：
export SCALA_HOME=/usr/local/Cellar/scala/2.13.0
export SPARK_MASTER_IP=localhost
export SPARK_WORKER_MEMORY=2G确保hdfs和yarn已经启动，然后执行命令<font color="blue">spark-shell</font>，即可启动spark服务：
To update your account to use zsh, please run `chsh -s /bin/zsh`.
For more details, please visit https://support.apple.com/kb/HT208050.
(base) zhaoqindeMBP:~ zhaoqin$ spark-shell
19/10/27 13:33:51 WARN NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties
Setting default log level to "WARN".
To adjust logging level use sc.setLogLevel(newLevel). For SparkR, use setLogLevel(newLevel).
Spark context Web UI available at http://zhaoqindembp:4040
Spark context available as 'sc' (master = local[*], app id = local-1572154437623).
Spark session available as 'spark'.
Welcome to
____ __
/ __/__ ___ _____/ /__
_\ \/ _ \/ _ `/ __/ '_/
/___/ .__/\_,_/_/ /_/\_\ version 2.4.4
/_/
Using Scala version 2.11.12 (Java HotSpot(TM) 64-Bit Server VM, Java 1.8.0_211)
Type in expressions to have them evaluated.
Type :help for more information.
scala>感谢各位的阅读，以上就是“Mac怎么部署spark2.4.4”的内容了，经过本文的学习后，相信大家对Mac怎么部署spark2.4.4这一问题有了更深刻的体会，具体使用情况还需要大家实践验证。这里是亿速云，小编将为大家推送更多相关知识点的文章，欢迎关注！
亿速云「云服务器」，即开即用、新一代英特尔至强铂金CPU、三副本存储NVMe SSD云盘，价格低至29元/月。点击查看>>
免责声明：本站发布的内容（图片、视频和文字）以原创、转载和分享为主，文章观点不代表本网站立场，如果涉及侵权请联系站长邮箱：is@yisu.com进行举报，并提供相关证据，一经查实，将立刻删除涉嫌侵权内容。
原文链接：https://my.oschina.net/zq2599/blog/4616492
