Spark原理框架说明

1)先启动master进程,然后在其他机器启动worker进程,然后worker和master会通过rpc进行通信 2)在window中会写一个程序,然后打包成jar包 3).然后在linux执行 spark-submit --master spark://linux01:7077 --class类名 jar包 这个命令,执行者个命令就找到了集群(standlone模式的spark集群),然后向m

>>阅读原文<<