Spark shell交互

Spark带有交互式的Shell 可以作为即时数据分析接口,相对于Python Bash Windows Shell等,Spark Shell最大的特点是可以用来与分布式存储在许多机器的内存或磁盘上数据进行交互,并且处理过程的分发由Spark自动完成 Spark能够在工作节点上把数据读取到内存,所以分布式计算都可以在几秒内完成,即使探索性分析变得很适合Spark,Spark提供Python以及Sc
相关文章
相关标签/搜索