spark on Alluxio 的使用

http://www.alluxio.org/docs/1.8/en/Running-Spark-on-Alluxio.html Alluxio 解决的问题: 现有的streaming architecture 的bottleneck是: 1.hdfs 存储系统位于远端的服务器:文件的输入输出会引起大量的网络延迟,数据的更改变成流处理的一个bottleneck 。 2.HDFS使用普通的磁盘,因
相关文章
相关标签/搜索