spark学习之路(起始篇)

对于spark,我基本上算是个小白,若是说的不对,或者各位大佬有不一样的意见,欢迎提出来一块儿分享 。今天主要是梳理一下需求,肯定一下学习方向web 项目中由于原始框架没法达到大量数据计算的要求,初步选择用spark来达到快速计算的需求,下面介绍大体状况:数据库 场景为项目中的某一个设计到大量复杂计算的模块 设计数据量百万级数据,并会涉及到多层循环计算 数据来源为MySQL数据库 初始想法为将数据
相关文章
相关标签/搜索