大数据工程师需要学习哪些技术?

"大数据"是一个体量特别大,数据类别特别大的数据集,并且这样的数据集无法用传统数据库工具对其内容进行抓取、管理和处理。     1、 数据体量巨大。从TB级别,跃升到PB级别。 2、 数据类型繁多,涉及网络日志、视频、图片、地理位置等信息。 3、 价值密度低。以视频为例,连续不间断监控过程中,可能有用的数据仅仅有一两秒。 4、 处理速度快。1秒定律。最后这一点也是和传统的数据挖掘技术有着本质的不同
相关文章
相关标签/搜索