Java大数据开发(三)Hadoop(1)-什么是大数据

什么是大数据

指没法在必定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是须要新处理模式才能具备更强的决策力、洞察发现力，和流程优化能力的海量、高增加率和多样化的信息资产。主要解决海量数据的存储和海量数据的分析计算问题。

大数据的特色

大数据有4个特色，分别为：Volume（大量）、Variety（多样）、Velocity（高速）、Value（价值），通常咱们称之为4V。

大量。大数据的特征首先就体现为“大”，随着信息技术的高速发展，数据开始爆发性增加。存储单位从过去的GB到TB，乃至如今的PB、EB级别，迫切须要智能的算法、强大的数据处理平台和新的数据处理技术，来统计、分析、预测和实时处理如此大规模的数据。

多样。普遍的数据来源，不少平台都会经过对用户的日志数据进行分析，从而进一步推荐用户喜欢的东西。日志数据是结构化明显的数据，还有一些数据结构化不明显，例如图片、音频、视频等，这些数据因果关系弱，就须要人工对其进行标注。应用最普遍的就是推荐系统

高速。大数据的产生很是迅速，主要经过互联网传输。生活中每一个人都离不开互联网，也就是说天天我的天天都在向大数据提供大量的资料。服务器中大量的资源都用于处理和计算数据，不少平台都须要作到实时分析。数据无时无刻不在产生，谁的速度更快，谁就有优点。

价值。这也是大数据的核心特征。大数据最大的价值在于经过从大量不相关的各类类型的数据中，挖掘出对将来趋势与模式预测分析有价值的数据，并经过机器学习方法、人工智能方法或数据挖掘方法深度分析，发现新规律和新知识，并运用于农业、金融、医疗等各个领域，从而最终达到改善社会治理、提升生产效率、推动科学研究的效果。

大数据应用场景

一、物流仓储：大数据分析系统助力商家精细化运营，提高销量，节约成本。

二、零售：分析用户消费习惯，为用户购买商品提供方便，从而提高商品销量，好比沃尔玛超市啤酒和尿布一块儿摆放同一货架的案例。

三、旅游：深度结合大数据能力与旅游行业需求，共建旅游产业智慧管理，智慧服务和智慧营销的将来。

四、商品广告推荐：给用户推荐可能喜欢的商品，提高购买力，促进消费。

五、保险：海量数据挖掘及风险预测，助力保险行业精准营销，提供精细化订价能力。

六、金融：多维度体现用户特征，帮助金融机构推荐优质客户，防范欺诈风险。

七、房产：大数据全面助力房地产行业，打造精准投策与营销，选出更合适的地，建造更合适的楼，卖给更合适的人。

八、人工智能：大数据是基础，不信你品，你细品。

大数据发展前景

一、党的十九大提出“推进互联网、大数据、人工智能和实体经济深度融合”

二、猎聘2019年大数据人才就业趋势报告显示：中国大数据人才缺口高达150万

三、如下是北京大数据开发的薪资截图（薪资就已经说明一切）：

有人说北京毕竟是一线城市，那咱们来看个二线城市：

大数据部门业务流程

大数据部门组织结构（大中型企业）

以上就是大数据的一些知识和大数据的前景，快来作第一个吃肉的人吧

 喜欢的话，点个关注，分享一下吧！

本文分享自微信公众号 - 跟我一块儿学大数据（java_big_data）。
若有侵权，请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”，欢迎正在阅读的你也加入，一块儿分享。