大数据时代就是有数据才能有将来

问:马云曾经在一次演讲中说道：“人类正从IT时代走向DT时代”。做为资深的数据工程师，你是怎么看待这句话的？（建议从数据量角度解读）

答:从IT到DT实际上是个很天然的延续，新一代的信息技术与咱们经济社会各领域的深度融合，引起了数据量的爆发式增加。据统计，全球所掌握的数据，每18个月就会翻倍，不少人也把这称为新的摩尔定律。到2020年，全球的数据量将会达到40ZB。40ZB至关于40万亿GB，估计是地球上全部海滩上的沙粒数量的57倍，平均每人拥有的数据将会是5247GB。

信息化已经从过去提高效率的工具转变成为社会发展的基础和支撑。开放的互联网精神打破了原有的技术壁垒，造成了新型的产业和商业创新模式，有效下降了创新门槛，带来更为公平、开放、透明的市场环境，同时也推进数据成为重要的生产资料。若是说之前是“得技术者得天下”，那么如今则是“有数据者有将来”。

问:在这样的大数据时代，或者DT时代，大数据究竟是怎么样造福社会的呢？

答:当各行各业的数据累积到必定规模，基于数据存储、管理、挖掘、应用等新技术，就能帮助咱们“把握如今，预知将来”，这样就能够早作预防。不少之前靠直觉或经验作事情，如今均可以用数据来作支撑。好比说在加拿大多伦多的一家医院，针对早产婴儿，每秒钟有超过3000次的数据读取。经过这些数据分析，医院可以提早知道哪些早产儿出现问题而且有针对性地采起措施，避免早产婴儿夭折。

问:随着大数据时代的来临，我的隐私信息时刻面临着被泄露的风险。好比以前网易邮箱数据遭泄露，大量用户的隐私遭曝光。你如何看待这个问题呢？或者说，咱们普通人怎么样保护本身隐私？

答:大数据安全体系的创建我我的认为应该是一个系统性的工程，须要从法律法规、行业规范以及技术手段等多方面对我的隐私数据进行监管和保护。首先对于有数据的企业和组织，应努力增强技术攻关，造成信息安全技术体系，设置更为完善数据安全级别和粒度；其次应该设置中立的数据监督机构，经过制定严格行业规范，提升应用中的我的隐私保护，从而平衡公共利益与我的隐私之间的矛盾；最后就是从国家法律层面，应该积极推进我的信息保护相关标准出台和认证体系创建。

问:对企业来讲，大数据对现代企业有哪些影响，或者说给企业带来哪些便利，以及对企业生存而言，存在哪些威胁？

答:最大的影响应该是决策模式的改变，之前的决策都是基于决策者主观经验的，不够客观。有了大数据，企业能够对大数据分析，从中总结经验、发现规律、预测趋势、辅助决策，充分释放和利用海量数据资源中蕴含的巨大价值。

谈到威胁，最大的可能就是以前所提到的用户隐私问题。有了数据是好事，能够帮助企业更准确地了解用户，但若是不能保证数据的安全，就会存在很是大的安全隐患，有的企业会以为用户享受咱们的服务，理所固然的认为能够收集用户的信息，想拿着用户的数据变现，这就更是玩火自焚了。

问:做为财经头条APP的数据工程师，你是如何对数据进行处理来优化这个产品的？

答:财经头条如今设置了数据采集，数据处理和数据分析与挖掘三个研发小组。咱们会按期对新技术进行调研和试用，结合现有业务须要，来优化咱们现有的数据技术体系。大数据是个概念，但大数据技术是要靠实打实的研发，当前大数据技术更迭都很快，须要咱们整个数据团队保持很是高的学习效率。