Top100Summit全球案例研究峰会第一天总结——云计算和大数据

     很荣幸受邀参加Top100Summit全球软件案例研究峰会，此次的大会主题是《技术推进商业变革》，组委会从全国投稿的460多件案例中甄选出100件具备表明价值的案例，进行为期4天的分享，第一天是开幕式，有业界的诸多牛人进行演讲，演讲分享的内容以下：
-----------------------------------------------------------
1.被颠覆的决策模式——大数据大价值
   演讲者：张亚勤 微软全球资深副总裁、微软亚太研发集团主席
2.软件定义IT时代
   演讲者：宋家瑜 VMware大中华区总裁
3.电商创造价值 技术驱动将来
   演讲者：蓝烨 京东商城CMO
4.互联网的创新思惟
   演讲者：谭晓生 360公司副总裁
5.大数据技术中国的案例分析
   演讲者：苗凯翔 intel中国区CTO
6.对话阿里巴巴
   演讲者：王坚 阿里巴巴集团首席技术官
7.互联网生态与大数据
   演讲者：陈磊 腾讯云总经理
8.面向业务创新的新型团队管理模式
   演讲者：孙耀达 香港铁路公司信息科技主管
9.构建互联网模式的金融体系
   演讲者：王兵 广发银行首席信息官
10.智慧的1号店
   演讲者：韩军 1号店CTO
-----------------------------------------------------------
   尽管在听第8个的时候，因为听着孙总的港音不太习惯，不当心睡了半个小时，可是大部分仍是坚持着听进了脑子，毕竟机会可贵。上面每一个主题说的什么内容，我就不写了，毕竟我也记不住多少。这里把我听进去，并消化的内容总结一下，在这里作一个分享，至于对不对暂且不论，由于这是一个IT技术百家争鸣的时代嘛。

   首先是关于云计算，对于这个概念，我当年在学校的时候就已经听的不少了，记得那时它是与“物联网”并驾齐驱的两个概念，可是通过4年的发展看来，云的发展速度要远远快于物联网。但是云究竟是什么呢？我以为没有人可以给它一个明确的定义，谁均可以把本身的产品往云上靠，因此咱们没必要纠结这个概念的定义，咱们只须要看云为咱们作了什么就好了。如下是我对上面各个业界牛人们演讲观点的总结和理解。

1.云是IT界各个层次都能参与进来的技术集合
   从上面的演讲者的分布来看，有硬件表明intel，有操做系统表明微软，有虚拟化表明VMware，有电子商务表明阿里巴巴，有安全表明360。这些公司都是业界各个领域的顶尖技术公司，他们都能用既有的技术参与到云这个概念里，好比intel从硬件层面优化，用分布式的思想优化CPU，使之更贴合与Hadoop；微软构建了公有云和私有云的混合体Azure；VMware则从虚拟化角度赢得了400亿美圆的市值；阿里巴巴用去IOE，从应用角度构建了阿里云，为中小企业提供计算基础；360从安全的角度构建了云查毒。能够看到，这些红极一时的王者公司们，并无由于云的出现而衰弱。不过，除了nokia这个曾经市值1100亿欧元的波兰公司运气比较差。也有一些公司在云浪潮里破浪而出，好比Google，Amazon，JD等。咱们能够看出来，云浪潮里，不是后浪推前浪的关系，而是一块儿浪的状态^_^。

2.云是传统行业与IT行业整合的革命
   在余额宝出现以前，有谁会想到几乎随着市场出现以来就出生的古老金融行业，会与IT行业有如此密切的关系？天弘基金在余额宝出现以前是一个默默无闻的基金公司，排名倒数。可是借着阿里云，它一跃成为基金行业的前五名，余额宝在双11的交易所有是在阿里云上完成的。谁敢说再过几个月它不是基金行业里的第一呢？至少我如今很看好它，它下降了老百姓参与基金的门槛，充分利用了长尾效应，汇集了天文数字般的散户资金。
   我也没想过铁路会与云计算扯上关系，可是时尚的港铁就作到了，它利用天气、人流、传感器等为香港打造了一个时髦的地铁服务，为500万人次的流量提供服务。还有不少小公司的ERP、CRM等系统也都搬上公有云或私有云，由于云的弹性，它们不用再为了应对十几分钟的峰值而购买巨额的机器。
   我更没有想到，美国CIA构建本身的数据中心没有选择IBM，而是选择Amazon。其实这并非说IBM弱，IBM有强大而稳定的技术解决方案，若论小型机和大型机的技术谁能与之匹敌呢？它只是由于理念没有Amazon新颖而已。
   从上面咱们能够看到，云并不只仅服务于IT行业，而是服务于全部行业，传统也罢，新兴也罢，与云的整合大大节约了企业成本，这是一个共赢的局面，咱们应当喜于此并参与进去。

3.云是移动互联网的Server端
   移动互联网发展的如火如荼，短短两年时间，移动终端的数量就数倍于PC，如今你可能手头没有一台PC，可是你必然有一台智能手机装在口袋，移动终端的流量已经占据了互联网流量的15%。PC终端尚且须要云，那移动终端更依赖于云，咱们看移动互联网和云彷佛看到了client/server经典网络模型。这里说到移动终端，就不得不说社交，在移动终端以前的PC时代，网络的入口是搜索，因此咱们看到Google腾空出世，看到百度霸占中国。而移动互联网下，网络的入口是什么？答案是社交。你的手机里安装的软件少不了QQ、Facebook、人人、微信、米聊等等社交软件，你使用它们的时间也远远大于在移动终端上使用搜索的时间。能够看到，移动互联网时代，社交是主流，而对社交产生的人际关系、行为数据的分析少不了云。微信为何那么可怕，由于它忽然间就占据了移动互联网入口，就像微软占据操做系统、Google占据搜索。这是很是巨大的市场份额，至少前景是十分美好的。因此咱们看到马云着急的推广来往，他本身甚至亲自担当来往的业务。

4.云是晶体计算瓶颈出现的产物
   摩尔定律已经走到尽头，晶体计算没法知足磅礴发展的IT业，IBM的小型机销售增加率从2010年的19%到2013年的-30%，可见，小型机时代渐渐远去，虚拟化、去IOE，这些颠覆式的创新已经来临，这并非由于某些公司的决定而卷起的风浪，这是晶体计算的瓶颈致使的。云计算时代的来临，有些大公司走在前沿，构建起数量庞大的集群，若是一台机器可以搞定这些计算和存储，为何还要这些集群呢？往往看到Google的数据中心用卡车运坏硬盘，他们难道不心疼吗？
不过话说回来，云的基础是数以万计的机器集群，也是有巨大的风险的。若是出现了颠覆式的硬件创新，好比量子计算和神经存储一旦成熟，这些都将毁掉，只是那样的创新暂时尚未出现。不过我却是很期待在我有生之年能看到量子计算和神经存储等颠覆式创新的出现。

   其次是关于大数据，这个概念也是让人晕乎的，什么是大数据，大数据时代咱们要作什么？下面是我我的的一些理解。

1.什么是大数据

   咱们想象中的那些一天几十几百TB的数据量应该就是大数据了，也有人认为传统关系型数据不是大数据，半结构化、非结构化数据才是大数据。其实否则，大数据是一个宏观概念，好比一座城市，它自己就是一个大数据，好比交通讯息、十八大决定推进公开透明的不动产记录、每家每户的水电煤数据、城建费用等等，这样的数据一直存在着，可是数据的价值没有被挖掘出来。再形象一点的，好比腾讯的数据，一天100TB的增加，这里面包含了用户行为、社交行为、消费行为、游戏偏好等等数据，这些数据都有巨大的商业价值，是金矿。所我认为大数据，应该具有三个特征：巨量、价值、IO不定。巨量就是数据的规模以TB、PB计，甚至超之；价值是指这些数据具备潜在的巨大价值；IO不定是指没法预测从数据里能挖掘出什么。

2.大数据时代咱们应该作什么

   做为前线程序员，咱们天天的工做内容无非就是写代码、写文档，但是咱们不能把眼界限死，在这样一个浪潮下，做为一名程序员固然更加关注技术层面的东西。大数据来临咱们要学习技术，诸如网格计算、Hadoop、分布式存储、NoSQL、实时计算框架、分布式协调、分布式任务调配算法、消息队列、缓存等等。在大数据下，目前有两种主流的框架，批处理和实时处理，批处理的表明是Hadoop，来源于Google Lab的Map/Reduce和GFS的思想。而实时处理则好比Strom、Spark等等。大数据里的技术太多，咱们只能慢慢的去学习，去消化，去实践。

   以上是我总结的一些对云计算和大数据的理解，也是混合百家的产物，欢迎拍砖。