上海Spark Meetup第四次聚会

时间  2021-08-15 标签 大数据 Spark

介绍

上海Spark Meetup第四次聚会将于2015年5月16日在小沃科技有限公司（原中国联通应用商店运营中心）举办。本次聚会特别添加了抽奖环节，凡是参加了问卷调查并在当天到场的同学们都有机会中奖。奖品由英特尔亚太研发有限公司赞助。问卷链接http://www.wenjuan.com/s/IZB3Mf/ 。

报名链接：http://huiyi.csdn.net/activity/product/goodslist?projectid=1930

部分奖品：

http://img.my.csdn.net/uploads/201505/12/1431417357_9855.png

http://img.my.csdn.net/uploads/201505/12/1431417301_2925.png

Opening Keynote

小沃科技作为运营商在移动互联网领域的创新基地，具备四大能力开放，应用推广能力、计费能力、流量能力和大数据能力。在用户数据分享方面，分别在沃 商店客户端对用户的下载、活跃度，沃游戏客户端对用户在单机、网游、支付等情况进行分析。大数据还在用户画像、精准营销、计费防刷、流量提升等方面进一步 尝试创新。

沈洲

小沃科技有限公司副总经理，上海交通大学计算机专业博士毕业，曾担任上海联通产品创新部副总经理，负责新产品开发、平台建设和维护工作；自2012 年担任中国联通应用商店运营中心（现小沃科技）副总经理以来，先后负责沃商店手机客户端开发推广、移动游戏平台搭建、大数据分析等相关工作，对移动互联网 相关领域有着多年丰富的经验和深刻的体会。

GraphX在阿里妈妈广告系统中的应用

吴炜

阿里妈妈技术部资深算法工程师，关注机器学习，数据挖掘，流式计算，主要从事机器学习算法在广告上的应用，对于Spark在ODPS平台上的使用有所尝试。

Spark在小沃科技的实践

小沃科技大数据从Hadoop1.0向Hadoop2.0+Spark演进。分布式并行计算由MapReduce升级为Yarn，流式计算由 Storm转换为Spark Streaming。通过Spark SQL实现数据的展现和即时查询。通过MlLib实现了数据分析进一步洞察用户行为。

杨明

小沃科技有限公司大数据首席架构师，荣获多项国家专利，近年来带领团队从事大数据项目建设。目前专注于Hadoop、Spark在运营商、移动互联网的应用。

R + Spark = 大数据时代的R - SparkR介绍

SparkR是往Spark中增加R语言API和运行时支持的开源项目，由AMPLAB开源并主导，业界包括Intel、Alteryx等公司和学 术界包括普度大学积极参与并作了大量贡献，目前已经合并进Spark。R语言在数据分析和统计领域非常流行，SparkR使得R用户可以在Spark的分 布式计算框架基础上结合R本身强大的统计分析功能和丰富的第三方扩展包，对大规模数据集进行分析和处理。本报告将介绍SparkR项目的架构，功能和最新 进展，总结Intel对SparkR所作的贡献，讨论下一步的开发计划。

孙锐

英特尔亚太研发有限公司大数据团队架构师，Hive/Shark开源项目贡献者，SparkR项目主力贡献者之一。目前主要专注于SparkR的开发和推广。

日程表：

  1. 13:00 -13:30 checkin

  2. 13:30 -14:00 Opening 沈洲 小沃科技副总经理

  3. 14:00-14:45 TechTalk 1吴炜 GraphX在阿里妈妈广告系统中的应用

  4. 14:45-15:30 Tech Talk 2杨明 Spark在小沃科技的实践

  5. 15:30-16:10 Break & Social Network Time 休息及分组自由讨论

  6. 16:10-16:55 Tech Talk 3 孙锐R + Spark = 大数据时代的R - SparkR介绍

  7. 17:00 end

地图与交通信息

地铁4号线大连路站下车步行630米即到宝地广场A座

公交25路，317路 唐山路大连路站；17路，19路，33路，145路 962路周家嘴路大连路站

联系我们 沪ICP备13005482号-10