上海Spark Meetup第六次聚会

上海Spark Meetup第六次聚会将于2015年8月29日在上海市杨浦云计算创新基地发展有限公司举办。数据库

本次聚会由Intel举办。服务器

主讲题目:Tachyon: 内存为中心可容错的分布式存储系统

摘要: 
在愈来愈多的大数据应用场景诸如机器学习,数据分析等, 内存成为保证和提高性能的关键. Tachyon正是之内存为中心而构建的可容错的分布式存储系统, Tachyon全局管理和调度服务器集群的内存资源并经过lineage来实现内存数据丢失的容错. 经过Tachyon, 不一样的计算平台如Hadoop MapReduce, Spark能够充分利用内存的速度优点来存取数据, 并没有缝实现数据的共享.
Tachyon项目诞生于UC Berkeley AMPLab的研究项目并迅速开源. 在仅仅两年多的时间里. Tachyon项目取得了飞速的成长. 系统被超过50家公司部署并应用. 目前社区里有100名以上的开发者, 来自超过30家不一样的学校, 机构和公司(包括Baidu, IBM, Intel, Yahoo等).网络

嘉宾简介:
范斌博士就任于Tachyon Nexus, 是目前Tachyon开源项目的核心开发者之一. 加入Tachyon Nexus以前范斌曾于谷歌工做, 从事下一代大规模分布式存储系统的研究与开发, 并所以得到谷歌Technical Infrastructure Award. 范斌曾在卡耐基梅陇大学(Carnegie Mellon University)攻读并得到计算机博士学位, 有多篇学术论文发表在SIGCOMM, SOSP, NSDI等网络和分布式系统方向的顶级计算机学术会议.数据结构


主讲题目: Spark与SequoiaDB联手打造互联网金融大数据平台

摘要:分享咱们使用Spark在金融行业的一些应用场景,以及咱们和Spark对接的关键技术包括NoSQL数据库和Spark结合的方式与意义,而且结合咱们在一家金融企业中历史数据平台项目的场景来展开讨论。架构

嘉宾简介:王涛,SequoiaDB巨杉数据库联合创始人,他曾就任于IBM多伦多实验室IBM TorontoLab(DB2 UDB Development Lab), 曾经是DB2领域的专家,做为IBM DB2全球最高技术专家小组的成员,参与IBM下一代大数据平台的架构规划,精通数据库内核及体系结构。在IBM多伦多实验室工做八年后,王涛选择回国创业。目前担任巨杉数据库CTO及总架构师,成功研发了国内惟一一款开源新一代分布式数据库——SequoiaDB(巨杉数据库)。做为公司创始人之一,王涛参与公司发展战略规划,负责整个数据库研发项目的管理,包括数据库系统的构建,管理公司的总体核心技术,组织制定和实施重大技术决策和技术方案等。目前,公司产品已经开源,客户遍及互联网、金融、电信等各大行业。机器学习


主讲题目:Spark DataFrames: 更高效的结构化数据分析

摘要:DataFrame是Spark自1.3.0起为结构化数据分析加入的新API。DataFrame API简单易用,并且让用户能够充分利用Catalyst模块为执行计划进行优化,高效地进行数据分析。同时,对于常规操做,经过DataFrame API用户能够利用Spark核心引擎的一些专有数据结构进一步提升性能表现。本报告将讨论DataFrame API背后的技术细节与常见的使用方式。分布式

嘉宾简介:王道远,英特尔亚太研发有限公司大数据团队软件工程师,Hive/Spark开源项目贡献者,目前专一于Spark SQL模块开发。在进入Spark社区前,他主要负责为IDH中的Hive开发SQL92支持。同时仍是《Spark快速大数据分析》一书译者。oop



日程表:
1. 13:00 -13:30 checkin 
2. 13:30 - 13:40 Opening
3. 13:40 - 14:30  TachyonNexus 范斌  Tachyon: 内存为中心可容错的分布式存储系统
4. 14:30 - 15:20  SequoiaDB巨杉数据库 王涛 Spark与SequoiaDB联手打造互联网金融大数据平台
5. 15:20 - 15:40   茶歇
6. 15:40 - 16:30   Intel  王道远   Spark DataFrames: 更高效的结构化数据分析
7. 17:00  end  性能


地图与交通讯息
上海市杨浦区伟德路6号云海大厦13楼 (上海市杨浦云计算创新基地发展有限公司)。
学习

相关文章
相关标签/搜索