开源大数据周刊-第91期

资讯

• 大数据，让国防交通民用运力装上智慧大脑

战争年代，人民群众推着小推车踊跃支前。现在，在大数据支持下，国防交通民用运力动员会发生怎样的变化？

• AI玩虐人工！“Magic”世界杯集锦“炫”出新高度

2017年12月26日，新华社向全球发布了中国第一个媒体人工智能平台——媒体大脑1.0，引发海内外普遍关注。仅仅半年后，2018年6月13日，新华社又向全球发布了媒体大脑2.0——“MAGIC”智能生产平台。

• DataWorks Summit 2018 于6月17-21号在加州圣何塞举办

DataWorks Summit 2018 近日如期在美国加州举行，今年的主题是“Ideas Insights Innovation”。

• 即将发布的 JDK 11 包含了什么？

Java 的新版本发布计划意味着总会有一款新的 JDK 即将推出。根据他们的计划，6 月将是 JDK 11 第一阶段的发布时期，7 月将专门用于第二阶段的测试和发布，而首个发布候选版和最终发布候选版则定于 8 月份发布。

技术

• 经过高级性能调整深刻了解 Spark SQL

Spark SQL 是一个高度可扩展且高效的关系处理引擎，具备易于使用的 API 和中间查询容错功能。 它是 Apache Spark 的核心模块。Spark SQL能够处理，整合和分析来自不一样数据源（例如Hive，Cassandra，Kafka和Oracle）和文件格式（例如Parquet，ORC，CSV和JSON）的数据。 此次演讲将深刻 SparkSQL 的技术细节，涵盖查询执行的整个生命周期。 经过本文将对 Spark SQL 有更深刻的了解，以及了解如何调整Spark SQL的性能。

• Apache Pulsar：雅虎开发的企业级发布订阅消息系统

Apache Pulsar（孵化器项目）是一个企业级的发布订阅（pub-sub）消息系统，最初由Yahoo开发，并于2016年末开源，如今是Apache软件基金会的一个孵化器项目。Pulsar在Yahoo的生产环境运行了三年多，助力Yahoo的主要应用，如Yahoo Mail、Yahoo Finance、Yahoo Sports、Flickr、Gemini广告平台和Yahoo分布式键值存储系统Sherpa。

• Apache 是如何运做的?

本文将会以概述的形式为读者您提供 Apache 软件基金会的一切内容，相信必定是您一直以来都存有疑问，但尚未来得及细问的内容。涵盖：member 与 committer 的区别、谁决定什么事、选举是如何进行的、基础设施又是如何工做的、董事会又是什么、什么是PMC、孵化器背后的哲学思想又是什么、以及ASF是如何处理多年以来新项目和贡献者的惊人增加所带来的挑战。本文将带你走近 Apache 软件基金会的幕后，一探其背后的运做机理。

>>>>阅读全文