開源大數據週刊-第91期

資訊

• 大數據，讓國防交通民用運力裝上智慧大腦

戰爭年代，人民羣衆推着小推車踊躍支前。現在，在大數據支持下，國防交通民用運力動員會發生怎樣的變化？

• AI玩虐人工！「Magic」世界盃集錦「炫」出新高度

2017年12月26日，新華社向全球發佈了中國第一個媒體人工智能平臺——媒體大腦1.0，引發海內外普遍關注。僅僅半年後，2018年6月13日，新華社又向全球發佈了媒體大腦2.0——「MAGIC」智能生產平臺。

• DataWorks Summit 2018 於6月17-21號在加州聖何塞舉辦

DataWorks Summit 2018 近日如期在美國加州舉行，今年的主題是「Ideas Insights Innovation」。

• 即將發佈的 JDK 11 包含了什麼？

Java 的新版本發佈計劃意味着總會有一款新的 JDK 即將推出。根據他們的計劃，6 月將是 JDK 11 第一階段的發佈時期，7 月將專門用於第二階段的測試和發佈，而首個發佈候選版和最終發佈候選版則定於 8 月份發佈。

技術

• 經過高級性能調整深刻了解 Spark SQL

Spark SQL 是一個高度可擴展且高效的關係處理引擎，具備易於使用的 API 和中間查詢容錯功能。 它是 Apache Spark 的核心模塊。Spark SQL能夠處理，整合和分析來自不一樣數據源（例如Hive，Cassandra，Kafka和Oracle）和文件格式（例如Parquet，ORC，CSV和JSON）的數據。 此次演講將深刻 SparkSQL 的技術細節，涵蓋查詢執行的整個生命週期。 經過本文將對 Spark SQL 有更深刻的瞭解，以及瞭解如何調整Spark SQL的性能。

• Apache Pulsar：雅虎開發的企業級發佈訂閱消息系統

Apache Pulsar（孵化器項目）是一個企業級的發佈訂閱（pub-sub）消息系統，最初由Yahoo開發，並於2016年末開源，如今是Apache軟件基金會的一個孵化器項目。Pulsar在Yahoo的生產環境運行了三年多，助力Yahoo的主要應用，如Yahoo Mail、Yahoo Finance、Yahoo Sports、Flickr、Gemini廣告平臺和Yahoo分佈式鍵值存儲系統Sherpa。

• Apache 是如何運做的?

本文將會以概述的形式爲讀者您提供 Apache 軟件基金會的一切內容，相信必定是您一直以來都存有疑問，但尚未來得及細問的內容。涵蓋：member 與 committer 的區別、誰決定什麼事、選舉是如何進行的、基礎設施又是如何工做的、董事會又是什麼、什麼是PMC、孵化器背後的哲學思想又是什麼、以及ASF是如何處理多年以來新項目和貢獻者的驚人增加所帶來的挑戰。本文將帶你走近 Apache 軟件基金會的幕後，一探其背後的運做機理。

>>>>閱讀全文