551 技術社區[雲棲]

開源大數據周刊-第63期

EMR資訊：

從EMR-3.4.1版本開始本地盤集群。EMR大數據機型整體方案發布，幫助用戶更好的使用大數據機型，從數據可靠性，服務可用性和整體性能上進行自動化的運維管理，極大地降低用戶使用大數據機型的運維成本。
新功能預告：8月底將發布集群機器組功能，更好地發揮集群彈性計算能力

用大數據精準預測地震，每年將有1.3萬人免於受難

學者們常常提出各種論斷，認為精準的地震預測是不可能實現的，原因是造成潛在地震擾動的條件存在於所有地殼構造的斷層中，同時小規模的地質活動可在任何一點引發更為巨大且毀滅性更強的地震。然而，這一切正在改變。大數據分析通過使用衛星和氣象數據，並結合統計分析，開啟了一種新的地震預報形式。而這項研究所取得的喜人成果似乎可以有力駁斥那些否定者們的錯誤觀點。
雲計算平台點兵：誰在用AWS，誰在用Azure？

微軟和亞馬遜雙雙發布了2017年第二季度財報，兩家公司的雲計算業務漲勢喜人。業界知名的問答平台Stack Overflow使用Stack Overflow Trends，從多個角度對AWS和Azure的受歡迎程度進行了對比分析。
產業生態日趨成熟大數據產業難在價值變現

大數據產業屬於“附加值”較高的產業，盈利能力較強。隨著中國智能製造2025戰略的落地和推廣，以及中國對政務效率提升的要求，工業大數據和政務大數據將成為未來大數據產業發展的熱點。
FMI2017----讓人工智能與大數據為時代賦能

2017年8月5日，由飛馬網主辦的“FMI人工智能&大數據高峰論壇”在北京國家會議中心召開。大會圍繞著“大數據”和“人工智能”兩大主題展開。

基於Elastic Stack+Kafka的日誌監控平台架構演進

本文分享了基於Elastic Stack+Kafka的日誌監控平台架構演進過程。
Spark Streaming場景應用｜Kafka數據讀取方式

Spark Streaming 支持多種實時輸入源數據的讀取，其中包括Kafka、flume、socket流等等。本篇文章主要著眼於Spark Streaming讀取Kafka數據的方式。
分布式流處理新貴Kafka Stream

本文介紹了Kafka Stream的背景，如Kafka Stream是什麼，什麼是流式計算，以及為什麼要有Kafka Stream。接著介紹了Kafka Stream的整體架構，並行模型，狀態存儲，以及主要的兩種數據集KStream和KTable。並且分析了Kafka Stream如何解決流式係統中的關鍵問題，如時間定義，窗口操作，Join操作，聚合操作，以及如何處理亂序和提供容錯能力。最後結合示例講解了如何使用Kafka Stream。

雲HBase微信交流群請加：g418615

阿裏雲E-Mapreduce團隊出品

最後更新：2017-08-17 12:32:12