摘要： 最近大數(shù)據(jù)的一些論斷，如：中國大數(shù)據(jù)發(fā)展10大趨勢5大挑戰(zhàn)，數(shù)據(jù)在工業(yè)的崛起將重塑整個(gè)商業(yè)社會，涂子沛：都說收集數(shù)據(jù)很難，也許是思維錯(cuò)了。

阿里云E-Mapreduce動態(tài)

E-Mapreduce團(tuán)隊(duì)

1.4版本（已經(jīng)發(fā)布）

• 作業(yè)運(yùn)行失敗報(bào)警
• 作業(yè)并行提交
• 添加sqoop、shell類型的作業(yè)

1.4.1版本（正在研發(fā)）

• 完善失敗報(bào)警
• 完善定時(shí)任務(wù)，增加小時(shí)、分鐘定時(shí)任務(wù)

1.5.0版本 （正在研發(fā)）

• 集群整體運(yùn)行情況的儀表盤
• 集群狀態(tài)監(jiān)控報(bào)警

1.5.0版本

• 交互式查詢（支持hive、spark）

資訊

中國大數(shù)據(jù)發(fā)展10大趨勢5大挑戰(zhàn)
中國大數(shù)據(jù)發(fā)展10大趨勢5大挑戰(zhàn)，如：大數(shù)據(jù)的首席數(shù)據(jù)官開始崛起、可視化推動大數(shù)據(jù)平民化、智能化嵌入、機(jī)器學(xué)習(xí)迎來上揚(yáng)態(tài)勢、開源應(yīng)用加速等10大趨勢及相應(yīng)的挑戰(zhàn)。

數(shù)據(jù)在工業(yè)的崛起將重塑整個(gè)商業(yè)社會，你信嗎？
無論是德國的工業(yè)4.0，還是美國的工業(yè)互聯(lián)網(wǎng)，或是我國的中國制造2025，都離不開大數(shù)據(jù)，可以說，大數(shù)據(jù)在工業(yè)的崛起將重塑整個(gè)商業(yè)社會，其影響力甚至不是互聯(lián)網(wǎng)所能比的，你信嗎?事實(shí)上，工業(yè)4.0帶來的智能生產(chǎn)、智能運(yùn)維、智能服務(wù)、云工場及跨界打擊將重構(gòu)整個(gè)商業(yè)體系

涂子沛：都說收集數(shù)據(jù)很難，也許是思維錯(cuò)了
互聯(lián)網(wǎng)上流行過一個(gè)“查水表”的段子：“開門，查水表的”， 就是不開，因?yàn)椤八碓谕饷妗?#xff08;看不懂的自行百度，另一個(gè)關(guān)鍵詞是爆破組）。臺詞后來又演變?yōu)椤八硪巡稹薄腥嗽谡f完話之后刻意補(bǔ)上這4個(gè)字，然后心照不宣地笑了

國家統(tǒng)計(jì)局科學(xué)研究所副所長許亦頻：大數(shù)據(jù)思維讓政府統(tǒng)計(jì)更準(zhǔn)確
在居民收入統(tǒng)計(jì)當(dāng)中，大家可能常常說，收入統(tǒng)計(jì)低了、高了、或被提高了。在大數(shù)據(jù)時(shí)代，國家統(tǒng)計(jì)局找到了一個(gè)有效的辦法，用居民的納稅記錄來反推高收入人群的收入數(shù)據(jù)。這個(gè)方法對于個(gè)體分析是不可以的，但是作為國家管理部門取得一個(gè)宏觀平均數(shù)據(jù)是可以操作的。我們正在做這個(gè)嘗試，希...

巧用MapReduce+HDFS，海量數(shù)據(jù)去重的五種方法
隨著存儲數(shù)據(jù)信息量的飛速增長，越來越多的人開始關(guān)注存儲數(shù)據(jù)的縮減方法。數(shù)據(jù)壓縮、單實(shí)例存儲和重復(fù)數(shù)據(jù)刪除等都是經(jīng)常使用的存儲數(shù)據(jù)縮減技術(shù)。

Hadoop、Spark、HBase與Redis的適用性討論
本文跟大家討論一下Hadoop、Spark、HBase及Redis等幾個(gè)主流大數(shù)據(jù)技術(shù)的使用場景

基于Hadoop集群的大規(guī)模分布式深度學(xué)習(xí)
在過去的十年里，Yahoo 一直持續(xù)投資建設(shè)和擴(kuò)展 Apache Hadoop 集群，到目前為止共有超過 4 萬臺服務(wù)器和 600PB 數(shù)據(jù)分布在 19 個(gè)集群上。

總結(jié)

以上是生活随笔為你收集整理的开源大数据周刊-第15期的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。