2016年新年伊始,在主題為Hello,DT World的論壇上,阿里云發(fā)布了大數(shù)據(jù)開(kāi)發(fā)平臺(tái):數(shù)加。這是一個(gè)包含計(jì)算引擎、開(kāi)發(fā)組件、可視化工具在內(nèi)的一站式開(kāi)發(fā)平臺(tái),將大大降低開(kāi)發(fā)者使用大數(shù)據(jù)的門(mén)檻,同時(shí)也將讓數(shù)據(jù)分析和數(shù)據(jù)預(yù)測(cè)的成本降至10%。 大數(shù)據(jù)的口號(hào)
2016年新年伊始,在主題為“Hello,DT World”的論壇上,阿里云發(fā)布了大數(shù)據(jù)開(kāi)發(fā)平臺(tái):“數(shù)加”。這是一個(gè)包含計(jì)算引擎、開(kāi)發(fā)組件、可視化工具在內(nèi)的一站式開(kāi)發(fā)平臺(tái),將大大降低開(kāi)發(fā)者使用大數(shù)據(jù)的門(mén)檻,同時(shí)也將讓數(shù)據(jù)分析和數(shù)據(jù)預(yù)測(cè)的成本降至10%。
大數(shù)據(jù)的口號(hào)喊了多年,到如今依然熱度不減,哪怕在2015年資本市場(chǎng)的“寒冬”下,中國(guó)大數(shù)據(jù)領(lǐng)域的創(chuàng)新公司仍獲得近50億人民幣的投資。可實(shí)際上,大數(shù)據(jù)在開(kāi)發(fā)層面和應(yīng)用層面一直未有本質(zhì)的創(chuàng)新,人類(lèi)已挖掘的數(shù)據(jù)財(cái)富更是不到百萬(wàn)分之一。
“數(shù)加”的發(fā)布,對(duì)阿里云來(lái)說(shuō),無(wú)疑是對(duì)數(shù)據(jù)和計(jì)算本質(zhì)的重新思考:把云計(jì)算的“云”和大數(shù)據(jù)“大”去掉,讓數(shù)據(jù)被更好地計(jì)算,從而創(chuàng)造出經(jīng)濟(jì)和社會(huì)價(jià)值。
事實(shí)上,人類(lèi)社會(huì)的發(fā)展自始至終離不開(kāi)數(shù)據(jù)與計(jì)算工具的進(jìn)化。
在《人類(lèi)簡(jiǎn)史》這本書(shū)里,歷史學(xué)家尤瓦爾·赫拉利描述了的“智人”的進(jìn)化過(guò)程,很大程度上源自計(jì)數(shù)工具的推動(dòng),即便是麻繩、石頭這樣簡(jiǎn)陋的計(jì)數(shù)工具。到了公元前2700年,古蘇美爾人發(fā)明了算盤(pán),開(kāi)創(chuàng)了世界上首批先進(jìn)的計(jì)算系統(tǒng)。而利用算盤(pán),古蘇美爾人和古巴比倫人在天文、航海方面有了深刻研究,這些由算盤(pán)計(jì)算出來(lái)的天文、航海數(shù)據(jù)也成為早年商貿(mào)活動(dòng)的重要參考。
如果把歷史鏡頭拉近,當(dāng)1946年馮·諾伊曼推出**臺(tái)現(xiàn)代意義的計(jì)數(shù)設(shè)備——計(jì)算機(jī)的時(shí)候,人類(lèi)的又一場(chǎng)變革大幕正在開(kāi)啟。正是在計(jì)算機(jī)強(qiáng)大計(jì)算能力的幫助下,登月計(jì)劃才會(huì)成為現(xiàn)實(shí),也正是利用計(jì)算機(jī),人類(lèi)對(duì)于生命科學(xué)的研究才能在過(guò)去二十年取得突飛猛進(jìn)的發(fā)展。
從互聯(lián)網(wǎng)時(shí)代開(kāi)始,尤其到了移動(dòng)互聯(lián)網(wǎng)以及社交媒體時(shí)代,人類(lèi)社會(huì)的數(shù)據(jù)增長(zhǎng)進(jìn)入到一個(gè)前所未有的爆發(fā)階段。根據(jù)IDC的數(shù)字世界研究報(bào)告顯示,僅僅在2013年,人類(lèi)產(chǎn)生、復(fù)制和消費(fèi)的數(shù)據(jù)量達(dá)到4.4ZB。而到2020年,數(shù)據(jù)量將增長(zhǎng)10倍,達(dá)到44ZB。
如此海量數(shù)據(jù)的增長(zhǎng),勢(shì)必需要更**的數(shù)據(jù)解決方案。
長(zhǎng)期以來(lái),企業(yè)數(shù)據(jù)處理的**結(jié)果往往就是商務(wù)智能,但一張所謂的智能報(bào)表由于無(wú)法實(shí)現(xiàn)實(shí)時(shí)計(jì)算,并不能真正代表企業(yè)的運(yùn)營(yíng)情況。其次,數(shù)據(jù)存儲(chǔ)的成本并不低,倘若無(wú)法從數(shù)據(jù)中挖掘出核心價(jià)值,那么數(shù)據(jù)不但不會(huì)是企業(yè)發(fā)展的動(dòng)能,還將成為企業(yè)的重要成本。第三,即便是Hadoop平臺(tái)出現(xiàn)之后,雖然擁有了開(kāi)放、廉價(jià)、基于普通商業(yè)硬件的平臺(tái),但大數(shù)據(jù)應(yīng)用的開(kāi)發(fā)成本,無(wú)論是技術(shù)門(mén)檻還是價(jià)格都讓很多普通開(kāi)發(fā)者望而卻步。
在這樣的產(chǎn)業(yè)發(fā)展背景之下,“數(shù)加”這樣一個(gè)分布式大數(shù)據(jù)開(kāi)發(fā)平臺(tái)的推出引人關(guān)注。
首先,作為“一個(gè)數(shù)據(jù)公司”(馬云語(yǔ)),阿里巴巴擁有著處理大數(shù)據(jù)的豐富經(jīng)驗(yàn)。單就2015年的雙十一來(lái)說(shuō),淘寶/天貓訂單的創(chuàng)建峰值能力突破了每秒鐘14萬(wàn)筆,支付寶的支付峰值達(dá)到了每秒8.59萬(wàn)筆,遠(yuǎn)高于Visa實(shí)驗(yàn)室測(cè)試數(shù)據(jù)的每秒5.6萬(wàn)筆以及MasterCard實(shí)驗(yàn)室測(cè)試數(shù)據(jù)的每秒4萬(wàn)筆,這些數(shù)據(jù)處理經(jīng)驗(yàn)都將反映到“數(shù)加”的產(chǎn)品中。
其次,“數(shù)加”并非一款單獨(dú)的產(chǎn)品,而是一條完整的大數(shù)據(jù)開(kāi)發(fā)鏈條。當(dāng)天發(fā)布的20款產(chǎn)品,覆蓋了數(shù)據(jù)采集、計(jì)算引擎、數(shù)據(jù)加工、數(shù)據(jù)分析、機(jī)器學(xué)習(xí)、數(shù)據(jù)應(yīng)用等數(shù)據(jù)生產(chǎn)全鏈條。
其中,由大數(shù)據(jù)計(jì)算服務(wù)(MaxCompute)、分析型數(shù)據(jù)庫(kù)(Analytic DB)、流計(jì)算(StreamCompute)共同組成的底層計(jì)算引擎,速度快且成本低。測(cè)算數(shù)據(jù)顯示,自建Hadoop集群的成本是“數(shù)加”的1.5倍,國(guó)外計(jì)算廠商AWS 的EMR成本更是“數(shù)加”的5倍。
另外,“數(shù)加”的云端數(shù)據(jù)開(kāi)發(fā)套件,包括數(shù)據(jù)集成、數(shù)據(jù)開(kāi)發(fā)、調(diào)度系統(tǒng)、數(shù)據(jù)管理、運(yùn)維視屏、數(shù)據(jù)質(zhì)量、任務(wù)監(jiān)控,能夠幫助開(kāi)發(fā)者快速部署相關(guān)產(chǎn)品。則通過(guò)視化產(chǎn)品DataV的數(shù)據(jù)分析,開(kāi)發(fā)者可以一星期做出阿里雙十一的數(shù)據(jù)監(jiān)控大屏。同樣基于DataV,“數(shù)加”還發(fā)布了面向政府的行業(yè)應(yīng)用產(chǎn)品“郡縣圖治”。通過(guò)這款產(chǎn)品,縣長(zhǎng)可以在一個(gè)屏幕下統(tǒng)覽全縣各項(xiàng)經(jīng)濟(jì)民生數(shù)據(jù),為政府決策提供輔助。
“數(shù)加”推出的機(jī)器學(xué)習(xí)工具,可基于海量數(shù)據(jù)實(shí)現(xiàn)對(duì)用戶行為、行業(yè)走勢(shì)、天氣、交通等的預(yù)測(cè)。圖形化編程讓用戶無(wú)需編碼、只需用鼠標(biāo)拖拽標(biāo)準(zhǔn)化組件即可完成開(kāi)發(fā)。產(chǎn)品還集成了阿里巴巴核心算法庫(kù),包括特征工程、大規(guī)模機(jī)器學(xué)習(xí)、深度學(xué)習(xí)等。
而在應(yīng)用層面,支撐阿里巴巴客服系統(tǒng)的智能語(yǔ)言交互和文字識(shí)別OCR也即將上線。開(kāi)發(fā)者可以利用這兩個(gè)應(yīng)用開(kāi)發(fā)更具人工智能的大數(shù)據(jù)產(chǎn)品,比如搭建智能化的客服體系,利用文字識(shí)別OCR快速推出掃描類(lèi)的應(yīng)用,保障用戶體驗(yàn),節(jié)約成本。
**,在一個(gè)軟件即服務(wù)的時(shí)代,“數(shù)加”要做的也不僅僅是完整的數(shù)據(jù)開(kāi)發(fā)工具,而是一項(xiàng)數(shù)據(jù)增值服務(wù)。大數(shù)據(jù)行業(yè)的進(jìn)步不僅需要底層技術(shù)尤其是開(kāi)發(fā)技術(shù)的發(fā)展,以降低技術(shù)門(mén)檻和資金門(mén)檻,還需要大量數(shù)據(jù)分析人才、數(shù)據(jù)科學(xué)家。
阿里云大數(shù)據(jù)事業(yè)部**總監(jiān)徐常亮表示,阿里云將通過(guò)天池大數(shù)據(jù)競(jìng)賽的平臺(tái),發(fā)現(xiàn)、培養(yǎng)更多數(shù)據(jù)分析人才,比如在2015年就發(fā)掘出一位年齡僅有15歲的數(shù)據(jù)分析的獲獎(jiǎng)?wù)摺M瑫r(shí)計(jì)劃與各大高校合作,合辦數(shù)據(jù)相關(guān)的課程等。同時(shí),徐常亮還透露,“數(shù)加”平臺(tái)將計(jì)劃在3年內(nèi)吸引1000家合作伙伴加入,共同構(gòu)筑大數(shù)據(jù)生態(tài)圈。
正如科幻小說(shuō)家威廉·吉布森所言:未來(lái)已經(jīng)到來(lái),只是分布還不均衡。我們已經(jīng)看到整個(gè)社會(huì)都在轉(zhuǎn)向數(shù)據(jù)層面的運(yùn)作。據(jù)
石家莊網(wǎng)站建設(shè)了解,而當(dāng)互聯(lián)網(wǎng)成為像水、電一樣的基礎(chǔ)設(shè)施時(shí),產(chǎn)生于互聯(lián)網(wǎng)(包括但不限于桌面互聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)等)的數(shù)據(jù)也成為一種新型的生產(chǎn)資料,在云計(jì)算的大背景下,分布式的數(shù)據(jù)分析計(jì)算平臺(tái)將創(chuàng)造更多的創(chuàng)業(yè)機(jī)會(huì),讓數(shù)據(jù)能夠互聯(lián)互通,數(shù)據(jù)驅(qū)動(dòng)的創(chuàng)業(yè)變革也已在發(fā)生。正如阿里云總裁胡曉明曾預(yù)測(cè)的:2016年將成為數(shù)據(jù)創(chuàng)業(yè)的**年,這將是創(chuàng)業(yè)領(lǐng)域的全新的一個(gè)開(kāi)始。