2013年12月5-6日，中國最具影響、規模最大的大數據領(lǐng)域技術(shù)盛會(huì )——2013中國大數據技術(shù)大會(huì )（Big Data Technology Conference 2013，BDTC 2013）在北京世紀金源大飯店隆重開(kāi)幕。
大數據時(shí)代已經(jīng)到來(lái)
2013年，大數據應用帶來(lái)了令人矚目的成績(jì)。作為新的重要資源，世界各國都在加快大數據的戰略布局，制定戰略規劃。美國奧巴馬政府發(fā)起了《大數據研究和發(fā)展倡議》，斥資2億美元用于大數據研究；英國政府預計在大數據和節能計算研究上投資1.89億英鎊；法國政府宣布投入1150萬(wàn)歐元，用于7個(gè)大數據市場(chǎng)研發(fā)項目；日本在新一輪IT振興計劃中，將發(fā)展大數據作為國家戰略層面提出，重點(diǎn)關(guān)注大數據應用技術(shù)，如社會(huì )化媒體、新醫療、交通擁堵治理等公共領(lǐng)域的應用。中國的“基礎研究大數據服務(wù)平臺應用示范項目”正在啟動(dòng)，有關(guān)部門(mén)正在積極研究相關(guān)發(fā)展目標、發(fā)展原則、關(guān)鍵技術(shù)等方面的頂層設計。
云計算、物聯(lián)網(wǎng)、智慧城市、移動(dòng)互聯(lián)，新技術(shù)與應用的不斷涌現，加速了“大數據”時(shí)代的到來(lái)。大數據，已經(jīng)超越數據本身，轉向了數據的資產(chǎn)化和服務(wù)化，轉向了挖掘與分析數據所帶來(lái)的新商業(yè)價(jià)值，轉向了以技術(shù)維護國家安全利益，與此同時(shí)，為信息服務(wù)產(chǎn)業(yè)和傳統商業(yè)模式帶來(lái)了巨大的機遇與挑戰。
在這樣的背景下，由中國計算機學(xué)會(huì )（CCF）主辦，CCF大數據專(zhuān)家委員會(huì )承辦，中國科學(xué)院計算技術(shù)研究所與CSDN共同協(xié)辦的2013中國大數據技術(shù)大會(huì )在京隆重舉行。包括李國杰、陸汝鈐、Ion Stoica、Dhabaleswar Panda等國內外院士在內的近50位專(zhuān)家和業(yè)界領(lǐng)袖探討了大數據技術(shù)生態(tài)系統的現狀和發(fā)展趨勢。
大會(huì )為期兩天，以“應用驅動(dòng)的架構與技術(shù)”為主題，共設立“大數據架構與系統”、“大數據技術(shù)”、“大數據應用”、“大數據研究與發(fā)展”，“大數據基準測試（Benchmark）”五大技術(shù)分論壇，并首次增加“2013中國智能交通與大數據技術(shù)峰會(huì )”和“傳統行業(yè)如何駕馭大數據總裁研討會(huì )”。作為分論壇數量最多的一屆大會(huì )，2013中國大數據技術(shù)大會(huì )預計參會(huì )人數首次突破2000人。
大會(huì )內容涵蓋數據的獲取與清理、傳輸、存儲、計算、挖掘、展現、開(kāi)發(fā)平臺與應用市場(chǎng)等方面，覆蓋了數據生產(chǎn)的全生命周期。除了Hadoop 2.0系統YARN、BDAS/Spark、飛天等基礎架構外，還探討了HDFS、HBase、Hive等Hadoop生態(tài)系統重要技術(shù)，Storm等流式計算，Impala和Drill等實(shí)時(shí)計算，以及NoSQL、NewSQL和BigSQL等的最新進(jìn)展。本次大會(huì )特別強調大數據的行業(yè)應用，有互聯(lián)網(wǎng)、金融、電信、交通、醫療各領(lǐng)域的創(chuàng )新案例剖析，對大數據資源的法律法規、大數據商業(yè)利用的政策管制等也有深入討論。
大會(huì )主會(huì )，技術(shù)領(lǐng)袖聚而論道
作為已成功舉辦了六屆的技術(shù)會(huì )議，BDTC 2013匯聚了業(yè)內精英，講師陣容盛大。12月5日，第一天主會(huì )場(chǎng)，十余位技術(shù)領(lǐng)袖探討大數據技術(shù)生態(tài)系統的現狀和發(fā)展趨勢。
Apache HBase項目管理委員會(huì )主席Michael Stack的“The State of Apache Hbase”主題演講分享了HBase的現狀和將來(lái)；UC Berkeley計算機教授、AMPLab共同創(chuàng )始人、Spark、Mesos核心設計者Ion Stoica、IEEE Fellow、俄亥俄州立大學(xué)計算機系教授Dhabaleswar Panda帶來(lái)了國際最新技術(shù)思想和實(shí)踐經(jīng)驗。
在大數據技術(shù)與應用的洪流中，國內互聯(lián)網(wǎng)公司、運營(yíng)商，以及傳統IT制造商已經(jīng)站到最前線(xiàn)。百度、騰訊、阿里、中國移動(dòng)的技術(shù)領(lǐng)袖們再次聚首，理念碰撞。百度大數據首席架構師林仕鼎講述“新計算時(shí)代”，騰訊數據平臺部助理總經(jīng)理蔣杰解密“大數據處理的規模化與實(shí)時(shí)化演進(jìn)”，阿里飛天平臺總架構師唐洪分享“飛天開(kāi)放平臺”，中國移動(dòng)研究院院長(cháng)黃曉慶和程序主席孫少陵剖析“大數據實(shí)時(shí)處理技術(shù)發(fā)展趨勢及中國移動(dòng)實(shí)踐和展望”，工信部電信研究院政經(jīng)所互聯(lián)網(wǎng)部主任馬志剛解讀“數據開(kāi)放共享問(wèn)題研究”，帶來(lái)創(chuàng )新思考的火花。
主題論壇，實(shí)戰出發(fā)分享經(jīng)驗
12月6日，在“大數據架構與系統”、“大數據技術(shù)”、“大數據應用”、“大數據研究與發(fā)展”，“大數據基準測試（Benchmark）”、“2013中國智能交通與大數據技術(shù)峰會(huì )”，以及“傳統行業(yè)如何駕馭大數據”等七大分論壇中，來(lái)自于Hortonworks、Cloudera、LinkedIn、阿里巴巴、騰訊、百度、中國移動(dòng)、華為、搜狐、Intel、小米科技、奇虎360、海爾、去哪兒等海內外一線(xiàn)IT公司的60余位工程師精英，從現實(shí)出發(fā)將問(wèn)題和解決方案講深講透。
“大數據架構與系統”匯聚Apache、Hortonworks、LinkedIn、VMware、阿里、騰訊、智明星通、百川通聯(lián)等一線(xiàn)專(zhuān)家，重在研討大數據架構與系統實(shí)踐經(jīng)驗。其中，Hortonworks技術(shù)總監Gunther Hagleitner及高級技術(shù)專(zhuān)家Ted Yu分享了HBase與HOYA，Hadoop 2與YARN的最新技術(shù)實(shí)踐；LinkedIn Hadoop核心團隊成員俞晨杰就“LinkedIn大數據應用和Azkaban”做經(jīng)驗分享；阿里數據平臺事業(yè)部海量數據技術(shù)專(zhuān)家羅李的“構建一個(gè)跨機房的Hadoop集群”和騰訊數據中心資深專(zhuān)家翟艷堂的“騰訊大規模Hadoop集群實(shí)踐”從不同層面深入探討互聯(lián)網(wǎng)行業(yè)的Hadoop集群實(shí)踐。
“大數據技術(shù)”意在探討大數據技術(shù)方向，分享實(shí)戰成果。其中，百度系統部資深系統研發(fā)工程師胡殿明的“基于大數據的硬盤(pán)故障預測”，浙江大學(xué)教授何曉飛的“機器學(xué)習與大數據”，北京大學(xué)“百人計劃”研究員、北京大學(xué)信息科學(xué)技術(shù)學(xué)院博士生導師袁曉如的“大數據時(shí)代可視化和可視分析的機遇與挑戰”從不同維度展示大數據技術(shù)應用方向。巨杉數據庫CTO王濤的“基于Cloudera Impala的非關(guān)系型數據庫SQL執行引擎”，奇虎360技術(shù)經(jīng)理趙健博“奇虎360超大規模HBase集群增強與改進(jìn)”和阿里搜索事業(yè)部高級技術(shù)專(zhuān)家王峰的“阿里搜索實(shí)時(shí)流計算技術(shù)”則在技術(shù)細節方面更加突出實(shí)戰處理。
“大數據應用”關(guān)注的是技術(shù)在行業(yè)中的應用落地。工業(yè)和信息化部電信研究院專(zhuān)家魏凱、中國移動(dòng)經(jīng)分（BI/DW）系統規劃項目負責人何鴻凌、英特爾數據中心軟件部首席架構師陳奇、騰訊精準推薦中心廣告推薦負責人薛偉、宏源證券研究所副所長(cháng)易歡歡，與搜狐、海爾、小米、數據堂、阿里巴巴的技術(shù)專(zhuān)家們攜手帶來(lái)一場(chǎng)大數據應用的盛宴。
“大數據研究與發(fā)展”與“大數據基準測試（Benchmark）”論壇中，來(lái)自俄亥俄州立大學(xué)、中國科學(xué)院、中科院計算所、西北工業(yè)大學(xué)、清華大學(xué)、中國人民大學(xué)和華東師范大學(xué)的專(zhuān)家學(xué)者們就大數據基準測試展開(kāi)深入探討，共議大數據發(fā)展中技術(shù)方向與基準測試標準。
與此同時(shí)，“2013中國智能交通與大數據技術(shù)高峰論壇”和“傳統行業(yè)如何駕馭大數據總裁研討會(huì )”，突出交通行業(yè)實(shí)踐，貫通企業(yè)高層。上海市城鄉建設和交通發(fā)展研究院主任何承、北京市交通運行監測調度中心（TOCC）副主任張可、深圳市綜合交通運行指揮中心總工程師高工關(guān)志超從不同維度分析上海、北京、深圳的交通大數據應用現狀與存在問(wèn)題。奇虎360科技有限公司首席技術(shù)官譚曉生，IBM大中華區智慧城市首席規劃師岳梅櫻，中國移動(dòng)通信研究院云計算系統部大數據產(chǎn)品開(kāi)發(fā)室技術(shù)經(jīng)理徐萌，百度LBS技術(shù)總監顧維灝從大數據安全、智能交通設計、中國移動(dòng)大數據領(lǐng)域應用實(shí)踐、導航地圖與定位系統應用等角度提供創(chuàng )新的思考。而來(lái)自互聯(lián)網(wǎng)和傳統行業(yè)的總裁們，就大數據對傳統行業(yè)形成的影響和沖擊，運用大數據驅動(dòng)商業(yè)模式創(chuàng )新，平衡大數據應用過(guò)程中的高投入與不易量化的產(chǎn)出等問(wèn)題，展開(kāi)了深入探討與碰撞。
資源互通，繁榮產(chǎn)業(yè)生態(tài)系統
會(huì )上正式發(fā)布的《大數據熱點(diǎn)問(wèn)題與2014年發(fā)展趨勢報告》和《中國大數據技術(shù)與產(chǎn)業(yè)發(fā)展白皮書(shū)》，代表了百余位技術(shù)專(zhuān)家在大數據典型應用現狀、大數據技術(shù)體系現狀、大數據IT產(chǎn)業(yè)鏈與生態(tài)環(huán)境、大數據人才資源、大數據發(fā)展趨勢與建議等方面的深入思考，為未來(lái)大數據產(chǎn)業(yè)發(fā)展奠定堅實(shí)的理論基礎。
除此以外，第一屆CCF大數據學(xué)術(shù)會(huì )議（CCF Big Data 2013）與第一屆中國大數據技術(shù)創(chuàng )新與創(chuàng )業(yè)大賽與BDTC 2013形成聯(lián)動(dòng)，資源互通，共同繁榮大數據產(chǎn)業(yè)生態(tài)系統。
秉承開(kāi)源與分享的精神，BDTC 2013同步公開(kāi)講師演講PPT，所有技術(shù)愛(ài)好者都可以第一時(shí)間獲得核心技術(shù)資料，分享到來(lái)自一線(xiàn)專(zhuān)家的實(shí)踐經(jīng)驗，展望大數據技術(shù)與應用更為廣闊的發(fā)展未來(lái)。作為大數據技術(shù)與應用深度結合的新起點(diǎn)，BDTC 2013已經(jīng)成為產(chǎn)業(yè)界、科技界與政府部門(mén)密切合作的新平臺，為推動(dòng)我國大數據的產(chǎn)學(xué)研用做出了重大貢獻。
歷屆大數據技術(shù)大會(huì )背景介紹：
從2008年60人規模的Hadoop in China沙龍到2012年上千人的技術(shù)大會(huì )，伴隨著(zhù)大數據技術(shù)大會(huì )的發(fā)展，歷屆大數據技術(shù)大會(huì )見(jiàn)證了中國大數據技術(shù)與應用的變革。
本次大會(huì )的前身是“Hadoop與大數據技術(shù)”大會(huì )。Hadoop高可靠、高容錯、高擴展、高效率的特性使其在同類(lèi)的分布式系統中異軍突起，并在眾多行業(yè)和科研領(lǐng)域中被廣泛采用。為了更好地發(fā)揚Hadoop的開(kāi)源精神，擴大Hadoop技術(shù)在中國的影響，促進(jìn)Hadoop技術(shù)愛(ài)好者之間的交流，中科院計算所于2008年發(fā)起并組織了第一屆Hadoop技術(shù)沙龍，并于2009年創(chuàng )建了Hadoop開(kāi)源社區（hadooper.cn），同年11月，Hadoop in China 2009大會(huì )在京成功召開(kāi)。此后，隨著(zhù)Hadoop技術(shù)越來(lái)越受到各界的青睞，Hadoop中國云計算大會(huì )也從沙龍發(fā)展成一個(gè)知名的技術(shù)會(huì )議，2011年第五屆“Hadoop中國2011云計算大會(huì )”千人共聚一堂，共話(huà)技術(shù)發(fā)展。
2012年，面對大數據所帶來(lái)的巨大挑戰與機遇，中國計算機學(xué)會(huì )于10月正式成立了大數據專(zhuān)家委員會(huì )，意在探討大數據的核心科學(xué)與技術(shù)問(wèn)題，推動(dòng)大數據學(xué)科方向的建設與發(fā)展，同時(shí)構建面向大數據產(chǎn)學(xué)研用的學(xué)術(shù)交流、技術(shù)合作與數據共享平臺。為了迎接大數據時(shí)代的到來(lái)，Hadoop中國云計算大會(huì )與CSDN大數據技術(shù)大會(huì )合并為“Hadoop與大數據技術(shù)大會(huì )”。
2013年，大數據技術(shù)與應用的發(fā)展速度一日千里。大數據，已經(jīng)超越數據本身，轉向數據的資產(chǎn)化和服務(wù)化，轉向挖掘與分析數據帶來(lái)新商業(yè)價(jià)值，轉向以技術(shù)維護國家安全利益，并為信息服務(wù)產(chǎn)業(yè)和傳統商業(yè)模式帶來(lái)了巨大的機遇與挑戰。為此，大會(huì )正式更名為“中國大數據技術(shù)大會(huì )（Big Data Technology Conference，BDTC）”。
