2012年11月30日-12月1日，中國IT界技術(shù)盛會——Hadoop與大數(shù)據(jù)技術(shù)大會（Hadoop&BigData Technology Conference 2012，簡稱“HBTC 2012”）在北京新云南皇冠假日酒店隆重開幕。
在移動互聯(lián)、云計算的大趨勢下，整個信息服務(wù)產(chǎn)業(yè)面臨巨大挑戰(zhàn)，通過開放技術(shù)、構(gòu)建和加入生態(tài)系統(tǒng)，打造核心技術(shù)競爭力已經(jīng)成為產(chǎn)業(yè)發(fā)展的新焦點。IT技術(shù)尤其是網(wǎng)絡(luò)技術(shù)的高速發(fā)展使得大數(shù)據(jù)已經(jīng)成為企業(yè)發(fā)展中亟待解決的首要問題。為了有效應(yīng)對大數(shù)據(jù)帶來的挑戰(zhàn)，同時充分利用大數(shù)據(jù)帶來的機遇，國內(nèi)外的產(chǎn)業(yè)界與科技界、甚至各國政府部門都在積極布局、制定戰(zhàn)略規(guī)劃。今年3月，美國政府整合6個部門宣布了2億美元的“大數(shù)據(jù)研究與發(fā)展計劃”，把對大數(shù)據(jù)的研究上升為國家意志。歐盟也有類似的舉措。
在這樣的背景下，由中國計算機學(xué)會（CCF）主辦，中國計算機學(xué)會大數(shù)據(jù)專家委員會承辦，普澤天璣、渠達傳媒和CSDN協(xié)辦的HBTC 2012在京隆重舉行。大會以“大數(shù)據(jù)共享與開放技術(shù)”為主題，設(shè)定了“Hadoop生態(tài)系統(tǒng)”、“大數(shù)據(jù)行業(yè)應(yīng)用”、“大數(shù)據(jù)共享平臺與應(yīng)用”、“NoSQL與NewSQL”以及“大數(shù)據(jù)的技術(shù)挑戰(zhàn)與發(fā)展趨勢”五個分論壇。HBTC 2012聚焦Hadoop和大數(shù)據(jù)，并特別邀請了國際著名大數(shù)據(jù)公司Hortonworks的首席技術(shù)官Eric Baldeschwieler，MemSQL 的創(chuàng)始人與首席技術(shù)官Nikita Shamgunov，美國俄亥俄州立大學(xué)計算機系主任、IEEE Fellow張曉東教授，哈爾濱工業(yè)大學(xué)的李建中教授，中科院計算所程學(xué)旗研究員，國際著名的IT研究與顧問咨詢公司Gartner張瑾，以及中國移動通信、IBM、英特爾、Teradata、VMware、Yahoo!、ebay、華為、Informatica、天云、阿里巴巴、百度、騰訊、奇虎360、網(wǎng)易、普澤天璣、精誠資訊等國內(nèi)外著名互聯(lián)網(wǎng)公司和IT企業(yè)的資深技術(shù)與研究人員到場演講并進行深入交流。
大會背景
本次大會的前身是Hadoop中國云計算大會與CSDN大數(shù)據(jù)技術(shù)大會。Hadoop高可靠、高容錯、高擴展、高效率的特性使其在同類的分布式系統(tǒng)中異軍突起，并在眾多行業(yè)和科研領(lǐng)域中被廣泛采用。為了更好地發(fā)揚Hadoop的開源精神，擴大Hadoop技術(shù)在中國的影響，促進Hadoop技術(shù)愛好者之間的交流，中科院計算所于2008年發(fā)起并組織了第一屆Hadoop技術(shù)沙龍，并于2009年創(chuàng)建了Hadoop開源社區(qū)（hadooper.cn），同年11月，Hadoop in China 2009大會在京成功召開。此后，隨著Hadoop技術(shù)越來越受到各界的青睞，Hadoop中國云計算大會也從沙龍發(fā)展成一個知名的技術(shù)會議，2011年第五屆“Hadoop中國2011云計算大會”更是達到千人技術(shù)大會的盛景。
2012年，面對大數(shù)據(jù)所帶來的巨大挑戰(zhàn)與機遇，中國計算機學(xué)會于10月正式成立了大數(shù)據(jù)專家委員會，意在探討大數(shù)據(jù)的核心科學(xué)與技術(shù)問題，推動大數(shù)據(jù)學(xué)科方向的建設(shè)與發(fā)展，同時構(gòu)建面向大數(shù)據(jù)產(chǎn)學(xué)研用的學(xué)術(shù)交流、技術(shù)合作與數(shù)據(jù)共享平臺。為了迎接大數(shù)據(jù)時代的到來，Hadoop中國云計算大會與CSDN大數(shù)據(jù)技術(shù)大會合并，名稱正式調(diào)整為“Hadoop與大數(shù)據(jù)技術(shù)大會”。
主題豐富 激揚技術(shù)與趨勢
作為已成功舉辦了多屆的技術(shù)會議，HBTC 2012匯聚了業(yè)內(nèi)精華，講師陣容強大，主題豐富多彩，講題精準(zhǔn)有序，更加突出實踐與經(jīng)驗分享。
第一天為主會場演講，匯聚十余位重磅講師，激揚技術(shù)與趨勢。其中，Hortonworks的首席技術(shù)官Eric Baldeschwieler曾是Inktomi公司W(wǎng)eb服務(wù)引擎的技術(shù)領(lǐng)導(dǎo)者，雅虎Web搜索總設(shè)計師，雅虎Apache Hadoop項目的負責(zé)人，曾將20個節(jié)點的原型系統(tǒng)發(fā)展為42000個節(jié)點。他將重點分享“Hadoop的現(xiàn)在與未來”。MemSQL CTO&聯(lián)合創(chuàng)始人 Nikita Shamgunov擁有計算機科學(xué)本科、碩士和博士學(xué)位，是世界ACM編程競賽的冠軍。在創(chuàng)建MemSQL之前， Nikita曾在微軟公司擁有6年的SQL Server高級數(shù)據(jù)庫工程師的工作經(jīng)驗，是多項專利的所有者。他將針對MemSQL在大數(shù)據(jù)中的作用、適用范圍和案例做純技術(shù)層面的經(jīng)驗分享。
CCF大數(shù)據(jù)專家委員會副主任李建中教授和CCF大數(shù)據(jù)專家委員會秘書長程學(xué)旗研究員將分別就“大數(shù)據(jù)計算”和“大數(shù)據(jù)的熱點問題與發(fā)展趨勢”做主題演講，深入揭示大數(shù)據(jù)計算的基本概念、重點研究問題和解決方案，以及大數(shù)據(jù)研究與應(yīng)用中的熱點問題與產(chǎn)業(yè)趨勢。作為長期專注研究高性能計算以及分布式系統(tǒng)，包括數(shù)據(jù)管理以及系統(tǒng)擴展方面的專家，俄亥俄州立大學(xué)計算機科學(xué)與工程系主任、IEEE Fellow張曉東教授將在演講中闡述并行處理在大數(shù)據(jù)分析中所面對的挑戰(zhàn)。中國移動通信研究院云計算研究所所長孫少陵將就中國移動“大云”應(yīng)用Hadoop技術(shù)應(yīng)用和實踐經(jīng)驗做深入分享。除此以外，還有來自Teradata、IBM、華為、VMware、英特爾、Yahoo!的技術(shù)團隊負責(zé)人的純技術(shù)性的分享與實踐。
技術(shù)論壇 聚焦應(yīng)用和實踐
第二天分為五個分論壇：“Hadoop生態(tài)系統(tǒng)”、“大數(shù)據(jù)行業(yè)應(yīng)用”、“大數(shù)據(jù)共享平臺與應(yīng)用”、“NOSQL與NewSQL”以及“大數(shù)據(jù)的技術(shù)挑戰(zhàn)與發(fā)展趨勢”，國內(nèi)外數(shù)十位Hadoop及大數(shù)據(jù)技術(shù)應(yīng)用的產(chǎn)學(xué)界人士和實踐企業(yè)代表將探討大數(shù)據(jù)技術(shù)生態(tài)系統(tǒng)的現(xiàn)狀和發(fā)展趨勢，并圍繞Hadoop與大數(shù)據(jù)熱點技術(shù)和應(yīng)用實踐進行深入解析和經(jīng)驗分享。
“Hadoop生態(tài)系統(tǒng)”匯聚業(yè)內(nèi)騰訊、華為、普澤天璣、Facebook、阿里巴巴、VMware、Hortonworks、中國移動研究院等一線專家，重在研討技術(shù)問題與解決方案，分享優(yōu)化方法與實踐經(jīng)驗。其中，F(xiàn)acebook分布式系統(tǒng)專家，曾任職于微軟軟件開發(fā)部門，現(xiàn)是Facebook軟件工程師Siying Dong將就“ Facebook開發(fā)HDFS和HBase的新進展”做經(jīng)驗分享。騰訊趙偉側(cè)重分享“HIVE在騰訊分布式數(shù)據(jù)倉庫”的實踐，淘寶王琤詳細介紹了“Hadoop Namenode性能診斷及優(yōu)化”的方法，Hortonworks核心技術(shù)人員戴建勇的“Apache Pig的性能優(yōu)化”以及阿里巴巴高級研發(fā)工程師梁李印的“阿里Hadoop集群架構(gòu)及服務(wù)體系”從不同層面深入探討互聯(lián)網(wǎng)行業(yè)的Hadoop應(yīng)用實踐。中國移動研究院的“HBase Coprocessor優(yōu)化與實驗”，IBM的“BigInsights高級分析技術(shù)”與華為的“HDFS Name Node High Availability”則更多地展示應(yīng)用優(yōu)化和技術(shù)趨勢。
“大數(shù)據(jù)行業(yè)應(yīng)用”意在探討Hadoop發(fā)展前景，分享實戰(zhàn)成果。其中，IDG資本副總裁?？鈱⒕?ldquo;大數(shù)據(jù)商業(yè)模式”進行探討；阿里代志遠分享“海量數(shù)據(jù)分布式數(shù)據(jù)庫的探索：Wasp”的技術(shù)細節(jié)；中國移動研究院云計算研究員鄧超關(guān)注“The Advance and Applications of Big Cloud based Parallel Data Mining Platform in CMRI”；Carbonite China技術(shù)總監(jiān)兼高級架構(gòu)師盧億雷將分享“Hadoop在網(wǎng)盤和在線備份的應(yīng)用與挑戰(zhàn)”，網(wǎng)易高級經(jīng)理蔡迎東的“大型內(nèi)容推薦系統(tǒng)實踐”與奇虎360系統(tǒng)部工程師趙健博的“Hbase系統(tǒng)在搜索網(wǎng)頁庫的應(yīng)用”，普澤天璣劉佳的“HBase用例分析”，VMware堵俊平的“Hadoop Virtualization Extensions”，IBM中國研發(fā)中心首席架構(gòu)師陳奇的“大數(shù)據(jù)時間之旅”會從分別從不同層面進行各自的實戰(zhàn)分享。
“大數(shù)據(jù)共享平臺與應(yīng)用”關(guān)注的是平臺技術(shù)與大數(shù)據(jù)應(yīng)用。其中，中國移動研究院齊驥重點分享“大云數(shù)據(jù)倉庫在移動互聯(lián)網(wǎng)領(lǐng)域”的最新實踐，精誠資訊陳昭宇，京東商城架構(gòu)師李松林，英特爾中國研究主任研究員楊棟，阿里巴巴集團數(shù)據(jù)交換平臺資深專家強琦，Informatica核心技術(shù)部資深產(chǎn)品管理總監(jiān)鄭瑋以及網(wǎng)易顧費勇，百度基礎(chǔ)架構(gòu)部數(shù)據(jù)平臺技術(shù)經(jīng)理劉立萍會為開發(fā)者描述行業(yè)中不同的應(yīng)用場景，揭示行業(yè)中的技術(shù)應(yīng)用現(xiàn)狀。
“NoSQL和NewSQL”主題論壇圍繞數(shù)據(jù)庫技術(shù)進行專業(yè)研討。作為Apache HBase的PMC 32名成員之一，擁有14年軟件開發(fā)經(jīng)驗及兩年以上HBase開發(fā)經(jīng)驗的Ted Yu會就“Hbase For Enterprise”做深入分享。而甲骨文亞太研發(fā)中心研發(fā)經(jīng)理黃超，阿里王玉法和華為高級技術(shù)經(jīng)理Anoop Sam John會就不同技術(shù)做深度剖析，分享技術(shù)開發(fā)者最為關(guān)注的數(shù)據(jù)庫應(yīng)用經(jīng)驗。
“大數(shù)據(jù)的技術(shù)挑戰(zhàn)與發(fā)展趨勢”邀請了清華大學(xué)教授朱文武，華東師范大學(xué)教授周傲英，南京大學(xué)教授黃宜華，啟明星辰公司副總裁、首席戰(zhàn)略官潘柱廷，北京天云融創(chuàng)科技有限公司副總裁雷濤，百分點創(chuàng)始人柏林森，北京西普在線軟件有限公司總經(jīng)理齊紅威和SAS軟件研究開發(fā)（北京）有限公司總經(jīng)理劉政，他們會從大數(shù)據(jù)的安全、共享、高性能分析以及大數(shù)據(jù)的民主化與社交媒體計算等諸多不同側(cè)面來闡述大數(shù)據(jù)所面臨的技術(shù)挑戰(zhàn)，展望大數(shù)據(jù)的技術(shù)發(fā)展趨勢。
開源與分享
秉承開源與分享的精神，HBTC 2012還將同步公開講師演講PPT，所有技術(shù)愛好者都可以與1000余名開發(fā)者一起第一時間獲得核心技術(shù)資料，分享到來自一線專家的實踐經(jīng)驗，展望Hadoop和大數(shù)據(jù)璀璨的發(fā)展未來。
我們期望本次大會能夠成為Hadoop技術(shù)與大數(shù)據(jù)應(yīng)用深度結(jié)合的新起點，成為產(chǎn)業(yè)界、科技界與政府部門密切合作的新平臺，最終為推動我國大數(shù)據(jù)的產(chǎn)學(xué)研用作出重大貢獻。