北京2014年12月15日電 /美通社/ -- 2014年12月12-14日,作為大數據領域最具影響、規(guī)模最大的 IT 盛會 -- 2014中國大數據技術大會暨第二屆 CCF 大數據學術會議在北京新云南皇冠假日酒店圓滿落幕。大會歷時三天,以國際化的視野,分享了海內外大數據技術的發(fā)展趨勢;從技術與實踐角度探討“大數據生態(tài)系統(tǒng)”、“大數據技術”、“大數據應用”、“大數據基礎設施 ”等新技術應用和實踐經驗;通過創(chuàng)新大賽和培訓課程等特色活動,解密大數據創(chuàng)業(yè)熱點,分享行業(yè)實戰(zhàn)經驗。2014中國大數據技術大會已經成為大數據技術與應用深度結合的新起點,產業(yè)界、科技界與政府部門密切合作的新平臺,為推動我國大數據的產學研用做出了重大貢獻。
2014中國大數據技術大會 (Big Data Technology Conference 2014, BDTC 2014) 大會由中國計算機學會 (CCF) 主辦,CCF 大數據專家委員會承辦,中科院計算所與 CSDN 共同協辦,以推進大數據科研、應用與產業(yè)發(fā)展為主旨。同時,由中國計算機學會主辦,CCF 大數據專家委員會承辦,南京大學與復旦大學協辦的“2014年第二屆 CCF 大數據學術會議”同時召開,并與技術大會共享主題報告。
為了更好地討論大數據技術生態(tài)系統(tǒng)的現狀和發(fā)展趨勢,交流大數據技術實踐經驗,進一步推進大數據技術創(chuàng)新與應用,展示國內外大數據領域的最新成果,BDTC 2014特邀近百位來自全球大數據產業(yè)界知名學者、企業(yè)領軍人物、行業(yè)資深專家、一線實踐技術代表,內容涵蓋 Hadoop、YARN、Spark、Tez、HBase、Kafka、OceanBase 等開源軟件的最新進展,NoSQL/NewSQL、內存計算、流計算和圖計算技術的發(fā)展趨勢,OpenStack 生態(tài)系統(tǒng)對于大數據計算需求的思考,以及大數據下的可視化、機器學習/深度學習、商業(yè)智能、數據分析等的最新業(yè)界應用。
作為中國大數據領域最具價值的 IT 盛會,歷經七屆沉淀,中國大數據技術大會已經成為中國最具影響、規(guī)模最大、參會者人數最多的大數據領域技術盛會。第八屆中國大數據技術大會對于產業(yè)的發(fā)展與推進有著重要意義。
大數據引發(fā)工業(yè)革命
近年來,國內外互聯網公司和傳統(tǒng)企業(yè)大都已經意識到數據資產化和規(guī)模化帶來的潛在價值,如何低成本且高效率地存儲和處理數百 TB 乃至 EB 量級的數據成為極大挑戰(zhàn)。“向數據要價值”使得幾乎每個行業(yè)都面臨著大數據問題。“大數據”引發(fā)了新一輪 IT“工業(yè)革命”。
2014年,大數據技術已經在互聯網、運營商、IT 服務提供商,以及眾多傳統(tǒng)企業(yè)中落地實踐。在全體大會主題演講環(huán)節(jié),海內外頂級專家學者深入探討了大數據技術生態(tài)系統(tǒng)的現狀和發(fā)展趨勢和落地實踐經驗。
其中,Hadoop 之父、Cloudera 首席架構師 Doug Cutting 的“The Data Revolution”主題演講分享了新時代的數據革命;AWS 大數據和高性能計算框架全球高級經理 Ben Butler、IBM 大中華區(qū)系統(tǒng)與科技事業(yè)部杰出工程師李永輝、卡內基梅隆大學計算機科學系教授 Zhang Hui、University of Delaware 電子與計算機工程系教授、計算機系統(tǒng)結構和并行系統(tǒng)實驗室主任高光榮、卡耐基梅隆大學教授、ICML2014程序主席Eric P. Xing、Conviva 聯合創(chuàng)始人兼 CEO、Huawei EU Research Center 研發(fā)架構首席架構師 Sabri SKHIRI、HBase 核心貢獻者 Ted Yu 帶來了國際最新技術思想和實踐經驗。
百度研究院副院長、深度學習實驗室主任、圖片搜索部高級總監(jiān)余凱分享“大數據人工智能”;星環(huán)科技 CTO 孫元浩解密“2015年大數據基礎技術的演進趨勢”;浪潮集團高級副總裁王恩東講述“大數據開啟行業(yè)化應用新浪潮”;中國移動蘇州研發(fā)中心大數據產品部總經理錢嶺剖析“電信運營商大數據商務模式研究 ”,則深入談論大數據生態(tài)系統(tǒng)的現狀和發(fā)展趨勢,分享了主流實踐技術經驗。
百家企業(yè)分享大數據實戰(zhàn)經驗
圍繞“大數據生態(tài)系統(tǒng)、大數據技術、大數據應用、大數據基礎設施”四大技術分論壇,來自 Hadoop PMC、OpenStack 基金會、Databricks、LinkedIn、Intel、eBay、Dropbox、VMWare、DELL、希捷、阿里巴巴、騰訊、百度、中國移動、華為、浪潮、搜狐、網易、攜程、高德、沃爾瑪、亞信等海內外一線 IT 公司的近百位工程師精英,從現實出發(fā)徹底剖析大數據技術實踐中的問題和解決方案。
大數據生態(tài)系統(tǒng)繪制發(fā)展圖譜。匯聚 Databricks、美國俄亥俄州立大學、華為、Hadoop/Tez PMC、Intel、OpenStack 基金會、中國移動、LinkedIn、阿里巴巴等十余個機構的一線專家,研討如今大數據生態(tài)領域的熱門技術和實踐。其中,論壇上午,Databricks 軟件工程師、Apache Spark PMC 成員孟祥瑞分享了“Apache Spark and Databricks Cloud”;美國俄亥俄州立大學計算機科學與工程系 Senior Research Associate 魯小億就“在現代集群上使用 RDMA 加速大數據處理”做了經驗分享;華為 Universe 大數據平臺架構師徐健鵬講述了“基于 DAG 引擎的流式 ETL”的實踐經驗; Apache Hadoop 和 Tez 項目 PMC 成員 Bikas Saha 帶來了名為“Apache Tez-A Framework to Model and Build Hadoop Data Processing Applications”的技術演講;Intel Senior Software Engineer、Apache Hadoop Committer、Apache Hadoop PMC Member Uma Maheswara Rao G 與 Intel Senior Software Engineer、Apache Hadoop Committer Yi Liu 共同完成了技術演講“Apache Hadoop 中的擴展屬性和透明加密”。論壇下午,OpenStack 基金會董事杜玉杰、中國移動集團公司業(yè)務支撐系統(tǒng)部項目經理何鴻凌、LinkedIn 軟件工程師王國璋、柏睿數據科技有限公司董事長兼 CTO 劉睿民、阿里巴巴資深技術專家蔣志勇、云人科技聯合創(chuàng)始人兼 CEO 吳朱華等六位專家則會就 OpenStack、數據庫、分布式消息系統(tǒng)、內存技術等多個領域的進行深入技術分享。
大數據技術分享實戰(zhàn)成果。搜狐移動研發(fā)部經理劉佳的“基于全網內容的新聞客戶端推薦系統(tǒng)”,前通聯數據首席戰(zhàn)略官龍白滔的“金融投資大數據實踐分享”;VMware 高級產品線經理董波的“VMware 為大數據應用鋪平道路”;亞信科技大數據事業(yè)部數據資產管理部門產品總監(jiān)高偉的“數據資產管理 -- 大數據時代的掘金術”從不同維度展示大數據技術應用方向。網易 NTSE/TNT 引擎負責人胡煒的“網易數據庫壓縮技術 ”;英特爾大數據首席架構師戴金權的“基于 Spark 軟件棧的下一代大數據分析”;VMware 資深業(yè)務解決方案架構師介文清的“12306:改變傳統(tǒng)思路解決問題的 NoSQL 實踐”;Admaster 技術副總裁盧億雷的“Hadoop 在廣告監(jiān)測技術的實踐”;阿里巴巴數據平臺事業(yè)部 ODPS 技術專家徐冬的“ODPS MapReduce 對外開放實踐”;攜程資深軟件工程師廖曉格的“讓大數據更實時和可視化”;品友互動聯合創(chuàng)始人兼 CTO 沈學華的“DSP 基于數據的實時競價優(yōu)化”則在技術細節(jié)方面更加突出實戰(zhàn)處理。
大數據應用聚焦行業(yè)落地。華盛頓大學終身教授、中國聯通研究院大數據/云計算首席科學家陳一昕,Co-Create of Apache Kylin、eBay 高級產品經理韓卿,中國移動蘇州研發(fā)中心大數據項目總監(jiān)徐萌,百度研究院大數據實驗室數據科學家沈志勇,騰訊數據平臺部精準推薦中心深度學習方向負責人鄒永強,大會程序主席、Dropbox 研發(fā)經理邵錚,騰訊廣點通高級研究員靳志輝,沃爾瑪實驗室核心數據科學家 Zhu Tao,螞蟻金服大安全安全智能部總監(jiān)/資深數據專家,CCF 大數據專家委員會委員陳繼東,宜信大數據創(chuàng)新中心研發(fā)總監(jiān)鄭華,高德軟件有限公司數據架構師周琦等十一位技術專家攜手帶來一場大數據應用的盛宴。
大數據基礎設施實現架構融合。為了覆蓋大數據全產業(yè)鏈,本屆大會首次增設了“大數據基礎設施”分論壇,從硬件視角出發(fā)探討大數據的存儲、處理和軟硬件融合技術。其中,浪潮集團副總裁胡雷鈞從數據中心層面講解了新時代的資源保障體系;Mellanox 亞太區(qū)市場開發(fā)總監(jiān)劉通,武漢綠色網絡信息服務有限責任公司副總經理雷葆華,博科中國區(qū)技術總監(jiān)谷增云從網絡層次著手對大數據時代基礎設施進行了分析;希捷資深架構師郝繼玖,Memblaze 技術顧問劉愛在存儲方面做了相關分享;而百度基礎架構部高級架構師柴華,北京卓越訊通科技有限公司 CEO 賴兆紅,DELL 資深解決方案經理尹玉峰,阿里巴巴資深技術專家強琦,亞信大數據平臺研發(fā)部經理田毅,AMD 中國研究院研究員谷俊麗則帶大家暢游了大數據平臺打造之道。
除此以外,還有“全國大數據創(chuàng)新項目評選”活動脫穎而出的8家大數據初創(chuàng)企業(yè)的成果展示;“第二屆中國大數據技術創(chuàng)新大賽”中獲獎隊伍的深入技術分享;以及幫助企業(yè)快速實現“基于大數據的個性化系統(tǒng)構建及其核心技術”的實戰(zhàn)培訓。
2015大數據發(fā)展趨勢引領技術變革
2014年,在眾多實踐企業(yè)的推動下,大數據生態(tài)系統(tǒng)得到了飛速發(fā)展,各種技術在“應用為王”的大前提下飛速迭代,數據真正轉化為高價值。而高速發(fā)展的背后,是技術架構的巨大改變。要以更低成本實現數據的最佳利用,企業(yè)需要緊隨技術變革,把握趨勢,才能更好地迎接挑戰(zhàn)。
大會現場正式發(fā)布的《中國大數據技術與產業(yè)發(fā)展白皮書(2014)》和《2015大數據十大發(fā)展趨勢預測》,代表了百余位業(yè)內專家在大數據典型應用現狀、大數據技術體系現狀、大數據 IT 產業(yè)鏈與生態(tài)環(huán)境、大數據人才資源、大數據發(fā)展趨勢與建議等方面的深入思考,為未來大數據產業(yè)發(fā)展奠定堅實的理論基礎,為企業(yè)制定大數據戰(zhàn)略規(guī)劃提供了極具價值的參考建議。
2014大數據應用現狀和技術體系現狀。大數據作為一種賦能性技術,如同電一樣,作用于經濟社會的各個層面。任何一種技術的應用都要經歷從簡到繁,由淺入深的過程,大數據的應用路徑仍然遵從這一發(fā)展路徑。數十億用戶每日在互聯網上的處處留痕、時時留跡,使得其在網絡空間的畫像活動日益豐滿,從而其需求很容易被準確洞察,精準營銷仍為大數據最具產業(yè)規(guī)模的領域。圍繞大數據精準營銷產業(yè)鏈,互聯網、金融、電信、新媒體等領域的大數據技術產品創(chuàng)新此起彼伏,應用廣度不斷拓寬,深度不斷加強。同時,電網、交通、醫(yī)衛(wèi)、地信、政府、農業(yè)領域的大數據應用也明顯提速。結合大數據典型應用與案例,不難發(fā)現,大數據技術能夠將大規(guī)模數據中隱藏的信息和知識挖掘出來,為人類社會經濟活動提供依據,提高各個領域的運行效率,甚至整個社會經濟的集約化程度。目前,大數據領域每年都會涌現出了大量新的技術,成為大數據獲取、存儲、處理分析或者可視化的有效手段;相關的平臺和工具也越來越多,給業(yè)界提供了更多的選擇,未來還會繼續(xù)出現新的技術和工具。由 CCF 大數據專家委員會和中關村大數據產業(yè)聯盟聯合主編的《中國大數據技術與產業(yè)發(fā)展白皮書(2014)》將詳細解讀各種大數據技術的最新發(fā)展和動態(tài)。
2015技術挑戰(zhàn)和技術發(fā)展趨勢預測。CCF 大數據專家委員會每年都面向全體委員進行年度趨勢預測調研。希望通過對于大數據發(fā)展趨勢的年度預測,將最受關注的科學、技術、產業(yè)、應用、政策等相關變化趨勢發(fā)掘出來,以便大數據領域相關的各界人士能夠從中獲得啟迪,或順勢而為,或依勢而起,或引領潮頭。《2015大數據十大發(fā)展趨勢預測》將候選項分為大數據科學、大數據技術、大數據系統(tǒng)和工程、大數據應用、數據資源、產業(yè)生態(tài)環(huán)境等共6個不同方面,總計54個候選項。最后根據投票數,選出10個主要的發(fā)展趨勢:大數據與人工智能的融合、跨學科領域交叉的數據分析應用、數據科學帶動多學科融合、深度學習成為大數據智能分析的核心技術、利用大數據構建大規(guī)模、有序化開放式的知識體系、大數據的安全持續(xù)令人擔憂、開源繼續(xù)成為大數據技術的主流、大數據與云計算、移動互聯網等的綜合應用、大數據提升政府治理能力、數據資源化、私有化、商品化成為持續(xù)的趨勢、大數據技術課程體系建設和人才培養(yǎng)快速發(fā)展。
2014中國大數據技術大會,百余場主題演講、技術論壇和專業(yè)培訓,數千名業(yè)內人士與會齊聚的深度實踐之旅。作為大數據技術與應用深度結合的新起點,BDTC 2014已經成為產業(yè)界、科技界與政府部門密切合作的新平臺,為推動我國大數據的產學研用做出了重大貢獻。