8月26日,主題為“強基賦能 開啟數(shù)據(jù)新紀元”的2020(第五屆)大數(shù)據(jù)產(chǎn)業(yè)生態(tài)大會在北京舉行。
這場中國大數(shù)據(jù)產(chǎn)業(yè)最盛大、最具專業(yè)性及深度的行業(yè)聚會,成為了中國前沿的數(shù)據(jù)黑科技產(chǎn)品名副其實的大秀場,也是行業(yè)專家、企業(yè)領(lǐng)袖、知名投資人匯聚一堂,深入探討技術(shù)與產(chǎn)業(yè)發(fā)展的高端平臺。
華為云亮相大會,全面展示了其在大數(shù)據(jù)領(lǐng)域的創(chuàng)新。會上,組委會權(quán)威揭曉"2020中國大數(shù)據(jù)企業(yè)50強"榜單,華為大數(shù)據(jù)連續(xù)四年位于榜首。這也是業(yè)界對華為在大數(shù)據(jù)領(lǐng)域持續(xù)技術(shù)創(chuàng)新、實踐應(yīng)用等方面成績的再度肯定。
計算存儲分離,華為打造最優(yōu)秀的大數(shù)據(jù)存儲底座
華為海量存儲領(lǐng)域副總裁徐強在接受中國軟件網(wǎng)采訪時表示,5G、云、AI正加速行業(yè)數(shù)字化轉(zhuǎn)型,海量數(shù)據(jù)時代已來。海量數(shù)據(jù),使能企業(yè)從數(shù)據(jù)管理走向數(shù)據(jù)運營。
目前,海量數(shù)據(jù)分析面臨的三大挑戰(zhàn):一是成本高,存不下,如資源利用率低,存儲效率低,運維成本高;二是效率低,流不動,如數(shù)據(jù)難共享,分析效率低,業(yè)務(wù)上線時間長;三是自動化差,管不好,如多種類型存儲設(shè)備并存,缺少數(shù)據(jù)生命周期管理,自動化運維能力差。
徐強認為,從大數(shù)據(jù)架構(gòu)演進看計算存儲“分離”發(fā)展已成事實,計算層逐漸輕量化、容器化,與數(shù)據(jù)解耦;存儲層一方面在引入外部存儲,另一方面在嘗試EC方案,增強大數(shù)據(jù)存儲底座能力,大數(shù)據(jù)正基于計算存儲分離架構(gòu),逐步向數(shù)據(jù)湖演進。
另外,隨著近年來大數(shù)據(jù)應(yīng)用的廣泛普及,傳統(tǒng)的存算一體模式弊端逐步凸顯。比如多副本的存儲技術(shù)帶來的高昂的數(shù)據(jù)存儲成本問題,過低的存儲密度帶來的機房、功耗、制冷等運維成本居高不下問題,計算存儲緊耦合形成的數(shù)據(jù)孤島問題?;诖嫠惴蛛x架構(gòu)的大數(shù)據(jù)方案,已成為客戶的新選擇。
華為于今年5月28發(fā)布了全新一代海量數(shù)據(jù)存儲OceanStor Pacific系列,致力于打造最優(yōu)秀的大數(shù)據(jù)存儲底座,也吹響了華為打造海量存儲高端系列的沖鋒號。
在演講中,徐強展示了基于華為海量存儲OceanStor Pacific系列的大數(shù)據(jù)存算分離方案的優(yōu)勢:
?大幅降低TCO
·計算存儲分離,按需擴展,實現(xiàn)精準投資;
·采用EC方案替代Hadoop多副本的存儲模式,存儲資源利用率提升1.75倍,降低硬件采購成本;
?提升分析效率
·全分布式的NameNode架構(gòu),單NameSpace提供百億的文件存儲,提高數(shù)據(jù)管理效率;
·多協(xié)議融合,一份數(shù)據(jù)同時支持文件、大數(shù)據(jù)接口訪問,免數(shù)據(jù)遷移,縮短分析路徑,分析效率提升30%以上;
·一套存儲同時支持多廠家、多版本大數(shù)據(jù)集群,共享存儲資源,消除數(shù)據(jù)孤島,加速數(shù)據(jù)流動。
?提升可靠性
·多故障域,每個故障域均允許多節(jié)點同時故障,數(shù)據(jù)可靠性成倍提升;
·亞健康監(jiān)測,提前識別風險硬件,自動隔離,避免多點故障;
·精細化流量控制,結(jié)合快速數(shù)據(jù)重構(gòu)能力,快速恢復數(shù)據(jù)冗余機制。
基于華為OceanStor Pacific系列的大數(shù)據(jù)存算分離方案,在運營商、安平、金融、政府、互聯(lián)網(wǎng)已經(jīng)有近百個案例。在聯(lián)通集團通過部署存算分離方案,整體大數(shù)據(jù)平臺TCO下降30%以上,節(jié)省近千萬的投資;存算協(xié)同帶來分析效率提升20%以上,收入增長數(shù)千萬;引入存儲層的數(shù)據(jù)保護技術(shù),可靠性也有30倍以上的提升。