“華為OceanStor大數據存算分離方案”,助力聯通集團加速數字化轉型

作者:超級管理員 來源:成都華為金牌代理商 日期:2020-12-14 09:29 點擊量:11

2020年上半年,中國聯通營收1503.97億元,同比增長3.8%,并且實現了凈利潤增長10.9%的增長速度,位列三大運營商之首,同期的中國移動、中國電信的利潤幾乎與去年持平。 

這一切都離不開中國聯通持續數字化轉型的助推。2020年上半年,中國聯通斥資257.7億元,用在移動網絡、寬帶數據及基礎設計和傳送網絡建設等方面。今年7月,中國聯通基于華為OceanStor Pacific系列的大數據平臺正式上線,標志著中國聯通與華為技術有限公司在大數據計算存儲分離架構的規?;夹g創新方面取得了全面突破。 

聯通集團信息化部副總經理王志軍表示:“在數字經濟時代,數據的存儲與保護、計算與使用直接關系著客戶體驗與企業的成本、效率。每個數據都是有成本的,第一代的大數據技術是存算一體的,但10年后的今天,隨著數據的膨脹及計算需求的增大,存算一體的成本越來越高昂,存算分離成為了擺在我們面前不得不做的事情。當我們把存儲和計算分離之后,帶來了存儲的利用率和計算效率的極大提升?!?/span>

聯通數據中臺戰略對數據基礎提出新的要求 

作為中國唯一一家在紐約、香港、上海三地同時上市的電信運營企業,中國聯通已經構建了全球電信行業技術和規模雙領先的集中一體化大數據平臺,當前正在推進數據中臺戰略,期望通過數據中臺戰略的推進實現全域的數據共享,跨源跨域融合分析,快速釋放數據價值,這對數據基礎設施提出了新的要求: 

1. 靈活調度 

計算、存儲資源分別池化,統一的存儲底座和多樣的計算引擎,能夠基于業務需求快速調度,支持業務快速創新; 

2. 更低的存儲成本 

5G時代,運營商數據量預計將增長5倍以上,在當前提速降費的大環境下,需要更高效的利用存儲資源,節省CAPEX和OPEX投資; 

3. 數據共享 

數據內容越來越多樣化,為了避免數據孤島,支撐BOM三域數據融合分析,非結構化和結構化數據統一存儲已成為數據基礎設施的新標準; 

4. 數據可靠性 

數據分析能夠支撐企業提升用戶體驗,找到新的商業機會,正在從邊緣業務走向核心系統。作為其基礎設施,需能夠容忍多節點同時故障,支持亞健康檢測、故障快速修復,有效拉長維護周期,保證系統高可用的前提下,降低海量數據的維護復雜度。 

華為大數據存算分離方案——大幅降低大數據平臺建設成本,提升數據分析效率 

2019年3月,中國聯通集團信息化部數據中心與華為公司成立聯合工作組,共同推進大數據系統集約化建設和國產化技術創新。 

基于大數據存算分離技術,建立運營支撐平臺整體架構:

華為大數據存算分離方案

1. 在存儲層構建了原生HDFS能力,將存儲從服務器本地盤剝離,形成計算和存儲完全分離的方案,既滿足業務彈性擴展需求,又避免資源浪費,為統一的大數據分析平臺打下技術基礎。 

2. 在大數據存算分離方案中,采用存儲層成熟的EC技術,替代Hadoop的多副本,存儲資源利用率提升到91.6%,同樣的數據量,機柜數下降45%,大幅節省了運維成本。 

3. 存儲層采用全分布式NameNode架構,每個節點既是數據存儲節點,也是元數據管理節點,單個NameSpace能夠支撐百億文件的存儲,為大數據平臺提供堅實的數據存儲底座,海量數據統一管理,很好的支撐了集團的數據中臺戰略。 

4. 在存儲層采用多故障域技術,每個故障域都允許4個節點同時故障,上百個存儲節點集群,能夠容忍12個節點同時故障,極大的延長了維護周期。 

5. 在大數據存儲層構建了HDFS的納管功能——元數據網關,通過納管現網已經部署的HDFS,實現了應用層數據訪問的統一入口,且支持優先寫入存儲層HDFS、基于配置選擇寫入HDFS、負載均衡寫入HDFS等多種寫入策略,做到了業務無感知的平滑演進。 

基于華為OceanStor大數據存算分離方案建設的運營支撐平臺上線后,已經承載了互聯網分析、IoT、日志等系統15PB的數據量,實現了聯通各省公司2/3/4/5G xDR、網絡信令、互聯網日志、IoT等數據的接入分析,日導入數據量超過70TB。 

不僅大幅降低了采購和運維成本,在運營效率及可靠性上都得到了極大的提升。據統計,中國聯通TCO降低30%,CAPEX降低27%,節省千萬以上投資;分析效率提升20%,入庫性能提升50%,查詢性能提升8%,每年將帶來千萬以上的收入增長;存儲層通過多故障域、快速重構、亞健康檢測等技術,可靠性提升了30倍以上。

充分釋放數據價值、提升客戶體驗的同時——尊重和保護數據安全

電信領域是與公眾聯系最緊密的領域之一,電信數據的安全關系著公眾的日常生活與工作。截至2020年10月底,聯通用戶總數已達到3.09億,每一個用戶的數據安全,都是一份沉甸甸的責任。

聯通集團信息化部副總經理王志軍表示:“一方面我們要充分發揮數據的價值,讓科技給人類社會帶來更多便捷美好,同時,我們要做好數據保護,保護數據安全,保護個人的隱私。只有在數據價值的同時尊重和保護數據安全,我們的數字文明時代才是一個偉大的時代?!?/span>

展望未來,中國聯通將聚焦創業合作,發揮差異化優勢,推進渠道、網絡、IT支撐和資源配置建設,華為也將持續為中國聯通數據基礎設施創新注入動力,助力中國聯通打造存得下、流得動、管得好的數據基礎設施,釋放數據價值。

江苏7位数开奖结果 卡五星麻将最高技巧 开拓者vs公牛l录像 博格体育网-体育赛事资讯网站 江苏福彩快3现场直播 由近及远释放海南赛事 雷霆vs湖人 广东十一选五开奖历史 三肖选一肖期期准首页 福建体彩 舟山清墩游戏大厅 高手网免费预测资料 辽宁十一选五最大遗漏 宁夏十一选五购买平台 深圳风采中几个才有奖 排列三开奖官网 买青海快三的台子