業(yè)務(wù)挑戰(zhàn)
氣象工作的重要性正隨著經(jīng)濟(jì)社會(huì)發(fā)展日益凸顯，準(zhǔn)確及時(shí)地預(yù)測(cè)氣象信息依賴于海量的氣象歷史數(shù)據(jù)和實(shí)時(shí)采集數(shù)據(jù)。
- 接收高碼率衛(wèi)星數(shù)據(jù)：隨著衛(wèi)星上的探測(cè)器精度越來越高，探測(cè)器數(shù)量越來越多，衛(wèi)星碼率從之前的十多MB每秒提升到接近1GB每秒。
- 提升數(shù)據(jù)請(qǐng)求訪問速度：在已積累的數(shù)PB的衛(wèi)星數(shù)據(jù)中，僅衛(wèi)星云圖每年就被引用高達(dá)數(shù)億次。海量氣象數(shù)據(jù)分別被存儲(chǔ)在多個(gè)分級(jí)中，數(shù)據(jù)訪問請(qǐng)求的響應(yīng)時(shí)間通常超過2分鐘，部分?jǐn)?shù)據(jù)訪問響應(yīng)時(shí)間高達(dá)數(shù)小時(shí)。
解決方案
華為提供了數(shù)據(jù)管理平臺(tái)方案，對(duì)數(shù)據(jù)中心內(nèi)的存儲(chǔ)系統(tǒng)進(jìn)行扁平化處理，打破原有的數(shù)據(jù)逐級(jí)遷移模式：
- 在線緩存存儲(chǔ)系統(tǒng)使用OceanStor 9000分布式文件存儲(chǔ)，直接提供文件服務(wù)給業(yè)務(wù)分析集群，74個(gè)OceanStor 9000存儲(chǔ)節(jié)點(diǎn)共提供5PB容量，將在線數(shù)據(jù)規(guī)模從原來的10%左右提升到43%，總帶寬更是高達(dá)90GB/s，滿足每年數(shù)億次衛(wèi)星數(shù)據(jù)服務(wù)請(qǐng)求所需的性能。
- 在線存儲(chǔ)系統(tǒng)使用OceanStor 18000高端存儲(chǔ)，滿足在線數(shù)據(jù)處理所需的高IOPS。
客戶收益
在對(duì)衛(wèi)星數(shù)據(jù)存儲(chǔ)平臺(tái)進(jìn)行優(yōu)化后，國(guó)家氣象衛(wèi)星中心不僅可以輕松應(yīng)對(duì)高碼率衛(wèi)星數(shù)據(jù)接收，還大幅提升了數(shù)據(jù)請(qǐng)求的響應(yīng)速度。憑借OceanStor 9000百PB級(jí)擴(kuò)展能力，還可輕松應(yīng)對(duì)未來3~5年的數(shù)據(jù)存儲(chǔ)需求。
- OceanStor 18000用于在線生產(chǎn)系統(tǒng)，憑借最高可達(dá)300萬IOPS的卓越性能，確保快速生成各種氣象服務(wù)產(chǎn)品。
- OceanStor 9000直接提供文件服務(wù)給應(yīng)用，免除數(shù)據(jù)遷移，變近線緩存為在線緩存，數(shù)據(jù)請(qǐng)求服務(wù)響應(yīng)時(shí)間從2分鐘縮短到1秒，將溫?cái)?shù)據(jù)訪問效率提升100+倍。在保持同等TCO的情形下，大幅提升溫?cái)?shù)據(jù)的規(guī)模。
- OceanStor 9000 百PB級(jí)的橫向擴(kuò)展能力，可輕松應(yīng)對(duì)未來3~5年的快速增長(zhǎng)的數(shù)據(jù)存儲(chǔ)需求。
