- 熱點(diǎn)文章
-
- 09-14關(guān)于高等職業(yè)院校弱電專(zhuān)業(yè)教改的探索
- 11-28東芝將在2009年CES帶來(lái)新水平的前沿技術(shù)
- 11-28互聯(lián)網(wǎng):世界的鏡子
- 11-28中美文化論壇研討數(shù)字技術(shù)保護(hù)文化
- 11-28淺析“三鹿集團(tuán)奶粉事件”危機(jī)根源
- 11-28新媒體的發(fā)展及其教育創(chuàng)新應(yīng)用研究
- 11-28樓宇信息系統(tǒng)的現(xiàn)狀與應(yīng)用以及發(fā)展趨勢(shì)
- 11-28中國(guó)2009世界郵展60城市巡郵漯河站啟動(dòng)
- 11-28打造煥發(fā)生命活力的教育時(shí)空
- 11-28觀察中國(guó)管理教育30年
- 11-28駕馭論:科學(xué)發(fā)展的新智囊
- 11-28軟著陸將解讀中國(guó)管理國(guó)際化新走勢(shì)
- 11-28創(chuàng)建中國(guó)水電國(guó)際化強(qiáng)勢(shì)品牌
- 11-28管理科學(xué)進(jìn)入新觀察時(shí)代
- 11-28全球化傳播語(yǔ)境下的家國(guó)建構(gòu)
- 11-28網(wǎng)絡(luò)民主對(duì)公民社會(huì)建設(shè)的影響研究
- 11-28奧運(yùn)后中國(guó)酒店業(yè)的發(fā)展分析
- 11-28國(guó)家創(chuàng)新系統(tǒng)下的大學(xué)科研管理研究
- 11-28高校數(shù)字圖書(shū)館建設(shè)及服務(wù)模式探討
- 11-28非均衡理論及我國(guó)房地產(chǎn)市場(chǎng)供求
- 11-28綠色、安全和通訊是汽車(chē)電子的未來(lái)
- 11-28敦煌莫高窟將為游客建"數(shù)字洞窟"
- 11-28思科新軟件平臺(tái)幫媒體公司建社交網(wǎng)絡(luò)
- 11-28蘋(píng)果喬布斯:用13年給IT業(yè)洗一次腦
- 11-28海外傳真:2008年數(shù)字印刷市場(chǎng)回顧
- 11-28東芝將在2009年CES帶來(lái)新水平的前沿技術(shù)
- 11-28互聯(lián)網(wǎng):世界的鏡子
- 11-28中美文化論壇研討數(shù)字技術(shù)保護(hù)文化
- 11-28故宮國(guó)圖面臨“數(shù)字化”難題 缺乏專(zhuān)門(mén)人才
省級(jí)氣象基礎(chǔ)資源池需求分析與對(duì)策研究
2024-01-05 15:31:00 來(lái)源:優(yōu)秀文章
摘?要:基礎(chǔ)設(shè)施資源池是氣象大數(shù)據(jù)的支撐系統(tǒng),以“專(zhuān)有云+公共云”的混合云資源模式為氣象大數(shù)據(jù)提供計(jì)算、存儲(chǔ)資源以及中間件等基礎(chǔ)軟件資源。從基礎(chǔ)池的計(jì)算特征入手,根據(jù)具體系統(tǒng)計(jì)算能力,詳細(xì)調(diào)研基礎(chǔ)設(shè)施資源池的服務(wù)器部署設(shè)計(jì)、網(wǎng)絡(luò)設(shè)計(jì)和存儲(chǔ)設(shè)計(jì),并對(duì)現(xiàn)有存儲(chǔ)磁盤(pán)、存儲(chǔ)網(wǎng)絡(luò)選型進(jìn)行深入分析,深刻思考在后續(xù)存儲(chǔ)發(fā)展中如何預(yù)留空間、如何考慮容量擴(kuò)充等,并且從運(yùn)維角度,考慮資源池的自動(dòng)化設(shè)計(jì)以及自愈設(shè)計(jì)和完善,給整個(gè)業(yè)務(wù)能力和科研能力發(fā)展提供針對(duì)性的建議。
關(guān)鍵詞:基礎(chǔ)資源池;虛擬化技術(shù);集中式存儲(chǔ);分布式存儲(chǔ)
中圖分類(lèi)號(hào):P409 文獻(xiàn)標(biāo)識(shí)碼:A 文章編號(hào):1671-2064(2023)17-0065-05
0引言
隨著氣象現(xiàn)代化快速發(fā)展的需求,氣象信息系統(tǒng)對(duì)氣象現(xiàn)代化的基礎(chǔ)支撐作用越來(lái)越顯著。在中國(guó)氣象局《全國(guó)氣象現(xiàn)代化發(fā)展綱要(2015-2030)》中對(duì)氣象信息網(wǎng)絡(luò)系統(tǒng)建設(shè)提出了更高的要求,該綱要?dú)庀笮畔⑾到y(tǒng)主要按照“優(yōu)化調(diào)整信息業(yè)務(wù)流程,實(shí)現(xiàn)數(shù)據(jù)流程簡(jiǎn)約化,提供信息基礎(chǔ)資源、數(shù)據(jù)資源和系統(tǒng)軟件資源的統(tǒng)一服務(wù),構(gòu)建集約化、扁平化的氣象業(yè)務(wù)體系基礎(chǔ)”的方向發(fā)展。
隨著氣象現(xiàn)代化進(jìn)程的不斷推進(jìn)和氣象觀測(cè)預(yù)報(bào)預(yù)測(cè)業(yè)務(wù)能力的不斷提高,氣象業(yè)務(wù)獲得快速發(fā)展,信息處理能力逐年提高,對(duì)服務(wù)器資源的需求也逐漸增大。氣象業(yè)務(wù)系統(tǒng)一般均為7×24小時(shí)運(yùn)行,傳統(tǒng)的業(yè)務(wù)部署方式是增加一項(xiàng)業(yè)務(wù)就配備一臺(tái)或多臺(tái)服務(wù)器,往往會(huì)造成服務(wù)器資源利用率低、管理開(kāi)銷(xiāo)大、耗電量大、運(yùn)維成本高等問(wèn)題,已經(jīng)無(wú)法滿足海量業(yè)務(wù)數(shù)據(jù)存儲(chǔ)以及氣象資料分析處理加工的需求。按照信息化、集約化、標(biāo)準(zhǔn)化的理念和方式推動(dòng)氣象業(yè)務(wù)現(xiàn)代化,進(jìn)行省級(jí)基礎(chǔ)設(shè)施資源池建設(shè)。基礎(chǔ)設(shè)施資源池是由虛擬化、分布式計(jì)算等技術(shù)構(gòu)建的IT虛擬資源和物理資源的集合,主要滿足不同業(yè)務(wù)應(yīng)用對(duì)基礎(chǔ)設(shè)施資源的需求[1-4]。
上海市氣象局基礎(chǔ)設(shè)施資源池由虛擬化計(jì)算、集中式存儲(chǔ)、分布式存儲(chǔ)3部分組成。其中,虛擬化計(jì)算由虛擬化軟件層(Vmware)構(gòu)建管理;分布式存儲(chǔ)由各種分布式計(jì)算系統(tǒng)和云數(shù)據(jù)庫(kù)構(gòu)建及調(diào)度運(yùn)行;集中式存儲(chǔ)則構(gòu)建一個(gè)全局共享存儲(chǔ)空間;基礎(chǔ)設(shè)施資源池云平臺(tái)實(shí)現(xiàn)3類(lèi)資源的管理調(diào)度及服務(wù),同時(shí)在規(guī)劃中充分考慮異構(gòu)平臺(tái)上業(yè)務(wù)的快速恢復(fù)、重建和遷移。
1現(xiàn)狀及存在問(wèn)題
1.1建設(shè)情況
2014年:開(kāi)展試驗(yàn),初步建立虛擬化資源池(如圖1所示),并在業(yè)務(wù)中投入應(yīng)用測(cè)試。第一套資源池系統(tǒng)建于2014年,包含28把IBMx240刀片,處理器為6核心志強(qiáng)E5-2620,總核心為336,總內(nèi)存為1848GB,總存儲(chǔ)容量200TB。
2017年:擴(kuò)充虛擬化平臺(tái)能力,應(yīng)用用戶擴(kuò)展到其他業(yè)務(wù)單位,拓展資源池類(lèi)型,由單一資源池?cái)U(kuò)展為分類(lèi)資源池,規(guī)劃建設(shè)集中式存儲(chǔ)和分布式存儲(chǔ)(如圖2所示)。第二套資源池系統(tǒng)于2017年建立,包括32把H3C的B390刀片,處理器為10核心志強(qiáng)E5-2630,總核心為640,總內(nèi)存為3.94TB,總存儲(chǔ)容量334TB。
2018年:依托《上海市現(xiàn)代氣象探測(cè)和影響預(yù)報(bào)系統(tǒng)》項(xiàng)目進(jìn)一步擴(kuò)建,軟件采用中科睿光CloudVirtual(40個(gè)CPU授權(quán)),硬件為華為刀片服務(wù)器E9000(20臺(tái)刀片,每臺(tái)刀片服務(wù)器配置為2顆Intel 志強(qiáng)金牌6132CPU,14核心,256G DDR4內(nèi)存)和一套華為OceanStor18500存儲(chǔ),存儲(chǔ)配置232T裸容量(如圖3所示)。
2022年:氣象信息系統(tǒng)集約化管理實(shí)施以后,氣象信息系統(tǒng)的計(jì)算和存儲(chǔ)資源統(tǒng)一由基礎(chǔ)設(shè)施云平臺(tái)提供,2022年的系統(tǒng)入云截至11月底累計(jì)29個(gè)。依托信息化系統(tǒng)工程項(xiàng)目建設(shè),分布式存儲(chǔ)支出60T,支出254個(gè)CPU、748GB內(nèi)存、29756GB存儲(chǔ)資源,已經(jīng)完成分布式存儲(chǔ)容量提升1.24PB,達(dá)到2.5PB。
圖1 整體架構(gòu)設(shè)計(jì)
圖2 支撐平臺(tái)技術(shù)架構(gòu)
圖3 存儲(chǔ)部署架構(gòu)圖
1.2基礎(chǔ)資源池現(xiàn)狀
分布式存儲(chǔ):上海市氣象局分布式存儲(chǔ)資源池容量將達(dá)到4.6PB,截至目前使用容量達(dá)到559T,使用率為22%(如圖4所示)。
圖4 華為分布式存儲(chǔ)
集中式存儲(chǔ):局資源池集中式存儲(chǔ)已用容量為399.89TB,總?cè)萘繛?71.17TB,使用率為70%,目前局資源池集中式存儲(chǔ)容量已經(jīng)達(dá)到告警閾值。
虛擬化資源池:虛擬化資源池共5個(gè)集群、89個(gè)物理節(jié)點(diǎn),總CPU核心數(shù)1836,內(nèi)存總14.35TB,存儲(chǔ)總?cè)萘?031.83TB,虛擬機(jī)達(dá)到812臺(tái)。各類(lèi)資源使用率均到達(dá)60%以上,其中內(nèi)存使用率高達(dá)80%以上。為各職能處室、直屬單位和區(qū)氣象局的氣象信息系統(tǒng)提供信息基礎(chǔ)資源,同時(shí)對(duì)上述多套資源池管理平臺(tái)進(jìn)行優(yōu)化,實(shí)現(xiàn)統(tǒng)一管理、統(tǒng)一資源調(diào)度和統(tǒng)一監(jiān)視,不斷提高信息基礎(chǔ)設(shè)施資源的整體利用率。
按照氣象信息化系統(tǒng)工程項(xiàng)目綜合業(yè)務(wù)監(jiān)控與運(yùn)維系統(tǒng)建設(shè)內(nèi)容,2022年完成基礎(chǔ)設(shè)施資源池的對(duì)接監(jiān)控(如圖5所示),實(shí)現(xiàn)基于天鏡的眾創(chuàng)平臺(tái),根據(jù)Vcenter Server采集Vmware資源池信息,對(duì)各集群、主機(jī)、虛擬機(jī)分配與使用情況進(jìn)行監(jiān)視展示,包括虛擬機(jī)集群數(shù)量、實(shí)時(shí)CPU、內(nèi)存、磁盤(pán)使用情況。
圖5 天鏡-基礎(chǔ)資源池
1.3資源使用情況
第一套資源池磁盤(pán)使用率為53%,平均CPU使用率為13.3%,平均內(nèi)存使用率為56.2%;第二套資源池磁盤(pán)使用率為76%,平均CPU使用率為28.5%,平均內(nèi)存使用率為77.4%;第三套資源池磁盤(pán)使用率為35%,平均CPU使用率為11.3%,平均內(nèi)存使用率為62.3%。
近1小時(shí)虛擬機(jī)CPU平均利用率曲線如圖6所示,由于預(yù)報(bào)加工處理具有明顯的周期性特征,數(shù)據(jù)處理作業(yè)高峰運(yùn)行期間,CPU峰值利用率達(dá)到100%,計(jì)算機(jī)滿負(fù)荷運(yùn)行,物理設(shè)備的計(jì)算資源被全部耗盡。
圖6 虛擬機(jī)CPU使用率
物理設(shè)備的計(jì)算資源被耗盡后,承載的虛擬機(jī)會(huì)自動(dòng)發(fā)生遷移,頻繁的設(shè)備遷移會(huì)給計(jì)算、存儲(chǔ)和網(wǎng)絡(luò)設(shè)備帶來(lái)額外負(fù)擔(dān),影響設(shè)備運(yùn)行的穩(wěn)定性。
1.4存在的問(wèn)題
預(yù)報(bào)業(yè)務(wù)存在時(shí)間上較強(qiáng)的周期性特征,占用的基礎(chǔ)設(shè)施資源平均利用率不高,但峰值利用率過(guò)高,計(jì)算資源利用率不均衡。加工處理高峰期,單臺(tái)虛擬機(jī)可占滿整個(gè)物理設(shè)備的計(jì)算資源,會(huì)出現(xiàn)虛擬機(jī)之間爭(zhēng)奪資源的情況,當(dāng)前虛擬化平臺(tái)無(wú)法避免此類(lèi)情況的發(fā)生。
存儲(chǔ)空間需求大,各類(lèi)預(yù)報(bào)數(shù)據(jù)、產(chǎn)品存儲(chǔ)日增量在1TB以上,當(dāng)前存儲(chǔ)能力難以滿足數(shù)據(jù)量的存儲(chǔ)需求,只能篩選數(shù)據(jù)價(jià)值較高的數(shù)據(jù)進(jìn)行長(zhǎng)期存儲(chǔ),價(jià)值不高的數(shù)據(jù)采取定期刪除策略,優(yōu)先滿足關(guān)鍵數(shù)據(jù)的存儲(chǔ)需求。
2 需求分析
2.1需求量分析
從未來(lái)3~5年各業(yè)務(wù)單位上報(bào)的需求來(lái)看,CPU核數(shù)、硬盤(pán)容量是需求量較大的兩項(xiàng),其中CPU核的需求量是現(xiàn)有資源的174%,內(nèi)存容量的需求是現(xiàn)有資源的80%,硬盤(pán)容量的需求是現(xiàn)有資源的697%,同時(shí)也說(shuō)明局氣象業(yè)務(wù)正向計(jì)算型和大數(shù)據(jù)存儲(chǔ)型轉(zhuǎn)變。
虛擬化資源池主要支撐現(xiàn)有的業(yè)務(wù)發(fā)展,也是今后資源池建設(shè)擴(kuò)展的重點(diǎn)。內(nèi)存空間的擴(kuò)展可以根據(jù)業(yè)務(wù)需求進(jìn)行逐年擴(kuò)展,對(duì)CPU的需求主要表現(xiàn)在氣象臺(tái)等業(yè)務(wù)單位需要高性能并行計(jì)算的業(yè)務(wù)。為滿足未來(lái)3~5年需求,每年需固定投入相關(guān)硬件及系統(tǒng),按當(dāng)前主流4路18核CPU計(jì)算單臺(tái)可用72核,單臺(tái)內(nèi)存配置512G,每年最少新增6~8個(gè)服務(wù)器節(jié)點(diǎn)。資源池架構(gòu)網(wǎng)絡(luò)設(shè)備要求全萬(wàn)兆交換機(jī),按照每年6個(gè)節(jié)點(diǎn)的新增、單個(gè)節(jié)點(diǎn)網(wǎng)口10個(gè)計(jì)算,共計(jì)需至少60個(gè)萬(wàn)兆交換機(jī),因此每年新增3臺(tái)萬(wàn)兆交換機(jī)。每年所增加服務(wù)器節(jié)點(diǎn)組成的集群需新增兩套安全設(shè)備,納入安全資源池統(tǒng)一管理,承擔(dān)新增集群的安全防護(hù)工作。每年新增6個(gè)節(jié)點(diǎn)的集群需購(gòu)買(mǎi)相應(yīng)服務(wù)器虛擬化、網(wǎng)絡(luò)虛擬化、存儲(chǔ)虛擬化軟件授權(quán),傳統(tǒng)的殺毒軟件已經(jīng)不能適應(yīng)虛擬化資源池環(huán)境應(yīng)用。因此,需要部署基于虛擬化環(huán)境的病毒入侵檢測(cè)與防御系統(tǒng)。
2.2硬件要求
2.2.1服務(wù)器
服務(wù)器虛擬化是實(shí)現(xiàn)計(jì)算虛擬化資源池的主要技術(shù)手段,通過(guò)將計(jì)算能力池化,實(shí)現(xiàn)計(jì)算能力的動(dòng)態(tài)調(diào)配和彈性伸縮,盤(pán)活服務(wù)器閑置存量,有效提升服務(wù)器的資源使用率。
綜合氣象部門(mén)實(shí)際情況和技術(shù)發(fā)展趨勢(shì),基礎(chǔ)資源池服務(wù)器虛擬化應(yīng)當(dāng)統(tǒng)一選用開(kāi)放式、可良好擴(kuò)展的X86架構(gòu)服務(wù)器,物理形態(tài)應(yīng)選擇機(jī)架式服務(wù)器,其在內(nèi)存、存儲(chǔ)和網(wǎng)絡(luò)方面具有更好的擴(kuò)展性。除一些需要安裝特殊配件的服務(wù)器,如數(shù)據(jù)解壓縮卡、加密設(shè)備、特殊IO接口等(如表1所示),一般均可使用虛擬機(jī)作為服務(wù)器[5]。
表1 服務(wù)器虛擬化技術(shù)建議
序號(hào) |
應(yīng)用場(chǎng)景 |
虛擬化技術(shù)建議 |
1 |
通信主機(jī) 其他輕量級(jí)主機(jī) |
特性:網(wǎng)絡(luò)IO密集型+存儲(chǔ)IO密集型 |
資源配置建議:(低配、中配、高配) |
||
CPU:低配 |
||
內(nèi)存:中配、高配 |
||
網(wǎng)絡(luò):高配,配置多塊萬(wàn)兆虛擬網(wǎng)卡 |
||
存儲(chǔ):高配,FCSAN、SSD固態(tài)硬盤(pán) |
||
2 |
文件服務(wù) |
如果是實(shí)時(shí)高并發(fā)文件共享服務(wù),技術(shù)建議同1;否則,根據(jù)訪問(wèn)量和數(shù)據(jù)量采用中低配置。 |
3 |
實(shí)時(shí)數(shù)據(jù)庫(kù) 其他中小型數(shù)據(jù)庫(kù) |
特性: IO密集型+計(jì)算密集型 |
資源配置建議:(低配、中配、高配) |
||
CPU:中、高配 |
||
內(nèi)存:中配或高配 |
||
網(wǎng)絡(luò):中、高配,配置多塊萬(wàn)兆虛擬網(wǎng)卡 |
||
存儲(chǔ):高配 |
||
4 |
中間件服務(wù) |
特性: IO密集型 |
資源配置建議:(低配、中配、高配) |
||
CPU:低、中配 |
||
內(nèi)存:中配或高配 |
||
網(wǎng)絡(luò):中、高配,配置多塊萬(wàn)兆虛擬網(wǎng)卡 |
||
存儲(chǔ):中、低配 |
||
5 |
數(shù)據(jù)處理服務(wù) (結(jié)構(gòu)化入庫(kù)、質(zhì)量控制、格式轉(zhuǎn)換、格點(diǎn)化處理、解壓縮、同化、融合等) |
特性:計(jì)算密集型+IO密集型 |
資源配置建議:(低配、中配、高配) |
||
CPU:中、高配 |
||
內(nèi)存:高配 |
||
網(wǎng)絡(luò):中配 |
||
存儲(chǔ):高配 |
||
6 |
產(chǎn)品制作服務(wù) (氣象數(shù)據(jù)的可視化、實(shí)況產(chǎn)品、預(yù)報(bào)產(chǎn)品、服務(wù)產(chǎn)品的生成) |
特性:計(jì)算密集型+IO密集型 |
資源配置建議:(低配、中配、高配) |
||
CPU:中、高配 |
||
內(nèi)存:高配 |
||
網(wǎng)絡(luò):中配 |
||
存儲(chǔ):高配 |
||
7 |
WEB服務(wù) |
特性:網(wǎng)絡(luò)IO密集型 |
資源配置建議:(低配、中配、高配) |
||
CPU:中配 |
||
內(nèi)存:高配 |
||
網(wǎng)絡(luò):高配 |
||
存儲(chǔ):中配 |
||
說(shuō)明:由于一臺(tái)服務(wù)器提供多個(gè)虛擬機(jī)承載業(yè)務(wù)和服務(wù),性能配置考慮冗余。 |
2.2.2存儲(chǔ)
在存儲(chǔ)資源池建設(shè)方案中,采用分布式存儲(chǔ)技術(shù)構(gòu)建統(tǒng)一的存儲(chǔ)資源池,可以形成可橫向擴(kuò)展(Scale-out)的云計(jì)算基礎(chǔ)架構(gòu)。在業(yè)務(wù)應(yīng)用區(qū)部署虛擬存儲(chǔ)方案,利用虛擬存儲(chǔ)構(gòu)建云平臺(tái)存儲(chǔ)資源池,有效利用服務(wù)器資源,降低能源消耗,實(shí)現(xiàn)IT環(huán)境的節(jié)能減排。
磁盤(pán)長(zhǎng)期運(yùn)行導(dǎo)致?lián)p壞是不可避免的。因此,在集群中構(gòu)建一些全局熱備盤(pán),當(dāng)某一塊磁盤(pán)或者某幾塊磁盤(pán)出現(xiàn)故障時(shí),系統(tǒng)可以第一時(shí)間替代故障磁盤(pán),實(shí)現(xiàn)快速的磁盤(pán)自動(dòng)化替換,不需要人工操作。降低磁盤(pán)故障帶來(lái)的風(fēng)險(xiǎn),提高數(shù)據(jù)的可靠性。常規(guī)氣象業(yè)務(wù)系統(tǒng)以數(shù)據(jù)密集型為主,在構(gòu)建虛擬資源池的存儲(chǔ)時(shí),建議配置性能較高的存儲(chǔ)資源[6-7]。
2.2.3網(wǎng)絡(luò)
網(wǎng)絡(luò)虛擬化和服務(wù)器虛擬化結(jié)合,在虛擬機(jī)和物理網(wǎng)絡(luò)之間,提供一整套完整的邏輯網(wǎng)絡(luò)設(shè)備、連接和服務(wù),包括分布式虛擬交換機(jī)、虛擬路由器、虛擬防火墻、虛擬負(fù)載均衡器、虛擬數(shù)據(jù)庫(kù)防護(hù)等虛擬網(wǎng)絡(luò)、安全設(shè)備;其次,還可以支持VXLAN等增強(qiáng)網(wǎng)絡(luò)協(xié)議,實(shí)現(xiàn)和物理網(wǎng)絡(luò)的無(wú)縫對(duì)接,簡(jiǎn)化網(wǎng)絡(luò)的配置管理;此外,還可以通過(guò)虛擬化管理平臺(tái),實(shí)現(xiàn)網(wǎng)絡(luò)拓?fù)洳渴稹⒕W(wǎng)絡(luò)故障探測(cè)等網(wǎng)絡(luò)管理功能。
2.2.4基礎(chǔ)資源池云平臺(tái)
云運(yùn)維與管理層主要面向基礎(chǔ)資源池的管理員,可以更好地對(duì)氣象局的云服務(wù)進(jìn)行配置與管理。例如,服務(wù)目錄的發(fā)布、組織架構(gòu)(管理)的定義、氣象用戶管理、云業(yè)務(wù)流程定制設(shè)計(jì)以及資源的配額與計(jì)費(fèi)策略定義等。同時(shí),還可以提供基礎(chǔ)的設(shè)備管理、配置管理、鏡像管理、備份管理、日志管理、監(jiān)控管理和報(bào)表服務(wù)等,充分滿足云管理員對(duì)云平臺(tái)的日常運(yùn)營(yíng)維護(hù)需求。
3 對(duì)策研究
(1)物理服務(wù)器CPU、內(nèi)存月平均利用率連續(xù)3個(gè)月以上低于10%,峰值利用率低于30%,建議將服務(wù)器承載應(yīng)用遷移至虛擬化平臺(tái),服務(wù)器根據(jù)其設(shè)備狀態(tài)選擇利舊使用或下架報(bào)廢處理。
(2)虛擬化服務(wù)器CPU、內(nèi)存的峰值使用率達(dá)不到50%的或資源月平均利用率低于30%的,根據(jù)實(shí)際使用需求對(duì)已分配虛擬機(jī)資源進(jìn)行降配處理。虛擬機(jī)連續(xù)關(guān)機(jī)超過(guò)3個(gè)月的強(qiáng)制回收虛擬機(jī)資源。
(3)調(diào)整業(yè)務(wù)布局,將計(jì)算密集型業(yè)務(wù)遷出虛擬化平臺(tái),調(diào)整至物理服務(wù)器運(yùn)行,原虛擬化平臺(tái)運(yùn)行程序可作為備份系統(tǒng)。加強(qiáng)業(yè)務(wù)運(yùn)行的集約管理,加快業(yè)務(wù)系統(tǒng)的集約整合,推進(jìn)基于“天擎”的業(yè)務(wù)系統(tǒng)云化改造,梳理數(shù)據(jù)加工處理流程,優(yōu)化加工處理程序,降低加工處理程序?qū)λ懔Φ拈_(kāi)銷(xiāo)。
(4)結(jié)合業(yè)務(wù)實(shí)際,將部分低效運(yùn)行系統(tǒng)退出業(yè)務(wù)運(yùn)行,對(duì)部分基礎(chǔ)設(shè)施資源進(jìn)行回收再利用,老舊、低效設(shè)備下架報(bào)廢處理。當(dāng)業(yè)務(wù)系統(tǒng)所承載的業(yè)務(wù)不再需要運(yùn)行或已有替代升級(jí)的新業(yè)務(wù)系統(tǒng)且業(yè)務(wù)運(yùn)行不少于3個(gè)月,相關(guān)業(yè)務(wù)單位應(yīng)及時(shí)向管理部門(mén)提交退出申請(qǐng),管理部門(mén)審查批復(fù)后,由信息中心回收基礎(chǔ)設(shè)施資源。
(5)依托重點(diǎn)工程項(xiàng)目建設(shè)逐步提升計(jì)算、存儲(chǔ)支撐能力。新建信息系統(tǒng)項(xiàng)目時(shí),同時(shí)做好基礎(chǔ)設(shè)施資源支撐平臺(tái)的規(guī)劃設(shè)計(jì),匹配響應(yīng)投資。
4結(jié)語(yǔ)
經(jīng)過(guò)多年發(fā)展,上海氣象信息網(wǎng)絡(luò)業(yè)務(wù)能力不斷提高,資料服務(wù)與應(yīng)用水平明顯改進(jìn),為公共氣象服務(wù)、預(yù)報(bào)預(yù)測(cè)和綜合氣象觀測(cè)等業(yè)務(wù)的快速發(fā)展提供了重要支撐。未來(lái),上海市氣象局基礎(chǔ)資源池將繼續(xù)遵循“統(tǒng)籌管理、集約建設(shè)、統(tǒng)一出口、有序供給、充分利用、安全可控”的原則,提高氣象數(shù)據(jù)質(zhì)量和配置效率,保障氣象數(shù)據(jù)依法有序流動(dòng),激發(fā)氣象數(shù)據(jù)應(yīng)用活力,促進(jìn)氣象數(shù)據(jù)高水平利用。
參考文獻(xiàn)
[1] 劉國(guó)宏,余東昌,劉旭林,等.虛擬化技術(shù)在氣象業(yè)務(wù)中的應(yīng)用[J].計(jì)算技術(shù)與自動(dòng)化,2013,32(4):119-122.
[2] 汪華,黃笞,方斌.貴州省氣象信息業(yè)務(wù)系統(tǒng)的虛擬化實(shí)現(xiàn)[J].成都信息工程學(xué)院學(xué)報(bào),2012,27(2):186-191.
[3] 聶元丁.基于云計(jì)算的國(guó)家級(jí)氣象資源池設(shè)計(jì)與建設(shè)[J].計(jì)算機(jī)技術(shù)與發(fā)展,2018,28(12):132-136.
[4] 羅林艷,張繼光,劉曉波,等.基于 Hyper-V 的湖南氣象信息業(yè)務(wù)系統(tǒng)虛擬化實(shí)現(xiàn)[J],安徽農(nóng)業(yè)科學(xué),2017,45(6):198-199,204.
[5] 陳開(kāi),陳柯辰.氣象基礎(chǔ)設(shè)施資源統(tǒng)一管理系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[J].電子技術(shù)與軟件工程,2020(7):204-206.
[6] 郭娜先,阿成鳳.淺析虛擬化技術(shù)在省級(jí)氣象基礎(chǔ)設(shè)施資源池中的應(yīng)用[J].青海科技,2022,29(5):138-141.
[7] 王瑞通,李煒春.大數(shù)據(jù)基礎(chǔ)存儲(chǔ)系統(tǒng)技術(shù)研究[J].計(jì)算機(jī)技術(shù)與發(fā)展,2017,27(8):66-72.
Demand Analysis and Counter Measure Research of Provincial Meteorological Basic Resource Pool
GUAN Lili,QIAN Zonghao,XIA Jingjie
(Shanghai Meteorological Information and Technical Support Center, Shanghai 200030)
Abstract:The infrastructure resource pool is the supporting system of meteorological big data. It provides computing, storage resources, and basic software resources such as middleware for meteorological big data with the hybrid cloud resource model of "private cloud + public cloud". Starting from the computing characteristics of the basic pool, according to the specific computing capabilities of the system, the server deployment design, network design, and storage design of the infrastructure resource pool are investigated in detail, and the existing storage disks and storage network selection are deeply analyzed. How to reserve space during storage development, how to consider capacity expansion, etc., and from the perspective of operation and maintenance, consider the automatic design of resource pools, as well as self-healing design and improvement, and provide constructive suggestions for the development of the business and scientific research capabilities.
Key words:basic resource pool;virtualization technologycentralized storage;distributed storage