0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

藍海大腦高性能氣象大數據平臺為氣象局掌握風云變幻提供助力

GPU視覺識別 ? 來源:GPU視覺識別 ? 作者:GPU視覺識別 ? 2022-07-28 12:01 ? 次閱讀

隨著氣候預測、氣候模擬、智慧氣象、并行計算集群、氣象大數據平臺、高性能數值計算、氣象高性能計算集群的發(fā)展,人類步入全新的人工智能大數據時代。

“雷聲大雨點小”“久晴大霧必陰,久雨大霧必晴”……自古以來,人們從云卷云舒、風停雨歇中學會了觀天象,并將這些經驗用于出行、農事活動中。進入現代社會,天文學、流體力學等學科的快速發(fā)展,氣象站、氣象氣球和衛(wèi)星等工具的利用,人類對氣象的理解邁進了新的臺階。

對于如何增強氣象科技自主創(chuàng)新能力,賦能高質量發(fā)展。有專業(yè)人士指出一方面是利用人工智能、大數據等技術把氣象服務做得更加精細化、準確化;另一方面是創(chuàng)新行業(yè)解決方案,挖掘更多行業(yè)或場景的氣象需求,讓氣象服務更加緊密結合生產生活。

大數據如何滿足

未來氣象預報的發(fā)展

超級計算機、大數據應用將能夠滿足未來氣象預報在三個關鍵領域的需求:

管理和利用龐大數據集

環(huán)境數據的數據量和多樣性將以指數形式成倍增加,將對基礎設施管理和存儲這些數據提出極大的需求,也要求更大計算能力模擬使用。這也為公立和私營機構研究人員專業(yè)化服務提供了新機遇。

提高模型的分辨率

高分辨率模型是一個關鍵因素,可以更好地評估長期氣候系統(tǒng)狀態(tài),提高氣象預報能力,特別是對災害性天氣的預報能力。美國國家大氣研究中心和大學的研究人員使用超級計算機對于颶風的模擬,已經提高到500米分辨率,相當于幾個街區(qū)的預報。

解決技術障礙

鑒于天氣建模和分析變得更加數據密集型,需要更大計算能力,研究人員必須更加關注性能瓶頸,如內存、I / O、互連延遲和帶寬。天氣模擬需要成千上萬微處理器并行運算,突破硬件和軟件的可擴展性限制。此外,可擴展的操作系統(tǒng)、編譯器和應用程序庫正在發(fā)揮作用。最終,底層技術基礎設施必須緊密集成,支持模擬和分析工作流程。

pYYBAGLiCjCATWPOAAZgbMMfWyw482.png

大數據疊加AI算法

天氣實現分鐘即、公里級預報

在過去,全球廣泛采用的天氣預報模式是數值模擬法,通過實驗室內的大型計算機作數值計算,用物理方程表達天氣演變,從而預測一段時間內大氣運動狀態(tài)和氣象。盡管很長一段時間的天氣預測都是依靠數值模擬法,但是數值模擬由于精準度和準確率有限,慢慢達到了瓶頸,難以滿足現代社會的發(fā)展需求。

中國氣象局高級工程師卡贊表示:天氣預報和人工智能有著天然耦合的關系。天氣預報需要大量的、多種多樣的資料,人工智能天生就是處理大數據的工具;現有資料的時空數據密度不夠,人工智能具有對不完全不確定信息的推斷能力;此外人工智能還可以總結專家的知識經驗,提高平均預測水平以及利用統(tǒng)計與數值模式中無法利用的抽象預報知識等。

人工智能預測主要的方法是用大量的訓練數據加上人工智能模型,通過數據進行計算優(yōu)化的方法,可以和數值模擬進行很好的互補。

直接采用端到端的AI技術,通過長時間收集到的雷達云圖運動的時間序列數據及人工智能和模式數據的融合,進行預測云在未來移動的方向、下雨積雨云運動的方向等。

天氣是一個混沌系統(tǒng),從現有技術看,不可能實現100%準確,但人工智能、大數據等新興技術的加入,使得預報結果與真實情況之間不斷接近,目前已可實現公里級、分鐘級的格點化天氣預報。

通過人工智能和大數據的加持,智慧氣象已經在各個領域發(fā)揮作用,其優(yōu)勢也逐漸顯現。與傳統(tǒng)氣象預測手段相比,人工智能具有數據處理能力更強、預測準確性更高、精細化程度在空間維度達到公里級甚至百米級,時間維度達到分鐘級、并與其他的生產生活相關的指數等相結合。

用好預報工具

“ 氣象+” 賦能經濟社會發(fā)展

人們日常的生產生活與天氣變化之間的關系密切,而災害性天氣對農業(yè)、交通、經濟、生活等方面影響更加顯著。

國家應急管理部發(fā)布的2021年全國自然災害基本情況數據顯示,2021年全年各種自然災害共造成1.07億人次受災;倒塌房屋16.2萬間,不同程度損壞198.1萬間;農作物受災面積11739千公頃;直接經濟損失3340.2億元。

如何盡量規(guī)避天氣風險并利用好天氣為經濟社會發(fā)展服務成為當今社會的一道“必答題”。國務院印發(fā)的《氣象高質量發(fā)展綱要(2022-2035年)》提出,要筑牢氣象防災減災第一道防線,提高氣象災害監(jiān)測預報預警能力;提高氣象服務經濟高質量發(fā)展水平,實施氣象為農服務提質增效行動、海洋強國氣象保障行動、交通強國氣象保障行動、“氣象+” 賦能行動。

在國家層面,氣象科技賦能高質量發(fā)展要把氣象技術觀測設備,衛(wèi)星觀測站基礎設備能力提升。對氣象服務企業(yè)來說,利用好這些設備和技術,創(chuàng)新行業(yè)解決方案,賦能各個需求場景和行業(yè),更深入的為經濟社會發(fā)展服務。

在農業(yè)領域,農業(yè)是國民經濟的基礎,“三農”工作與氣象工作息息相關。墨跡天氣負責人黃渤海表示“在農業(yè)種植決策上,通過預測天氣,農民可以選擇合適的時間進行春播秋收,通過判斷整年的氣候情況和水土選擇合適的作物種植,增加產量。耕作后,農民可以通過天氣預報進行防災減災,減少損失。此外,通過預測降水情況還可以幫助農民減少灌溉成本,提升對水資源的利用效率。”

poYBAGLiCjGAE-BuAAGA91AandE029.jpg

藍海大腦氣象大數據平臺

項目背景

某省是我國受臺風、暴雨、干旱、寒潮、大風、冰雹、凍害、龍卷風等災害影響最嚴重地區(qū)之一。在氣象災害相對頻發(fā)的情況下,某省氣象局在服務經濟社會發(fā)展中作用日益突出,提高氣象觀測、數據共享和精細化預報水平變得至關重要。通過與藍海大腦合作,擺脫原有IT基礎構架對于氣象工作的限制,實施彈性的統(tǒng)一架構,實現了高水平的氣象觀測、預測和服務業(yè)務。

pYYBAGLiCjGAdHHaAAD7GrpQZZY252.jpg

客戶需求

由于天氣預報模擬具有計算量大、通訊密集、I/O要求高和規(guī)范的模式系統(tǒng)化集成等特點,對高性能計算系統(tǒng)的計算性能有著超高的要求,具體要求表現如下:

計算量大

氣象預報本身具有時效性,要求定時定點自動運行,無需人工干預。一般每天在固定的2-4個時段運行,每個時段2小時內運行完。因此,必須使用計算性能卓越的高性能計算系統(tǒng)來進行并行計算。

通訊密集

由于采用并行計算,因此各CPU間的通訊量很大。主要體現在WRF各計算域間的通訊及各類不同數據劃分間的通訊。因此,要求本高性能計算系統(tǒng)在具有高性能計算的同時,兼具高性能的通訊網絡

I/O要求高

由于涉及大量的用戶和大量的小文件讀寫,氣象模式對整個系統(tǒng)的IOPS性能有較高要求,存儲系統(tǒng)的穩(wěn)定性和可用性對整個業(yè)務系統(tǒng)的運行至關重要,要求存儲系統(tǒng)具有故障自愈功能。另外,考慮到氣象數據的周期性訪問特點,需要支持基于策略的分級存儲功能。

模式系統(tǒng)集成化

從軟件的處理流程上看,一般分為前處理、主模式和后處理。整個模式系統(tǒng)從前處理到主模式再到后處理,需要系統(tǒng)具有較高的穩(wěn)健性,所以優(yōu)秀的模式軟件應用專家支持、硬件級的系統(tǒng)技術支持,對預報模式的良好使用也是關鍵。

poYBAGLiCjKARHEVAASMBhXt72k556.png

解決方案

藍海大腦依托接收的常規(guī)氣象觀探測資料、氣象衛(wèi)星資料、雷達資料、數值預報產品等多源數據,基于定量反演、機器學習、云計算、云存儲、大數據分析、 快速循環(huán)同化、虛擬現實等前沿技術,研發(fā)了具備多元化高性能算力、精準化短臨預報、一站多源數據融合及多樣化氣象服務等優(yōu)勢的氣象大數據平臺,面向整個氣象行業(yè)提供信息化系統(tǒng)頂層設計、 軟件研發(fā)應用、數據共享服務等,同時也向道路、航空、物流、農業(yè)等行業(yè)領域開展針對性的精準氣象預報保障服務。

藍海大腦為滿足客戶需求,結合行業(yè)特點從計算節(jié)點、網絡、存儲、功耗、擴展、散熱等方面出發(fā),提出完善的解決方案。

計算節(jié)點

采用高性能英特爾酷睿系列處理器,計算節(jié)點采用雙路混搭方案。四路計算節(jié)點依靠其突出的計算能力與內存容量,可在一臺機器上完成中小模式的處理分析,減少資料預處理、計算、分析的時間,提高計算效率。

高速網絡

采用高性能專用高速IB網絡,將計算節(jié)點、管理節(jié)點、登錄節(jié)點全線速互聯,保證集群通訊網絡的高性能。并將NAS存儲通過萬兆連入高速網絡,配合集群并行文件系統(tǒng),實現全部節(jié)點的數據共享。

存儲系統(tǒng)

綜合以往存儲硬件解決方案,系統(tǒng)應用要求存儲設備具備的特點及藍海大腦在多年高性能計算領域的實施經驗,充分滿足用戶現階段使用及未來擴展需求。

低功耗

解決方案不僅強調整體運算效率,同時強調單位體積內的計算能力以及單位能耗可提供的計算能力。

可擴展

計算系統(tǒng)采用機架式服務器,既可保證節(jié)點內的擴展性,又可保證整個集群的橫向擴展性。總體上,滿足用戶對未來集群的擴展需求。

液冷散熱

藍海大腦液冷服務器 HD210 H系列突破傳統(tǒng)風冷散熱模式,采用風冷和液冷混合散熱模式——服務器內主要熱源 CPU 利用液冷冷板進行冷卻,其余熱源仍采用風冷方式進行冷卻。通過這種混合制冷方式,可大幅提升服務器散熱效率,同時,降低主要熱源 CPU 散熱所耗電能,并增強服務器可靠性。經檢測,采用液冷服務器配套基礎設施解決方案的數據中心年均 PUE 值可降低至 1.2 以下。

pYYBAGLiCjKAGE9qAADulx7sg8Q927.jpg

用戶收益

資源重新整合,實現更好的業(yè)務連續(xù)性

通過應用的分區(qū)分域部署,顯著提高關鍵應用程序的性能、穩(wěn)定性和容量,從而更好的保障業(yè)務連續(xù)性。

氣象信息分發(fā)服務更高效

幫助客戶建立更高效、及時的氣象信息分發(fā)服務,以減輕極端天氣事件對某省社會和經濟結構的影響。

數據安全性提升,人力投入降低

整合后的架構將加強災難恢復計劃,降低管理復雜性和成本,解放氣象局的團隊,使其專注于更具戰(zhàn)略性的任務。

運營敏捷性提升,快速響應資源請求

穩(wěn)定、安全的新存儲,可有效地管理和保存大量雷達數據。統(tǒng)一的基礎架構將有助于優(yōu)化運營敏捷性,使氣象局能夠快速響應開發(fā)團隊對資源的請求。

審核編輯 黃昊宇

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯系本站處理。 舉報投訴
  • 高性能
    +關注

    關注

    0

    文章

    155

    瀏覽量

    20362
  • 氣象
    +關注

    關注

    0

    文章

    26

    瀏覽量

    17430
  • 大數據
    +關注

    關注

    64

    文章

    8835

    瀏覽量

    137141
收藏 人收藏

    評論

    相關推薦

    5g工業(yè)路由器最新案例:高原氣象站網絡升級項目

    某省氣象局決定在高原地區(qū)升級其氣象觀測網絡,以提高天氣預報的準確性和及時性,同時氣候變化研究提供更可靠的數據支持。該項目面臨以下挑戰(zhàn)
    的頭像 發(fā)表于 10-14 17:59 ?176次閱讀
    5g工業(yè)路由器最新案例:高原<b class='flag-5'>氣象</b>站網絡升級項目

    智能氣象管理解決方案

    和決策提供更精準的信息。 ? ?智能氣象管理解決方案,具體包含無線 DIY氣象站、氣候土壤監(jiān)測終端、智能微氣候監(jiān)控軟件、氣象數據 SAAS
    的頭像 發(fā)表于 10-12 10:38 ?122次閱讀
    智能<b class='flag-5'>氣象</b>管理解決方案

    小型車載自動氣象站:提供全面、及時的氣象信息

    和記錄車輛周圍的氣象數據,配有超聲波多合一環(huán)境監(jiān)測傳感器,集成度較高,可對風速、風向、空氣溫度、空氣濕度、噪聲、PM2.5、PM10、二氧化碳等氣象要素進行實時監(jiān)測,駕駛員
    的頭像 發(fā)表于 09-12 16:52 ?215次閱讀

    校園氣象站高??破照撐?b class='flag-5'>氣象站多功能氣象

    ,并通過無線通信模塊將數據傳輸到云平臺,方便師生們通過手機APP或網頁端查看實時數據,了解天氣變化趨勢,提前做好應對準備。 校園氣象站高??破照撐?b class='flag-5'>氣
    的頭像 發(fā)表于 08-06 17:53 ?370次閱讀
    校園<b class='flag-5'>氣象</b>站高??破照撐?b class='flag-5'>氣象</b>站多功能<b class='flag-5'>氣象</b>站

    航天宏圖亮相中國氣象現代化建設科技博覽會,探索未來氣象新紀元

    2024年5月15日-5月17日,由中國氣象局、科技部、中國科協共同主辦的2024年氣象科技活動周在深圳盛大召開。
    的頭像 發(fā)表于 05-21 10:00 ?299次閱讀
    航天宏圖亮相中國<b class='flag-5'>氣象</b>現代化建設科技博覽會,探索未來<b class='flag-5'>氣象</b>新紀元

    江蘇省氣象局與華為簽署全面合作協議!

    江蘇省氣象局與華為技術有限公司(以下簡稱“華為”)在華為三丫坡園區(qū)簽署全面合作協議。
    的頭像 發(fā)表于 05-16 09:17 ?427次閱讀
    江蘇省<b class='flag-5'>氣象局</b>與華為簽署全面合作協議!

    氣象土壤墑情監(jiān)測站:多元數據融合的智慧農田管理平臺

    氣象土壤墑情監(jiān)測站是一種集成了氣象和土壤墑情監(jiān)測功能的智能化設備,旨在通過多元數據融合,農田管理提供全面的信息支持,
    的頭像 發(fā)表于 04-07 15:22 ?376次閱讀

    小型農業(yè)氣象站廠家:數據分析與決策支持

    JD-NQ14隨著科技的不斷進步,農業(yè)也迎來了新的變革。為了幫助農民更好地了解天氣情況,科學安排農作物種植,小型農業(yè)氣象站廠家應運而生。他們致力于開發(fā)智能化的農業(yè)氣象站,農民提供精準
    的頭像 發(fā)表于 04-02 16:35 ?382次閱讀

    氣象災害對輸電線路的危害,微氣象監(jiān)測設備助力提前防范

    氣象在線監(jiān)測設備DX-WPS100-QX,通過微氣象傳感器實時采集環(huán)境溫度、濕度、風速、風向、降水量等信息,無線發(fā)送到監(jiān)測中心,幫助線路運維人員及時掌握氣象變化,提前預測
    的頭像 發(fā)表于 03-14 13:45 ?579次閱讀

    中國氣象局首批高精度溫室氣體觀測站正式運作

     此次中國氣象局的業(yè)務準入,是在廣泛征求意見、經過專家評估后開展的大規(guī)模工作,旨在提升我國應對氣候變化的能力,推動我國減排溫室氣體的進程。
    的頭像 發(fā)表于 03-04 11:19 ?330次閱讀

    淺談基于以太網的氣象網絡機房監(jiān)控系統(tǒng)

    和管理.在設備基礎上構建基于BS架構的綜合信息管理平臺,實現了現場數據采集、故障告警、WEB模式的實時數據發(fā)布、各種通信協議轉換等多項功能。 關鍵詞:以太網:GSM:LPS:B/S架構 0、引言 南通市
    的頭像 發(fā)表于 02-19 14:10 ?297次閱讀
    淺談基于以太網的<b class='flag-5'>氣象</b>網絡機房監(jiān)控系統(tǒng)

    農業(yè)氣象站:助力現代農業(yè)發(fā)展

    農業(yè)氣象站:助力現代農業(yè)發(fā)展
    的頭像 發(fā)表于 01-31 11:28 ?361次閱讀

    中國氣象局與華為簽署深化戰(zhàn)略合作協議,加快推進新型信息技術在氣象領域應用和自主創(chuàng)新

    總裁汪濤出席活動并見證簽約。中國氣象局黨組成員、副局長張祖強,華為副總裁吳剛代表雙方簽約。華為副總裁吳輝出席。 根據協議,雙方將圍繞高性能計算、人工智能應用、關鍵基礎設施信息化、自主創(chuàng)新、氣象服務華為終端應用等方面深化業(yè)務
    的頭像 發(fā)表于 12-07 10:00 ?342次閱讀

    一分鐘帶你了解動環(huán)監(jiān)控系統(tǒng)在氣象局配電室的應用

    ? ?H18721098782 ? ? 隨著現代科技的發(fā)展,許多行業(yè)都開始采用智能化、自動化的技術來提高工作效率和減少人力成本。在氣象局中,配電室是重要的能源供應中心,對于保障氣象業(yè)務的正常運行
    的頭像 發(fā)表于 11-13 09:45 ?417次閱讀
    一分鐘帶你了解動環(huán)監(jiān)控系統(tǒng)在<b class='flag-5'>氣象局</b>配電室的應用

    校園氣象站組成與作用

    對于校園氣象站,相信很多人都不陌生,主要作用是用于監(jiān)測氣象要素信息。校園氣象站作為學校教學研究的器材,可監(jiān)測校園氣象,學校
    的頭像 發(fā)表于 10-31 16:28 ?603次閱讀