人類第一次完整全基因組的測(cè)序花了13年，在新技術(shù)的加持下，這個(gè)時(shí)間已經(jīng)降低到1天以內(nèi)；沒有這項(xiàng)新技術(shù)加持，電影《阿凡達(dá)》的渲染可能需要上萬年；這項(xiàng)新技術(shù)還讓新藥的研發(fā)周期大幅縮短，讓衛(wèi)星遙感定位精度大大提升——這項(xiàng)技術(shù)就是高性能計(jì)算HPC。

那么到底什么是HPC，這項(xiàng)技術(shù)對(duì)社會(huì)發(fā)展有什么深遠(yuǎn)影響，答案盡在本期鵬友會(huì)客廳。

數(shù)據(jù)存儲(chǔ)承擔(dān)

文明傳承、生產(chǎn)生活改善、科技

創(chuàng)新三大重任

在數(shù)字化時(shí)代，數(shù)據(jù)存儲(chǔ)是政企運(yùn)行的生命線，更是國(guó)之重器：通過文物數(shù)字化保護(hù)，大量珍貴的遺跡以圖片、視頻、VR等數(shù)字化形式保存了下來，讓文明得以傳承；另外，存儲(chǔ)對(duì)生產(chǎn)生活改善、科技創(chuàng)新方面的影響更加廣泛，尤其是科技創(chuàng)新領(lǐng)域，現(xiàn)在已經(jīng)成為國(guó)家和企業(yè)間競(jìng)相角逐的戰(zhàn)略高地。

HPC與大數(shù)據(jù)/AI結(jié)合快速增長(zhǎng)

HPC產(chǎn)業(yè)走向數(shù)據(jù)密集型

HPC誕生的前半個(gè)世紀(jì)，其發(fā)展核心矛盾在于計(jì)算，也就是我們所說的“計(jì)算密集型”HPC。隨著技術(shù)發(fā)展及高性能數(shù)據(jù)分析的出現(xiàn)，數(shù)據(jù)量越來越大，數(shù)據(jù)重要性越來越高，HPC開始迎來“數(shù)據(jù)密集型”的新發(fā)展階段。

沒有高性能計(jì)算的加持，阿凡達(dá)的渲染可能需要上萬年，而隨著電影畫幅和體驗(yàn)的提升，渲染量還會(huì)進(jìn)一步增加，如2019年上映的《阿麗塔：戰(zhàn)斗天使》，它的渲染量就是阿凡達(dá)的三倍。

同樣的數(shù)據(jù)變化也發(fā)生在HPC領(lǐng)域的其他場(chǎng)景：

新藥研發(fā)領(lǐng)域：借助HPC可以加速藥物篩選和分子分析，使新藥的研發(fā)周期大幅縮短，如面對(duì)當(dāng)前嚴(yán)重的疫情，更多的樣本集、更快的數(shù)據(jù)提煉，可以更快的研發(fā)生產(chǎn)出疫苗；

新車研發(fā)領(lǐng)域：隨著近年來自動(dòng)駕駛的興起，新車研發(fā)利用HPC進(jìn)行自動(dòng)駕駛的車輛測(cè)試。上百臺(tái)的測(cè)試車輛，每臺(tái)測(cè)試車路測(cè)時(shí)長(zhǎng)達(dá)2000小時(shí)左右，單輛測(cè)試車路測(cè)采集數(shù)據(jù)量最高可達(dá)64TB/天，通過HPC實(shí)現(xiàn)車輛碰撞的技術(shù)仿真，大幅降低了研發(fā)費(fèi)用和周期；

能源勘探領(lǐng)域：利用高性能計(jì)算（HPC）技術(shù)，對(duì)地震勘探數(shù)據(jù)進(jìn)行加工、計(jì)算，為能源勘探提供直觀的、可靠的依據(jù)。隨著勘探技術(shù)的進(jìn)步，地震數(shù)據(jù)實(shí)現(xiàn)了從二維到三維的轉(zhuǎn)變，并且逐步向四維演進(jìn)，數(shù)據(jù)量也向PB規(guī)模發(fā)展，中間過程數(shù)據(jù)的增加高達(dá)10~20倍，加上歷史資料的長(zhǎng)期保存，整體數(shù)據(jù)量成幾十倍增長(zhǎng)，呈現(xiàn)出數(shù)據(jù)密集型的特征；

衛(wèi)星遙感領(lǐng)域：隨著大數(shù)據(jù)、AI等新技術(shù)在衛(wèi)星遙感領(lǐng)域的應(yīng)用，衛(wèi)星遙感領(lǐng)域數(shù)據(jù)量增長(zhǎng)了近70倍，衛(wèi)星遙感的定位精度由以前的70米提升到了2米。

“數(shù)據(jù)密集型”HPC發(fā)展核心在于數(shù)據(jù)，

存儲(chǔ)扮演著更重要的角色

新的高性能計(jì)算應(yīng)用不斷涌現(xiàn)，驅(qū)動(dòng)了數(shù)據(jù)密集型HPC的高速發(fā)展，我們也稱為高性能數(shù)據(jù)分析（HPDA）。比如當(dāng)下炙手可熱的自動(dòng)駕駛，新車的研發(fā)需要對(duì)上百PB的數(shù)據(jù)進(jìn)行訓(xùn)練和仿真，對(duì)于存儲(chǔ)的性能、穩(wěn)定性、安全性等都提出了新的挑戰(zhàn)，存儲(chǔ)更成為了鏈接計(jì)算、網(wǎng)絡(luò)的核心基礎(chǔ)設(shè)施。

政府應(yīng)對(duì)“數(shù)據(jù)密集型”HPC趨勢(shì)

從超算向智算平臺(tái)演進(jìn)，以數(shù)據(jù)為中心

牽引算力和存力均衡發(fā)展

政府在高性能計(jì)算/超算領(lǐng)域，一直扮演著舉足輕重的作用，可以通過公共力量，快速、規(guī)模化推進(jìn)民生和經(jīng)濟(jì)發(fā)展。作為新基建的重要組成部分，各地紛紛上馬超算國(guó)家中心/區(qū)域中心，然而，超算中心的建設(shè)確有一些偏科，呈現(xiàn)出了重建設(shè)輕應(yīng)用、重計(jì)算輕數(shù)據(jù)的特點(diǎn)，造成了一些資源的閑置與浪費(fèi)。

面向未來，我們認(rèn)為加快數(shù)據(jù)密集型超算的建設(shè)會(huì)成為主要的方向，包括從超算向智算平臺(tái)的演進(jìn)，用人工智能、大數(shù)據(jù)等新應(yīng)用生態(tài)加持超算中心，實(shí)現(xiàn)以數(shù)據(jù)為中心牽引采、存、算、傳、用等多維度的均衡發(fā)展。

企業(yè)應(yīng)對(duì)“數(shù)據(jù)密集型”HPC趨勢(shì)

建設(shè)數(shù)據(jù)湖，使用專業(yè)的存儲(chǔ)設(shè)備，

關(guān)注前沿科技

當(dāng)前，對(duì)于企業(yè)來講，數(shù)據(jù)的價(jià)值已經(jīng)得到了充分的認(rèn)識(shí)，企業(yè)也愿意更多、更久的保存數(shù)據(jù)，而數(shù)據(jù)量也實(shí)現(xiàn)了從PB向EB級(jí)的跨越。想象一下，企業(yè)消耗巨額成本獲取的車輛路測(cè)數(shù)據(jù)、地震資料、粒子碰撞數(shù)據(jù)等一旦丟失，損失將是難以估量的，并且在長(zhǎng)周期的數(shù)據(jù)分析過程中，任何的存儲(chǔ)故障，都可能導(dǎo)致分析過程的前功盡棄。

面對(duì)海量數(shù)據(jù)，企業(yè)在存儲(chǔ)選型上，應(yīng)更加關(guān)注存儲(chǔ)性能、關(guān)注存儲(chǔ)本身的數(shù)據(jù)處理能力，以及AI應(yīng)用結(jié)合、大數(shù)據(jù)等一些前沿科技發(fā)展，從一開始就樹立數(shù)據(jù)湖的意識(shí)，讓數(shù)據(jù)應(yīng)存盡存、高效共享：

高密硬件架構(gòu)、重刪壓縮、高效冗余算法、熱溫冷分級(jí)機(jī)制，以及藍(lán)光介質(zhì)等，這些非常好的技術(shù)手段能讓海量數(shù)據(jù)更加經(jīng)濟(jì)、高效、安全的存儲(chǔ)；人工智能/大數(shù)據(jù)技術(shù)的加持，能對(duì)更長(zhǎng)遠(yuǎn)的數(shù)據(jù)進(jìn)行分析，獲得更準(zhǔn)確、更有價(jià)值的分析結(jié)果。

華為OceanStor Pacific下一代

高性能數(shù)據(jù)分析（HPDA）存儲(chǔ)

加速HPC向數(shù)據(jù)密集型演進(jìn)

華為OceanStor Pacific系列下一代高性能數(shù)據(jù)分析（HPDA）存儲(chǔ)，可以高效應(yīng)對(duì)HPC產(chǎn)業(yè)向數(shù)據(jù)密集型升級(jí)的關(guān)鍵挑戰(zhàn)：

超高密設(shè)計(jì)：通過系列化高密硬件和智能數(shù)據(jù)分級(jí)能力，實(shí)現(xiàn)成本優(yōu)化，數(shù)據(jù)存得多、存得?。?/p>

面向混合負(fù)載：一套存儲(chǔ)同時(shí)支持高帶寬和高IOPS，應(yīng)對(duì)復(fù)雜負(fù)載；

多協(xié)議互通：文件/大數(shù)據(jù)/對(duì)象多協(xié)議互通，讓不同應(yīng)用的承載更高效。

作為HPC產(chǎn)業(yè)的重要數(shù)據(jù)底座，高性能數(shù)據(jù)分析存儲(chǔ)在探索知識(shí)邊界、服務(wù)國(guó)計(jì)民生、加速商業(yè)變現(xiàn)等領(lǐng)域發(fā)揮著著重要的作用。華為OceanStor Pacific下一代高性能數(shù)據(jù)分析（HPDA）存儲(chǔ)，以超高密設(shè)計(jì)、面向混合負(fù)載、多協(xié)議互通，全面加速HPC向數(shù)據(jù)密集型演進(jìn)。目前已經(jīng)成功應(yīng)用于自動(dòng)駕駛、基因測(cè)序、氣象預(yù)測(cè)、衛(wèi)星遙感等眾多國(guó)內(nèi)外高性能計(jì)算場(chǎng)景企業(yè)及機(jī)構(gòu)。

原文標(biāo)題：為何新藥研發(fā)、基因測(cè)序、衛(wèi)星遙感的發(fā)展提速都需要它？

文章出處：【微信公眾號(hào)：華為】歡迎添加關(guān)注！文章轉(zhuǎn)載請(qǐng)注明出處。

責(zé)任編輯：haq