日B视频 亚洲,啪啪啪网站一区二区,91色情精品久久,日日噜狠狠色综合久,超碰人妻少妇97在线,999青青视频,亚洲一区二卡,让本一区二区视频,日韩网站推荐

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

算力呈指數級增長,服務器有哪些進展?

晶芯觀察 ? 來源:電子發(fā)燒友網 ? 作者:黃晶晶 ? 2023-05-17 09:07 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網報道(文/黃晶晶)人工智能的基座包括數據、算力和算法。其中算力更是數據和算法的支撐。各類模型基于數據量、算法的訓練和推理推動了算力需求。

根據OpenAI的測算數據,AI訓練運行所使用的算力每3-4個月增長一倍。AI訓練運行所使用的算力已增長超30萬倍。IDC數據顯示,2022年我國智能算力規(guī)模達到268百億億次/秒(EFLOPS),超過通用算力規(guī)模;預計未來5年我國智能算力規(guī)模的年復合增長率將達52.3%。

構筑算力必然離不開服務器的建設。作為全球頂級的人工智能/高性能計算服務器制造商和解決方案提供商,Supermicro公司日前向電子發(fā)燒友網表示,新業(yè)務合約有很大一部分來自人工智能/高性能計算領域,而且許多與ChatGPT有關。

Supermicro高管表示,人工智能界并不知道未來還會遇到多少計算密集型問題。以GPT-3為例,它需要323 Zetta FLOPS的算力和1750億個參數來訓練模型,更需要龐大的算力來執(zhí)行推理工作。更加智能的GPT-4將會有更多的參數,有可能達到一萬億甚至更多。

為了運轉這樣的大模型和大規(guī)模參數,如何有效運用服務器顯得十分重要,這關乎服務器的性價比選擇。Supermicro公司高管說到,當大量的GPU服務器集群起來時,人工智能/高性能計算應用的每一微秒都很重要。Supermicro設計開發(fā)了各種不同架構的GPU服務器,提升了CPU和GPU之間或從GPU到GPU的數據傳輸速度。通過合理選擇系統(tǒng)SKU,解決方案的設計可以將每個CPU/GPU核心利用到極致。從邊緣到云,從訓練到推理,當前市面上所需的人工智能/高性能計算應用,Supermicro都可以提供全方位的GPU服務器,能讓客戶充分利用計算資源上花費的每一分錢。

更大的服務器存儲空間


隨著CPU、GPU和內存技術的發(fā)展,現代計算集群處理數據的速度和數量不斷增加,因此有必要增強存儲性能,以便將數據饋送給應用時不會形成減緩整個系統(tǒng)的速度的瓶頸。

最近,Supermicro推出了超高性能、高密度PB級All-Flash NVMe服務器新機型。更新產品系列中初步推出的產品將在1U 16槽機架式安裝系統(tǒng)中支持高達1/2 PB的儲存空間,隨后的產品則將在2U 32槽機架式安裝系統(tǒng)中為IntelAMD PCIe Gen5平臺提供1 PB儲存空間。

Supermicro高管表示,Supermicro的Petascale All-Flash服務器提供業(yè)界領先的存儲性能和容量,可以減少滿足熱存儲和溫存儲要求所需的機架式系統(tǒng)數量,并通過諸多功能特點降低總體擁有成本。

具體來說,容量擴展,更廣泛的PCB有助于實現更靈活的NAND芯片布局;性能擴展,可擴展連接器設計,多鏈路寬度(x4、x8、x16),支持不同電源配置;熱效率,散熱和制冷管理改進;面向未來,通用連接器適用于各種尺寸規(guī)格,可以為未來幾代PCIe提供更加強大的信號完整性;解決方案范圍,各種功率配置(20W-70W),適用于更高容量/性能的固態(tài)硬盤。

“安裝了速度更快的固態(tài)硬盤之后,系統(tǒng)的平衡就變得更加重要。Supermicro擁有全新的NUMA平衡對稱架構,可以提供到驅動器的最短信號路徑、到存儲器的帶寬平衡和靈活的網絡選項,從而降低時延。最重要的是,對稱設計還有助于確保整個系統(tǒng)的氣流暢通無阻,因此可以使用更加強大的處理器?!盨upermicro高管說道。

桌面型GPU兼顧AI與液冷散熱

CPU/GUP/xPU也構成了系統(tǒng)設計的熱量挑戰(zhàn),各種處理器消耗的功率不斷攀升,另一方面,科研/醫(yī)療設施/金融/石油和天然氣企業(yè)需要人工智能/高性能計算來提高其專業(yè)競爭力。在這些企業(yè)中,有很多需要在員工工作的地點設置工作站或本地服務器。

基于這樣的需求,Supermicro推出功能強大、安靜且節(jié)能的NVIDIA加速人工智能(AI)開發(fā)平臺系列當中的首款裝置。全新的AI開發(fā)平臺SYS-751GE-TNRT-NV1是一款應用優(yōu)化的系統(tǒng),在開發(fā)及運行AI軟件時表現尤其出色。此外,這個性能強大的系統(tǒng)可以支持小團隊里的用戶同步運行訓練、推理和分析等工作負載。

獨立的液冷功能可滿足四個NVIDIA? A100 Tensor Core GPU和兩個第4代Intel Xeon可擴展處理器的散熱需求,在發(fā)揮完整性能的同時提高整體系統(tǒng)效率,并實現了在辦公環(huán)境下的安靜(約30dB)運行。

對于散熱的考量,Supermicro高管認為搭載NVIDIA A800等強大的協(xié)加速器、且聲壓級介于30~45分貝的工作站,必須采用液冷解決方案才能滿足這一需求。冷板式液冷在市場上經過了十多年的考驗,目前其成熟度和可靠性已經達到了數據中心大規(guī)模部署的水平。

創(chuàng)新技術驅動成長

早前,Supermicro就提出了觀察到的七大創(chuàng)新技術,他們包括高性能350W CPU和700W GPU、處理速度更快的DDR5內存、第五代PCI-E 5.0技術、Compute Express Link(CXL,開放式互聯標準)、400G高速網絡、新型固態(tài)硬盤和液冷技術。

簡言之就是更高的功耗和更快的數據傳輸速度。這就需要優(yōu)化功率效率、解決熱量挑戰(zhàn)、加強第五代PCIe、DDR5、高速網絡、無阻塞系統(tǒng)架構設計和部署等。

Supermicro高管指出,這些創(chuàng)新技術背后的一個共同點是熱量調度。更快的處理器頻率、更多的計算核心、更高速的網絡都會產生更多的熱量,這些熱量必須輸送到數據中心之外。他表示,正如我們預計的技術趨勢和產品路線圖所示,當前和新一代人工智能/高性能計算服務器采用的熱量解決方案必須比目前的空氣冷卻更加高效。

展望已經到來的AI爆發(fā)的時代,ChatGPT的需求日益增長,不僅推高了服務器的銷量,而且還推動新技術通過大規(guī)模部署而被普遍接納的機會。GPT提供的服務包括語言翻譯、聊天機器人、內容生成、語言分析、語音輔助等等。

要實現人工智能系統(tǒng)的所有關鍵技術,就需要足夠快速的服務器,并通過復雜的架構、用于維護工作的液冷管布置等將其聯網。這些專業(yè)技術知識意味著解決方案將不再作為一個個的服務器提供。完整的解決方案部署更像是一個具有機架級就緒水平的即插即用解決方案。

Supermicro將ChatGPT視為服務器市場增長的關鍵驅動力,未來我們會看到GPT服務的更多創(chuàng)新型用例。Supermicro已準備好面對這個趨勢,始終保持在AI服務器技術前沿,并提供創(chuàng)新的解決方案,使得客戶能夠加速他們的AI應用規(guī)劃,同時優(yōu)化總體擁有成本并通過綠色計算最大限度地減少對環(huán)境的影響。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯系本站處理。 舉報投訴
  • 服務器
    +關注

    關注

    14

    文章

    10371

    瀏覽量

    91774
  • AI
    AI
    +關注

    關注

    91

    文章

    41326

    瀏覽量

    302711
  • Supermicro
    +關注

    關注

    0

    文章

    35

    瀏覽量

    9724
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    成都匯陽投資關于AI 引爆需求,存儲芯片漲價周期來襲

    。2026年全球AI 服務器出貨量預計同比激增 180%,云廠 商資本開支同比提升40%至6000億美 元 ,建設的加速直接推動存儲芯片需求進入指數
    的頭像 發(fā)表于 03-27 17:12 ?511次閱讀

    爆發(fā)下的剛需賽道:AI服務器高頻高速連接需求迎爆發(fā)式增長

    當前,AI基建正進入全面爆發(fā)期,高頻高速連接作為AI服務器的核心零部件,承擔著短距離高速信號與電流傳輸的關鍵作用,其需求伴隨AI產業(yè)的快速擴張呈現幾何
    的頭像 發(fā)表于 03-20 14:07 ?978次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>爆發(fā)下的剛需賽道:AI<b class='flag-5'>服務器</b>高頻高速連接<b class='flag-5'>器</b>需求迎爆發(fā)式<b class='flag-5'>增長</b>

    曙光數創(chuàng)解鎖高密的核心鑰匙

    隨著需求的爆發(fā)式增長,CPU、GPU等核心部件性能不斷躍升,其功耗也指數攀升。目前,一臺
    的頭像 發(fā)表于 03-18 14:59 ?553次閱讀

    服務器電源中功率元器件的選型策略

    隨著AI需求的指數增長,數據中心GPU的單卡功耗已突破700W。一臺標準2U服務器搭載8張
    的頭像 發(fā)表于 03-10 14:31 ?546次閱讀

    高達 1570 TOPS!支持多硬盤的高服務器 CSB2-N10

    CSB2-N10服務器內置10個分布式計算節(jié)點,單節(jié)點可提供6-157TOPS,可選瑞芯微、能、NVIDIA等平臺。支持主流AI大模型的私有化部署、多種深度學習框架。擁有2個萬兆
    的頭像 發(fā)表于 01-06 16:33 ?797次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>高達 1570 TOPS!支持多硬盤的高<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>服務器</b> CSB2-N10

    高達 1100 TOPS!內置 Jetson AGX Orin 模組的高服務器

    萬兆網口,可擴展SATA3.0硬盤。配套智能管理系統(tǒng),標準的1U機架服務器機箱設計,廣泛適用于邊緣計算、大模型本地化、智慧城市、智慧醫(yī)療、智慧工業(yè)等產品和領域。提
    的頭像 發(fā)表于 12-17 16:31 ?853次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>高達 1100 TOPS!內置 Jetson AGX Orin 模組的高<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>服務器</b>

    液冷服務器成為AI黃金賽道!華為挺,兩大國際芯片巨頭下場

    2024年以來,全球AI液冷服務器快速增長,中國液冷服務器市場進展如何?液冷技術出現哪些主流路線?代表廠商的旗艦產品哪些?本文進行匯總。
    的頭像 發(fā)表于 11-27 09:22 ?7585次閱讀
    液冷<b class='flag-5'>服務器</b>成為AI黃金賽道!華為<b class='flag-5'>力</b>挺,兩大國際芯片巨頭下場

    湘軍,讓變成生產?

    腦極體
    發(fā)布于 :2025年11月25日 22:56:58

    AI 服務器備用電源:高效、可靠與智能的未來保障

    電子發(fā)燒友網綜合報道 隨著人工智能技術的飛速發(fā)展,AI 服務器已成為數據中心的核心引擎。然而,需求的指數
    的頭像 發(fā)表于 10-09 02:38 ?5497次閱讀

    天波科普:超過30T的邊緣計算服務器可以做什么?

    網關的能力邊界,也涉及到高低。那么,目前邊緣計算服務器到多少算高呢?以廣東天波AI邊緣計算盒子V3為例,
    的頭像 發(fā)表于 09-28 11:18 ?871次閱讀
    天波科普:<b class='flag-5'>算</b><b class='flag-5'>力</b>超過30T的邊緣計算<b class='flag-5'>服務器</b>可以做什么?

    多達 48 個計算節(jié)點!Firefly 推出 CSC2-N48 AI 服務器

    Firefly最新推出CSC2-N48服務器,內置48個分布式計算節(jié)點,單節(jié)點可提供6TOPS-157TOPS,可選瑞芯微、
    的頭像 發(fā)表于 08-20 16:37 ?1842次閱讀
    多達 48 個計算節(jié)點!Firefly 推出 CSC2-N48 AI <b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>服務器</b>

    新品 | 破局散熱困境!捷智5090 浸沒式液冷服務器全新來襲!

    需求爆發(fā)式增長的當下,服務器硬件適配困難與散熱不暢這兩大難題,一直困擾著許多用戶。不過,曙光已現!捷智
    的頭像 發(fā)表于 08-06 17:12 ?2413次閱讀
    新品 | 破局散熱困境!捷智<b class='flag-5'>算</b>5090 浸沒式液冷<b class='flag-5'>服務器</b>全新來襲!

    借勢 RISC-V與 AI 浪潮,元石智打造新范式

    在AI技術飛速發(fā)展的當下,需求指數增長,成為推動行業(yè)前行的核心動力。與此同時,RISC-
    的頭像 發(fā)表于 07-25 14:51 ?840次閱讀
    借勢 RISC-V與 AI 浪潮,元石智<b class='flag-5'>算</b>打造<b class='flag-5'>算</b><b class='flag-5'>力</b>新范式

    AI新基建背后的中國芯力量——中微愛芯服務器芯片國產化替代全景解讀

    人工智能(AI)技術正以顛覆性力量重塑全球產業(yè)圖景,從深度學習的復雜模型訓練到生成式AI的實時推理,其背后是海量數據與指數增長需求。
    的頭像 發(fā)表于 06-20 13:55 ?2143次閱讀
    AI<b class='flag-5'>算</b><b class='flag-5'>力</b>新基建背后的中國芯力量——中微愛芯<b class='flag-5'>服務器</b>芯片國產化替代全景解讀

    服務器多少錢一臺?價格因素與選購指南

    入門服務器可能只需幾千元,而高性能計算(HPC)或AI訓練專用服務器則可能高達數十萬元。一般來說,中小型企業(yè)常用的
    的頭像 發(fā)表于 06-17 09:45 ?3497次閱讀
    岳池县| 同仁县| 卓资县| 门头沟区| 封丘县| 高雄县| 东乡| 鄯善县| 贞丰县| 油尖旺区| 桂东县| 留坝县| 沂水县| 宜宾县| 唐河县| 桐柏县| 仪征市| 建平县| 阜平县| 资兴市| 内黄县| 句容市| 固原市| 钦州市| 耒阳市| 上犹县| 木里| 天全县| 疏勒县| 甘肃省| 腾冲县| 始兴县| 梁河县| 济南市| 乐昌市| 遂宁市| 博爱县| 渑池县| 萨嘎县| 聊城市| 吐鲁番市|