日B视频 亚洲,啪啪啪网站一区二区,91色情精品久久,日日噜狠狠色综合久,超碰人妻少妇97在线,999青青视频,亚洲一区二卡,让本一区二区视频,日韩网站推荐

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

AI服務(wù)器市場(chǎng)規(guī)模持續(xù)增加,國(guó)內(nèi)存在哪些算力瓶頸?

Carol Li ? 來(lái)源:電子發(fā)燒友網(wǎng)原創(chuàng) ? 作者:李彎彎 ? 2023-03-13 09:15 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)報(bào)道(文/李彎彎)近年來(lái),在全球數(shù)字化、智能化的浪潮下,智能手機(jī)自動(dòng)駕駛、數(shù)據(jù)中心、圖像識(shí)別等應(yīng)用推動(dòng) AI服務(wù)器市場(chǎng)迅速成長(zhǎng)。根據(jù) IDC 數(shù)據(jù),2021 年全球 AI 服務(wù)器市場(chǎng)規(guī)模已達(dá)到 145 億美元,并預(yù)計(jì) 2025 年將超過(guò) 260 億美元。

近段時(shí)間ChatGPT概念的火熱,更是對(duì)算力基礎(chǔ)設(shè)施的需求起到了帶動(dòng)作用。寧暢副總裁兼CTO趙雷此前在接受媒體采訪的時(shí)候表示,ChatGP的訓(xùn)練和部署,都需要大量智能計(jì)算數(shù)據(jù)存儲(chǔ)以及傳輸資源,計(jì)算機(jī)基礎(chǔ)設(shè)施、算力等上游技術(shù)將因此受益。

ChatGPT有著多達(dá)1750億個(gè)模型參數(shù)。在算力方面,GPT-3.5在訓(xùn)練階段消耗的總算力約3640PF-days。在應(yīng)用時(shí),ChatGPT仍然需要大算力的服務(wù)器支持。ChatGPT的持續(xù)爆火也為AIGC帶來(lái)全新增量,行業(yè)對(duì)AI模型訓(xùn)練所需要的算力支持提出了更高要求。

寧暢是一家集研發(fā)、生產(chǎn)、部署、運(yùn)維一體的服務(wù)器廠商,及IT系統(tǒng)解決方案提供商。該公司早早就開(kāi)始著重發(fā)力于人工智能服務(wù)器和液冷服務(wù)器。趙雷表示,公司目前在用的、在研的人工智能和液冷服務(wù)器,包括明年還將推出的浸沒(méi)液冷服務(wù)器,剛好跟上算力高速增長(zhǎng)的市場(chǎng)需求。公司隨時(shí)準(zhǔn)備著為客戶提供合適的高算力產(chǎn)品和解決方案。

在人工智能服務(wù)器方面,寧暢已經(jīng)推出多款產(chǎn)品,包括X620 G50、X660 G45、X640 G40、X620 G40。X620 G50適用于機(jī)器學(xué)習(xí)、AI推理、云計(jì)算、高性能計(jì)算等場(chǎng)景;660 G45是專門(mén)為深度學(xué)習(xí)訓(xùn)練開(kāi)發(fā)的高性能計(jì)算平臺(tái);X640 G40是兼?zhèn)溆?xùn)練與推理功能的全能型GPU服務(wù)器;X620 G40性能提升的同時(shí)支持PCIe 4.0高速總線技術(shù),完美支持NVIDIA各類最新型GPU加速服務(wù),是最為理想的AI推理平臺(tái)。

在液冷服務(wù)器方面,寧暢推出了三款冷板式液冷服務(wù)器,包括產(chǎn)品B5000 G4 LP、X660 G45 LP、R620 G40 LP,范圍覆蓋了高密度、通用機(jī)架以及人工智能服務(wù)器產(chǎn)品,可滿足科學(xué)計(jì)算、AI訓(xùn)練、云計(jì)算等眾多IT應(yīng)用場(chǎng)景,可滿足用戶不同需求。

作為服務(wù)器廠商需要給下游互聯(lián)網(wǎng)客戶提供怎樣的產(chǎn)品和服務(wù)呢?對(duì)于服務(wù)器廠商來(lái)說(shuō),不只是要提供服務(wù)器硬件或者基礎(chǔ)設(shè)施,還要有對(duì)應(yīng)的服務(wù)能力。

從服務(wù)層面來(lái)看,在用戶現(xiàn)場(chǎng)會(huì)關(guān)注什么呢,比如說(shuō)核心業(yè)務(wù),會(huì)關(guān)注業(yè)務(wù)的在線率,不管服務(wù)器壞不壞,整個(gè)業(yè)務(wù)的運(yùn)行是要有彈性的、靈活的,不會(huì)給客戶造成影響的。就以百度、微信這些業(yè)務(wù)為例,大家?guī)缀醪粫?huì)看到微信不能用了,或者百度搜索不反饋結(jié)果了。

趙雷表示,對(duì)于服務(wù)器廠商來(lái)說(shuō),要做的是在服務(wù)層面能夠快速響應(yīng),不管是采用現(xiàn)場(chǎng)備件模式,機(jī)房備機(jī)模式,還是駐場(chǎng)人員巡檢的模式,都需要做到24小時(shí)的快速響應(yīng)。這是純粹的服務(wù)方面,也就是說(shuō),在互聯(lián)網(wǎng)搭建業(yè)務(wù)連續(xù)性良好的基礎(chǔ)上,服務(wù)器廠商能夠?qū)⒐收虾涂焖?a target="_blank">維修的能力做到極致,有效地支撐客戶的前端應(yīng)用。

從產(chǎn)品層面來(lái)看,對(duì)于每個(gè)硬件子系統(tǒng)在設(shè)計(jì)研發(fā)過(guò)程中,都需要從易維修和低故障角度去思考如何將產(chǎn)品做得更好。寧暢在這方面做了很多工作:首先,現(xiàn)在冷卻方式是影響故障率比較重要的因素,因?yàn)闇囟忍吖收下示蜁?huì)高,寧暢的精密風(fēng)冷和液冷的方式,能夠有效地降低芯片和對(duì)應(yīng)組件的故障率。

其次,其精密六維減震模式,能夠有效提升硬盤(pán)的性能,降低故障率;接著是,采用DAE的散熱器,從散熱的維度有效降低光模塊的故障率。同時(shí)CPU、GPU的液冷可以有效降低CPU、GPU的故障率;通過(guò)內(nèi)存的漏斗,內(nèi)存的故障篩選或者在線隔離技術(shù),有效地降低內(nèi)存的故障率;另外還在板卡走線、機(jī)箱結(jié)構(gòu)方面進(jìn)行了優(yōu)化設(shè)計(jì)。

此外還有整機(jī)BMC易管理特性,趙雷認(rèn)為,任何東西不可能不壞,有毛病是不可避免的,壞了以后,如何快速通知客戶或者維護(hù)人員維修時(shí)關(guān)鍵。BMC有一個(gè)完善的通知機(jī)制,郵件自動(dòng)通知、SMP遠(yuǎn)程告警、IPMI告警等。寧暢按照互聯(lián)網(wǎng)客戶的需求定制,將其融入整個(gè)機(jī)房的運(yùn)維系統(tǒng),出現(xiàn)故障以后可以第一時(shí)間通知去維修。

雖然目前國(guó)內(nèi)有不少優(yōu)秀的服務(wù)器、云廠商等,不過(guò)整體來(lái)看,國(guó)內(nèi)的算力仍然存在瓶頸,比如,總體算力不夠,算力的分布不平均。部分客戶算力過(guò)剩,部分客戶算力不足。或者A時(shí)間算力過(guò)剩,B時(shí)間算力不足,這是算力協(xié)調(diào)的問(wèn)題。

短期來(lái)看這個(gè)問(wèn)題要靠云技術(shù)解決,長(zhǎng)期來(lái)看是要提供過(guò)剩的算力。也就是說(shuō),需要云技術(shù)去平衡協(xié)調(diào)算力不均勻的問(wèn)題,還需要提供算力、算力效率等。

再比如算力成本高的問(wèn)題,雖然目前每單位算力單價(jià)下降了,但是過(guò)去幾年服務(wù)器的平均售價(jià)一直上漲。趙雷認(rèn)為,可能算力類型單一,不太能夠有效地支撐高速增長(zhǎng)的模式,可能要有各種各樣不同類型的算力。比如ChatGPT,是不是可以做針對(duì)GPT模型專門(mén)的ASIC。算力的應(yīng)用類型越窄,它的效率就會(huì)越高,越通用,效率就越低。

整體而言,過(guò)去幾年在全球數(shù)字化、智能化浪潮下,市場(chǎng)對(duì)算力的需求不斷增加。ChatGP的出現(xiàn)更是讓行業(yè)對(duì)算力提出了新的要求。國(guó)內(nèi)服務(wù)器廠商在對(duì)人工智能行業(yè)提供算力支持方面已經(jīng)有所準(zhǔn)備。不過(guò)從目前的情況來(lái)看,國(guó)內(nèi)在算力方面仍然存在一些瓶頸,比如算力分布不均勻,成本高等問(wèn)題。后續(xù)還需業(yè)界共同去探討解決。
聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 服務(wù)器
    +關(guān)注

    關(guān)注

    14

    文章

    10377

    瀏覽量

    91777
  • AI
    AI
    +關(guān)注

    關(guān)注

    91

    文章

    41379

    瀏覽量

    302753
  • 算力
    +關(guān)注

    關(guān)注

    2

    文章

    1699

    瀏覽量

    16841
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    AI服務(wù)器PCBA加工技術(shù)解析:高時(shí)代的核心制造能力

    AI服務(wù)器PCBA加工 是AI服務(wù)器硬件制造的重要環(huán)節(jié),也是支撐人工智能基礎(chǔ)設(shè)施的重要技術(shù)能
    的頭像 發(fā)表于 04-16 22:57 ?162次閱讀

    爆發(fā)下的剛需賽道:AI服務(wù)器高頻高速連接需求迎爆發(fā)式增長(zhǎng)

    賽道。全球AI智能需求持續(xù)飆升,2026年同比增長(zhǎng)超300%,國(guó)內(nèi)
    的頭像 發(fā)表于 03-20 14:07 ?983次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>爆發(fā)下的剛需賽道:<b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>高頻高速連接<b class='flag-5'>器</b>需求迎爆發(fā)式增長(zhǎng)

    邊緣AI臨界點(diǎn):深度解析176TOPS香橙派AI Station的產(chǎn)業(yè)價(jià)值

    內(nèi)存革命:48GB/96GB LPDDR4X 背后的帶寬博弈 很多開(kāi)發(fā)者容易陷入唯論的誤區(qū),但在實(shí)際部署大模型時(shí),內(nèi)存容量和帶寬往往是真正的性能
    發(fā)表于 03-10 14:19

    AI爆發(fā)催生元器件短缺,智芯谷一站式供應(yīng)如何破局?

    “GPU緊缺”只是AI瓶頸的冰山一角——高端電容供貨周期延長(zhǎng)至40周、高速內(nèi)存價(jià)格季度漲幅超30%、
    的頭像 發(fā)表于 01-27 11:23 ?884次閱讀
    <b class='flag-5'>AI</b><b class='flag-5'>算</b><b class='flag-5'>力</b>爆發(fā)催生元器件短缺,智芯谷一站式供應(yīng)如何破局?

    高達(dá) 1570 TOPS!支持多硬盤(pán)的高服務(wù)器 CSB2-N10

    CSB2-N10服務(wù)器內(nèi)置10個(gè)分布式計(jì)算節(jié)點(diǎn),單節(jié)點(diǎn)可提供6-157TOPS,可選瑞芯微、能、NVIDIA等平臺(tái)。支持主流AI大模型
    的頭像 發(fā)表于 01-06 16:33 ?801次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>高達(dá) 1570 TOPS!支持多硬盤(pán)的高<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>服務(wù)器</b> CSB2-N10

    2025年市場(chǎng)規(guī)模將達(dá)290億!AI 玩具成行業(yè)新風(fēng)口

    工信部最新發(fā)布會(huì)釋放重磅信號(hào):2024 年我國(guó) AI 玩具市場(chǎng)規(guī)模達(dá) 246 億元,2025 年預(yù)計(jì)飆升至 290 億元!
    的頭像 發(fā)表于 11-20 17:48 ?774次閱讀

    覺(jué)醒 · AI共生——上海永銘電子2025AI服務(wù)器電容應(yīng)用專題會(huì)議圓滿落幕

    隨著人工智能浪潮席卷全球,AI正以前所未有的速度爆發(fā)式增長(zhǎng)。在這場(chǎng)決定未來(lái)的技術(shù)競(jìng)速中,穩(wěn)定、高效、可靠的電力供應(yīng)是基石的核心。而電
    的頭像 發(fā)表于 11-03 14:00 ?1153次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>覺(jué)醒 · <b class='flag-5'>AI</b>共生——上海永銘電子2025<b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>電容應(yīng)用專題會(huì)議圓滿落幕

    天波科普:超過(guò)30T的邊緣計(jì)算服務(wù)器可以做什么?

    網(wǎng)關(guān)的能力邊界,也涉及到高低。那么,目前邊緣計(jì)算服務(wù)器到多少算高呢?以廣東天波AI邊緣
    的頭像 發(fā)表于 09-28 11:18 ?876次閱讀
    天波科普:<b class='flag-5'>算</b><b class='flag-5'>力</b>超過(guò)30T的邊緣計(jì)算<b class='flag-5'>服務(wù)器</b>可以做什么?

    不夠、交付太慢?捷智裸金屬租賃對(duì)標(biāo)物理機(jī)性能,讓你立馬用上高!

    2025年國(guó)產(chǎn)大模型升級(jí)帶動(dòng)租賃需求爆發(fā),高性能服務(wù)器“一機(jī)難求”。中研普華預(yù)測(cè),今年我國(guó)
    的頭像 發(fā)表于 09-12 20:06 ?1545次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>不夠、交付太慢?捷智<b class='flag-5'>算</b>裸金屬租賃對(duì)標(biāo)物理機(jī)性能,讓你立馬用上高<b class='flag-5'>算</b><b class='flag-5'>力</b>!

    達(dá)實(shí)智能如何打造綠色中心標(biāo)桿

    液冷是計(jì)算機(jī)科學(xué)技術(shù)領(lǐng)域通過(guò)液體介質(zhì)實(shí)現(xiàn)電子設(shè)備散熱的核心技術(shù)。根據(jù)IDC(國(guó)際數(shù)據(jù)公司)發(fā)布的數(shù)據(jù),2025全年中國(guó)液冷服務(wù)器市場(chǎng)規(guī)模將達(dá)到33.9億美元,預(yù)計(jì)2025年至2029年,中國(guó)液冷服務(wù)器
    的頭像 發(fā)表于 09-09 16:44 ?1847次閱讀

    多達(dá) 48 個(gè)計(jì)算節(jié)點(diǎn)!Firefly 推出 CSC2-N48 AI 服務(wù)器

    Firefly最新推出CSC2-N48服務(wù)器,內(nèi)置48個(gè)分布式計(jì)算節(jié)點(diǎn),單節(jié)點(diǎn)可提供6TOPS-157TOPS,可選瑞芯微、
    的頭像 發(fā)表于 08-20 16:37 ?1848次閱讀
    多達(dá) 48 個(gè)計(jì)算節(jié)點(diǎn)!Firefly 推出 CSC2-N48 <b class='flag-5'>AI</b> <b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>服務(wù)器</b>

    AI 服務(wù)器電源如何迭代升級(jí)?

    AI 需求增長(zhǎng)的今天,AI 服務(wù)器電源正陷入 “性能瓶頸與國(guó)產(chǎn)替代并行、場(chǎng)景適配與技術(shù)創(chuàng)新
    的頭像 發(fā)表于 06-23 14:51 ?1743次閱讀

    泰克科技解析AI服務(wù)器電源架構(gòu)的技術(shù)演進(jìn)

    2025年,AI熱潮持續(xù)升溫。大模型的參數(shù)規(guī)模越發(fā)驚人,訓(xùn)練周期從月級(jí)壓縮至周級(jí),ChatGPT、DeepSeek、Sora、Grok等一眾生成式AI應(yīng)用輪番登場(chǎng),讓“
    的頭像 發(fā)表于 06-07 09:06 ?2833次閱讀
    泰克科技解析<b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>電源架構(gòu)的技術(shù)演進(jìn)

    淺談 IPv6 行業(yè)市場(chǎng)規(guī)模與增長(zhǎng)趨勢(shì)

    年,IPv6市場(chǎng)規(guī)模將突破300億美元。全球IPv6市場(chǎng)規(guī)模及增長(zhǎng)預(yù)測(cè)從區(qū)域市場(chǎng)來(lái)看,亞太地區(qū)將成為全球IPv6市場(chǎng)規(guī)模增長(zhǎng)最快的區(qū)域,預(yù)計(jì)到2030年,其
    的頭像 發(fā)表于 05-20 09:17 ?1367次閱讀
    淺談 IPv6 行業(yè)<b class='flag-5'>市場(chǎng)規(guī)模</b>與增長(zhǎng)趨勢(shì)

    智能基建:RAKsmart如何賦能下一代AI開(kāi)發(fā)工具

    當(dāng)今,AI模型的復(fù)雜化與規(guī)模化對(duì)提出了前所未有的要求。然而,傳統(tǒng)的基礎(chǔ)設(shè)施在靈活性、成本
    的頭像 發(fā)表于 05-07 09:40 ?639次閱讀
    武城县| 博白县| 湄潭县| 融水| 石楼县| 嘉黎县| 敖汉旗| 兖州市| 稻城县| 安龙县| 汤原县| 青铜峡市| 孟连| 英山县| 福泉市| 白朗县| 齐齐哈尔市| 十堰市| 淮阳县| 鄂尔多斯市| 克什克腾旗| 和龙市| 桓台县| 淮阳县| 蓬安县| 舒城县| 新绛县| 井研县| 铁力市| 梓潼县| 江口县| 九龙县| 叶城县| 龙井市| 库伦旗| 金门县| 镇江市| 萨迦县| 海盐县| 五常市| 美姑县|