日B视频 亚洲,啪啪啪网站一区二区,91色情精品久久,日日噜狠狠色综合久,超碰人妻少妇97在线,999青青视频,亚洲一区二卡,让本一区二区视频,日韩网站推荐

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

杉巖數(shù)據(jù)主要解決了機(jī)器學(xué)習(xí)對于高吞吐和低時延的需求問題

lhl545545 ? 來源:DOIT ? 作者:朱 朋博 ? 2020-09-10 14:03 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

2EB最大單一存儲集群

普通個人電腦硬盤一般為500GB,1TB大約等于兩塊電腦盤,1 PB大約等于2000塊電腦硬盤,1EB大約相當(dāng)于兩百萬塊個人電腦的硬盤,1EB數(shù)據(jù)量假設(shè)用的10TB磁盤的話也需要10萬塊,如此規(guī)模的硬盤摞在一起相比也是非常壯觀,更何況要在企業(yè)數(shù)據(jù)中心交付的話,需要非常多的硬件設(shè)備。

在杉巖數(shù)據(jù)的品牌戰(zhàn)略暨新品發(fā)布會上,CEO陳堅介紹說,杉巖數(shù)據(jù)最大單一存儲集群規(guī)模達(dá)到了2EB。按照上述粗獷的估算方法,大概需要20萬塊硬盤,一塊3.5寸的盤大約600g,20萬塊大概是12噸,普通轎車的重量大約在1.5到2噸,算下來就是6到8輛轎車的重量,夠形象了吧。

杉巖數(shù)據(jù)CEO

韓信點(diǎn)兵,多多益善,大規(guī)模軍隊作戰(zhàn)難點(diǎn)在于如何高效地組織起有效的進(jìn)攻和防守,對將領(lǐng)的要求非常高。而杉巖數(shù)據(jù)組織20萬塊硬盤的操作同樣考慮組織能力,杉巖靠的是軟件層次上的創(chuàng)新,將成千上萬個硬盤組織起來構(gòu)成一個集群,在技術(shù)上也是非常大的挑戰(zhàn)。

2EB最大單一存儲集群的出現(xiàn),是用戶用行動證明了對于杉巖數(shù)據(jù)這樣一家存儲公司的認(rèn)可。如此大規(guī)模的部署案例,這家分布式存儲公司再也不能低調(diào)了。

杉巖數(shù)據(jù)是誰?

杉巖數(shù)據(jù)是一家來自深圳的軟件定義存儲廠商,杉巖數(shù)據(jù)的名字音譯自SandStone(砂巖),砂巖是一種沉積巖,主要組成是地殼最常見的成分,而杉巖數(shù)據(jù)做的軟件定義存儲依靠的是最常見的通用服務(wù)器,在此基礎(chǔ)上加入軟件存儲系統(tǒng)。

IDC給出的市場數(shù)據(jù)來看,杉巖數(shù)據(jù)在中國對象存儲市場份額排在第二位,在塊存儲市場也排在第五位,整體軟件定義存儲市場份額能達(dá)到第六位,是一家主流的軟件定義存儲廠商,在市場上扮演重要角色。

企業(yè)級存儲市場通常需要慢工出細(xì)活兒。杉巖數(shù)據(jù)成立于2014年,僅僅六年后的2020年就有如此成績還是非常令人羨慕的,不久前,杉巖數(shù)據(jù)還宣布獲得了1.5億人民幣的B+輪融資,收獲市場和資本雙重認(rèn)可,在品牌戰(zhàn)略暨新品發(fā)布會上,還有有包括華為和阿里云等技術(shù)合作伙伴,以及許多行業(yè)用戶站臺。

杉巖數(shù)據(jù)的崛起之路

2014年,在深圳一個不到三十平的民房里,有幾位碼農(nóng)在電腦前忙碌著,一位中年男子,一會兒負(fù)責(zé)做飯,一會兒負(fù)責(zé)掃地,燈泡壞了估計還是他負(fù)責(zé)換,這位中年男子就是陳堅,而這,就是杉巖數(shù)據(jù)創(chuàng)始成員最早的辦公地點(diǎn),團(tuán)隊成員除了陳堅以外,另外幾位小伙伴全都負(fù)責(zé)寫代碼。

杉巖數(shù)據(jù)的初始創(chuàng)始成員包括陳堅在內(nèi),主要都來自華為的企業(yè)存儲業(yè)務(wù)部門,原本做的業(yè)務(wù)就與分布式存儲相關(guān),對普通人來說從華為出走其實(shí)需要不少勇氣,華為待遇其實(shí)非常好,2014年的華為存儲也正處于快速成長期,眼看著業(yè)務(wù)蒸蒸日上其實(shí)想走更難,創(chuàng)業(yè)很累不說,還要很多不確定性,除非是對要做的事情非常有把握。

2014年,開源云的浪潮襲來,以O(shè)penStack為代表的開源云方案收獲大量擁躉,中國技術(shù)才趕上了這波浪潮,與全世界開源愛好者一道做起了開源云,軟件開發(fā)者越發(fā)意識到了軟件所能創(chuàng)造的價值,有人說軟件能定義一切,對于做基礎(chǔ)技術(shù)的人而言,軟件定義存儲也從概念一步步變?yōu)楝F(xiàn)實(shí)。

Ceph作為OpenStack推薦的存儲方案,也很快變得家喻戶曉,使用OpenStack和Ceph的企業(yè)用戶也非常多,以電信運(yùn)營商為主的大型企業(yè)客戶在大規(guī)模使用OpenStack方案。同時,國內(nèi)出現(xiàn)了許多基于Ceph的開源存儲解決方案供應(yīng)商,杉巖數(shù)據(jù)就是其中的典型代表。

基于Ceph開源項目做企業(yè)級存儲方案并不容易,Ceph只是技術(shù)方案,而企業(yè)對于存儲方案的穩(wěn)定性和可靠性要求非常高,將技術(shù)轉(zhuǎn)變?yōu)榻?jīng)過驗(yàn)證的產(chǎn)品方案需要經(jīng)過長期的打磨過程,各種辛苦只有杉巖自己最懂。

2020年8月18日,杉巖數(shù)據(jù)六周年前夕召開的這次品牌戰(zhàn)略暨新品發(fā)布會,是杉巖數(shù)據(jù)第一次正式的發(fā)布會,標(biāo)志著杉巖數(shù)據(jù)正式走上臺前,結(jié)束了低調(diào)期。

CEO陳堅將過去六年分為兩個階段,2014年到2017年期間是產(chǎn)品打磨期,打磨產(chǎn)品的可靠性、穩(wěn)定性、可用性和可維護(hù)性,先是2015年發(fā)布了杉巖統(tǒng)一存儲平臺USP,隨后2016年發(fā)布海量對象存儲MOS,應(yīng)對海量非結(jié)構(gòu)化數(shù)據(jù)存儲的場景。這一階段積累了第一批行業(yè)頭部客戶,比如中國移動、深圳供電局、廣發(fā)證券等。

第二階段,產(chǎn)品趨于成熟的同時開始大規(guī)模推向市場,很快,市場取得了突飛猛進(jìn)的成果,在金融、電力、能源、醫(yī)療、教育等等十多個行業(yè)和20多個應(yīng)用場景收獲500+客戶,上線的總?cè)萘砍^了3000PB,單一集群數(shù)據(jù)規(guī)模2EB達(dá)到中國最大。

此外,杉巖還是中國云計算標(biāo)準(zhǔn)單位成員之一,中國去年發(fā)布的云存儲的國標(biāo)中杉巖是參與標(biāo)準(zhǔn)制定的單位,行業(yè)影響力提升。

從2014年到2020年,杉巖數(shù)據(jù)在6年內(nèi)總共完成了4輪融資,包括天璣數(shù)據(jù)、順為資本、廣發(fā)乾和、深圳擔(dān)保集團(tuán)、中遠(yuǎn)海運(yùn)、襄禾資本以及無錫金投都是杉巖數(shù)據(jù)的投資方,有行業(yè)和政府方面的資金,資金方全都是以人民幣的方式注資。

陳堅強(qiáng)調(diào),杉巖數(shù)據(jù)是一家技術(shù)驅(qū)動型公司,200名員工中有60%都是研發(fā)人員,但企業(yè)級存儲產(chǎn)品的研發(fā)要靠技術(shù)更要靠經(jīng) 驗(yàn),杉巖數(shù)據(jù)的核心研發(fā)人員,平均在存儲領(lǐng)域研發(fā)經(jīng)驗(yàn)在7年以上,杉巖數(shù)據(jù)有一支強(qiáng)大的研發(fā)隊伍,為杉巖數(shù)據(jù)貢獻(xiàn)了40多項發(fā)明和專利。

如今的杉巖數(shù)據(jù)儼然已是一家獨(dú)立的存儲新勢力。

杉巖數(shù)據(jù)的發(fā)展要點(diǎn)與技術(shù)創(chuàng)新

作為存儲行業(yè)的老兵,陳堅將存儲發(fā)展總結(jié)為三個階段,第一階段的重點(diǎn)是存好數(shù)據(jù),第二階段是管理好各種數(shù)據(jù),當(dāng)下所處的第三階段是用好數(shù)據(jù),這個時代的特征是智能。陳堅認(rèn)為,真正的智能存儲應(yīng)該具有數(shù)據(jù)感知和應(yīng)用感知的能力,存儲系統(tǒng)能夠幫助上層應(yīng)用做數(shù)據(jù)的處理和智能的調(diào)度,幫助應(yīng)用做加速和優(yōu)化。

智能是杉巖數(shù)據(jù)未來的一大發(fā)展方向,發(fā)布會現(xiàn)場,杉巖數(shù)據(jù)發(fā)布了新一代杉巖融合智能大數(shù)據(jù)存儲解決方案,另外一個重點(diǎn)是國產(chǎn)自主可控,為此,杉巖發(fā)布了華巖安全存儲一體化解決方案。

杉巖數(shù)據(jù)的對象存儲是傳統(tǒng)強(qiáng)項,杉巖數(shù)據(jù)CTO邱尚高介紹了對象存儲的最新消息。新的對象存儲V6版本在存的能力上有突破,文件規(guī)模理論上可以達(dá)到1000億,單桶文件數(shù)支持30億個。通常情況下,文件數(shù)的增多將影響到性能表現(xiàn),但杉巖數(shù)據(jù)的整體系統(tǒng)性能表現(xiàn)非常平穩(wěn),性能僅下降10%。

與阿里云深度合作構(gòu)建強(qiáng)化版混合云。以前許多混合云都只是能將本地存儲的數(shù)據(jù)歸檔到公有云上,而杉巖數(shù)據(jù)與阿里云構(gòu)建的混合云能進(jìn)行雙向數(shù)據(jù)同步,不僅如此,業(yè)務(wù)還能同時在公有云和私有云上運(yùn)行,還可以進(jìn)行業(yè)務(wù)的平滑遷移。

強(qiáng)化異構(gòu)納管能力。在異構(gòu)方面,V6版本能夠納管如開源的對象存儲、金融行業(yè)應(yīng)用較多的Documentum、FileNet、 FastDFS等第三方的對象存儲,幫助客戶縮短數(shù)據(jù)遷移時間,保護(hù)用戶現(xiàn)有投資。

智能處理引擎功能。在杉巖對象存儲里面,可以用插件對各種處理組件(OCR識別,或者全文識別,或者人臉識別、車輛識別、機(jī)器學(xué)習(xí)領(lǐng)域等等)進(jìn)行結(jié)合,將非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)化為結(jié)構(gòu)化數(shù)據(jù),提升數(shù)據(jù)的價值和使用效率,為AI、機(jī)器學(xué)習(xí)等領(lǐng)域的業(yè)務(wù)賦能。

MosFS主要解決了機(jī)器學(xué)習(xí)對于高吞吐和低時延的需求問題,在上層利用內(nèi)存以及SSD等技術(shù)來加速數(shù)據(jù)訪問。同時,結(jié)合業(yè)務(wù)感知能力,為數(shù)據(jù)做一層高速緩存來保障機(jī)器學(xué)習(xí)的性能。MosFS還可以把計算存儲的本地存盤組成一個分布式的緩存層,加快訓(xùn)練速度。

面向大數(shù)據(jù),杉巖對象存儲通過替換傳統(tǒng)HDFS存儲來降低成本并提高性能,做法是提供兼容HDFS的接口,把HDFS的數(shù)據(jù)歸集到統(tǒng)一的存儲上,幫助客戶實(shí)現(xiàn)非結(jié)構(gòu)化數(shù)據(jù)跟半結(jié)構(gòu)化數(shù)據(jù)或者結(jié)構(gòu)化數(shù)據(jù)的完全統(tǒng)一。

華巖國產(chǎn)化一體機(jī)是一款統(tǒng)一存儲產(chǎn)品,這款產(chǎn)品是基于統(tǒng)一存儲產(chǎn)品軟件構(gòu)建的產(chǎn)品,底層采用國產(chǎn)處理器和國產(chǎn)服務(wù)器,對外提供標(biāo)準(zhǔn)的塊存儲以及標(biāo)準(zhǔn)的文件接口和對象接口,滿足復(fù)合型的業(yè)務(wù)要求。目前該產(chǎn)品底層處理器支持華為鯤鵬,飛騰,海光,操作系統(tǒng)采用基于信創(chuàng)的麒麟和統(tǒng)信操作系統(tǒng)。

結(jié)語

2020年8月的這次品牌戰(zhàn)略暨新品發(fā)布會是杉巖數(shù)據(jù)第一次正式發(fā)布會,高調(diào)介紹2EB最大單一存儲集群的項目,高調(diào)進(jìn)行產(chǎn)品發(fā)布,這意味著韜光養(yǎng)晦的日子正式告一段落了。
責(zé)任編輯:pj

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 數(shù)據(jù)
    +關(guān)注

    關(guān)注

    8

    文章

    7352

    瀏覽量

    95073
  • 人臉識別
    +關(guān)注

    關(guān)注

    77

    文章

    4134

    瀏覽量

    88807
  • 阿里云
    +關(guān)注

    關(guān)注

    3

    文章

    1046

    瀏覽量

    45904
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    RDMA設(shè)計64:數(shù)據(jù)吞吐量性能測試分析

    滿足項目設(shè)計需求,實(shí)現(xiàn)設(shè)計目標(biāo)。此外的,麥洛斯 CX455-A 網(wǎng)卡工作在 Ethernet 物理層模式下時,存在一定程度上的理論速率降低現(xiàn)象,理論極限速率約為 98.5Gbps。故本設(shè)計實(shí)現(xiàn)的 RoCE v2高速傳輸系統(tǒng)數(shù)據(jù)
    發(fā)表于 05-09 07:54

    鋒國際與銀河通用機(jī)器人簽署戰(zhàn)略合作協(xié)議

    4月13日,鋒國際與銀河通用機(jī)器人在北京正式簽署戰(zhàn)略合作協(xié)議。雙方將以智能制造與具身智能的深度融合為核心方向,聚焦工業(yè)場景規(guī)?;涞?b class='flag-5'>需求展開全方位協(xié)同。
    的頭像 發(fā)表于 04-16 15:43 ?331次閱讀

    愛立信與軟銀聯(lián)合打造可靠的通信網(wǎng)絡(luò)

    軟銀與愛立信近日宣布雙方已成功開展一項概念驗(yàn)證,旨在打造、可靠的通信網(wǎng)絡(luò),以滿足物理人工智能*1需求
    的頭像 發(fā)表于 04-11 14:22 ?893次閱讀

    再談低溫?zé)Y(jié)銀的應(yīng)用:從春晚四家機(jī)器人出鏡的幕后推手說起

    未來》和《立上游》:**MagicBot Z1/Gen1+MagicDog 四足,集群伴舞、多機(jī)協(xié)同,主打快速響應(yīng)+延遲+集成。 **松動力:《奶奶的最愛》:**E1/N2/Bumi+仿生
    發(fā)表于 02-17 14:07

    龍芯中科與宏科技完成產(chǎn)品適配互認(rèn)證

    近日,龍芯中科技術(shù)股份有限公司與杭州宏科技股份有限公司完成基于龍芯3C6000處理器平臺對宏分布式存儲系統(tǒng)的適配與性能驗(yàn)證。測試結(jié)果表明,宏分布式存儲產(chǎn)品在龍芯3C6000平臺上運(yùn)行穩(wěn)定、性能優(yōu)異,標(biāo)志著雙方在國產(chǎn)自主計算
    的頭像 發(fā)表于 01-23 17:08 ?1003次閱讀
    龍芯中科與宏<b class='flag-5'>杉</b>科技完成產(chǎn)品適配互認(rèn)證

    瑞盟新品推薦MS51224 /16位、雙通道、延時、同步采樣SAR ADC

    MS51224是一款16位、雙通道、延時、同步采樣模數(shù)轉(zhuǎn)換器(SAR ADC),具有集成的內(nèi)部參考和參考電壓緩沖器。榮獲“ASPENCORE 2025年度放大器/數(shù)據(jù)轉(zhuǎn)換器產(chǎn)品”獎. 主要
    發(fā)表于 01-23 14:09

    軟銀、愛立信、通共同測試下一代5G能力(含L4S)

    與穩(wěn)定通信 ? 此次測試三家公司在在東京都市區(qū)的5G SA商用網(wǎng)絡(luò)上驗(yàn)證多項5G及5G-A技術(shù),包括、低損耗、可擴(kuò)展吞吐量(L4S) 01 測試概述 作為一個應(yīng)用案例,三家公司
    的頭像 發(fā)表于 01-21 18:23 ?9397次閱讀

    用“分區(qū)”來面對超大數(shù)據(jù)集和超大吞吐

    分區(qū)(partitions) 也被稱為 分片(sharding),通常采用對數(shù)據(jù)進(jìn)行分區(qū)的方式來增加系統(tǒng)的 可伸縮性,以此來面對非常大的數(shù)據(jù)集或非常吞吐量,避免出現(xiàn)熱點(diǎn)。
    的頭像 發(fā)表于 12-30 16:40 ?301次閱讀
    用“分區(qū)”來面對超大<b class='flag-5'>數(shù)據(jù)</b>集和超大<b class='flag-5'>吞吐</b>量

    WiFi7速率怎么算?一個公式看懂 46Gbps 從何而來

    、機(jī)場、鐵站、體育館等場景上網(wǎng)密度、并發(fā)量大,WiFi 7通過靈活的頻譜調(diào)度與干擾抑制,改善多用戶并發(fā)與空口效率,降低網(wǎng)絡(luò)波動,確保在高密度環(huán)境下的穩(wěn)定連接和
    發(fā)表于 12-09 11:42

    萬元人形機(jī)器人破局者:松動力靠的是什么?

    電子發(fā)燒友網(wǎng)綜合報道 前不久,松動力在一場線上媒體溝通會上正式發(fā)布全球首款定價萬元以內(nèi)的高性能人形機(jī)器人“小布米Bumi”,限時預(yù)售價格為9998元。這一跌破萬元的定價,不僅刷新公眾對人形
    的頭像 發(fā)表于 11-09 04:08 ?6174次閱讀

    RK3576機(jī)器人核心:三屏異顯+八路攝像頭,重塑機(jī)器人交互與感知

    瑞芯微RK3576 AIoT處理器處理器憑借其卓越的多屏異顯與8路攝像頭接入能力,為機(jī)器人領(lǐng)域帶來革新。米爾電子MYD-LR3576開發(fā)板實(shí)測數(shù)據(jù)顯示,在負(fù)載下CPU占用僅34%,完美實(shí)現(xiàn)多路視覺
    發(fā)表于 10-29 16:41

    如何加速實(shí)時工作負(fù)載

    對于需要實(shí)時響應(yīng)的數(shù)據(jù)中心工作負(fù)載,性能不僅是指原始吞吐量或處理能力。挑戰(zhàn)在于:在保持吞吐量和能效的同時,實(shí)現(xiàn)確定性時。
    的頭像 發(fā)表于 09-10 15:36 ?829次閱讀

    使用羅德與施瓦茨CMX500的吞吐量應(yīng)用層測試方案

    5G NR(New Radio)吞吐量應(yīng)用層測試是評估5G網(wǎng)絡(luò)性能的一個重要方面,它主要關(guān)注的是在實(shí)際應(yīng)用條件下,用戶能夠體驗(yàn)到的數(shù)據(jù)傳輸速率。這種測試通常包括對下行鏈路和上行鏈路的
    的頭像 發(fā)表于 09-02 13:56 ?8190次閱讀
    使用羅德與施瓦茨CMX500的<b class='flag-5'>吞吐</b>量應(yīng)用層測試方案

    FPGA在機(jī)器學(xué)習(xí)中的具體應(yīng)用

    隨著機(jī)器學(xué)習(xí)和人工智能技術(shù)的迅猛發(fā)展,傳統(tǒng)的中央處理單元(CPU)和圖形處理單元(GPU)已經(jīng)無法滿足高效處理大規(guī)模數(shù)據(jù)和復(fù)雜模型的需求。FPGA(現(xiàn)場可編程門陣列)作為一種靈活且高效
    的頭像 發(fā)表于 07-16 15:34 ?3138次閱讀

    算力革命:RoCE實(shí)測推理時比InfiniBand30%的底層邏輯

    AI 訓(xùn)練與推理中的網(wǎng)絡(luò)效率瓶頸,助力數(shù)據(jù)中心在帶寬、延遲、高可靠性的需求下實(shí)現(xiàn)算力資源的最優(yōu)配置。
    的頭像 發(fā)表于 05-28 14:08 ?2301次閱讀
    算力革命:RoCE實(shí)測推理時<b class='flag-5'>延</b>比InfiniBand<b class='flag-5'>低</b>30%的底層邏輯
    资中县| 晋城| 莆田市| 泸溪县| 高雄县| 克山县| 广丰县| 深水埗区| 娄烦县| 贺兰县| 利辛县| 嵊泗县| 集安市| 兴国县| 小金县| 昌都县| 正蓝旗| 囊谦县| 资中县| 乐平市| 济源市| 重庆市| 遂昌县| 青龙| 章丘市| 保亭| 辉县市| 平江县| 安新县| 咸阳市| 娱乐| 武宁县| 西林县| 怀柔区| 蚌埠市| 新营市| 新建县| 沽源县| 常宁市| 华蓥市| 武乡县|