日B视频 亚洲,啪啪啪网站一区二区,91色情精品久久,日日噜狠狠色综合久,超碰人妻少妇97在线,999青青视频,亚洲一区二卡,让本一区二区视频,日韩网站推荐

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

百度平地起“雷”,突然爆出的QPS數(shù)據(jù)意味著什么?

腦極體 ? 來源:腦極體 ? 作者:腦極體 ? 2023-04-24 09:16 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

魯迅先生1923年在北師大發(fā)表了著名的演講《娜拉走后怎樣》,其中的提問與思考方式振聾發(fā)聵,直到今天也依舊有效。面對(duì)很多產(chǎn)業(yè)現(xiàn)象、技術(shù)趨勢(shì),我們也不妨多問幾個(gè)“之后怎樣”。

比如說,自ChatGPT爆火之后,中國各個(gè)互聯(lián)網(wǎng)、科技公司競(jìng)相推出了自己的大語言模型及相關(guān)應(yīng)用。其實(shí),關(guān)于中國能否有ChatGPT我們從未擔(dān)心過,而問題的關(guān)鍵在于“之后怎樣”。

層出不窮的大語言模型,讓人眼花繚亂。但如此多的大模型,差異化和競(jìng)爭(zhēng)力從何而來?能否順利、低成本實(shí)現(xiàn)產(chǎn)業(yè)落地?能否有效支持模型的快速迭代?

發(fā)布大模型并不是終點(diǎn),而是一場(chǎng)新長跑的起點(diǎn)。如果不能有效回答這些問題,那么大模型也最終會(huì)像其他技術(shù)風(fēng)口一樣,倏忽而來,倏忽而去。

wKgaomRFKEaAAgTRAAHnJ5bHvJE167.jpg

慢慢地,“大模型之后怎樣”這個(gè)問題,也開始有了答案。4月23日,我們看到一份百度文心一言內(nèi)部流出的會(huì)議紀(jì)要。其中顯示,從3月開始,文心一言啟動(dòng)邀測(cè)后的一個(gè)多月內(nèi),其模型已經(jīng)迭代了4次,最近一次帶來的推理效果提升了達(dá)到123%。

到底是什么支持文心一言完成了這種超越常規(guī)的迭代速度?

這個(gè)“秘密”或許正是中國大模型走向未來所需要的動(dòng)力,也是“大模型之后怎樣”的某種答案。

內(nèi)部會(huì)議紀(jì)要,透露出文心一言的奔跑速度

根據(jù)內(nèi)部紀(jì)要內(nèi)容顯示,文心一言在開啟邀測(cè)后用戶數(shù)與同時(shí)在線人數(shù)都極速增長,面臨這種情況,文心一言需要及時(shí)獲得更快的響應(yīng)速度。我們知道,機(jī)器學(xué)習(xí)類模型的應(yīng)用邏輯包含數(shù)據(jù)準(zhǔn)備—模型訓(xùn)練—模型推理幾個(gè)步驟。文心一言面臨的響應(yīng)挑戰(zhàn),就是需要及時(shí)強(qiáng)化模型的推理能力。

wKgZomRFKEeAYVpUAAEMHTVFrJ4910.jpg

為了實(shí)現(xiàn)這個(gè)目標(biāo),百度對(duì)文心一言進(jìn)行了模型層與框架層的聯(lián)合優(yōu)化,從而在一個(gè)月內(nèi)迭代了4次,實(shí)現(xiàn)了模型推理能力的極大提升。

是什么讓文心一言獲得了這樣的奔跑速度?這就要提到百度飛槳“提前”做好的準(zhǔn)備。作為深度學(xué)習(xí)開發(fā)平臺(tái),飛槳可以支持AI模型從訓(xùn)練到推理的全流程落地。其中,飛槳模型推理服務(wù)就可以有效支持大模型升級(jí),這一服務(wù)在4月19日剛剛再次迭代,已迭代至3.5版本,它的特點(diǎn)是在業(yè)內(nèi)首創(chuàng)了支持動(dòng)態(tài)插入的分布式推理引擎,從而可以更有效完成龐大數(shù)據(jù)規(guī)模的AI模型進(jìn)行推理部署。

至此我們可以從這份內(nèi)部紀(jì)要中知道,文心一言能夠快速持續(xù)迭代,并且低成本落地應(yīng)用的關(guān)鍵,就藏在這里——飛槳與文心一言聯(lián)合優(yōu)化。

wKgaomRFKEiAIQspAAFfWi1jZBY802.jpg

從結(jié)果上看,聯(lián)合優(yōu)化帶來的價(jià)值非常顯著。飛槳幫助文心一言實(shí)現(xiàn)了模型推理效率提升10倍,模型推理性能提升50%,模型算力利用率提升1倍。其中,模型推理效率提升10倍,意味著推理成本降低為原來1/10,或者可以為10倍數(shù)量的用戶提供服務(wù);模型推理性能提升50%,意味著飛槳可以幫助文心一言工藝更精密,模型的學(xué)習(xí)效果與魯棒性更強(qiáng);模型算力利用率提升1倍,是由于飛槳向下兼容到芯片,實(shí)現(xiàn)全棧聯(lián)合優(yōu)化,從而可以極大降低文心一言的算力開銷。

從這幾個(gè)方向可以看出,飛槳為文心一言帶來的價(jià)值,是持續(xù)性且多方面的,其中最重要的是,飛槳讓文心一言可以持續(xù)性、低成本向前奔跑,不斷進(jìn)化。

這也恰好解釋了這個(gè)問題:大模型,路在何方?

飛槳,讓大模型節(jié)奏飛起的AI引擎

在ChatGPT全球化爆火,各家廠商、投資人,都在不遺余力地?cái)D上大模型賽道。這種情況當(dāng)然可以理解,但也必須看到,這條賽道不僅門檻高、入局難,在入局之后構(gòu)建持續(xù)競(jìng)爭(zhēng)力同樣很難。

大模型意味著龐大的算力開支、數(shù)據(jù)開支,以及更為恐怖的模型迭代成本。入局大模型之后,必須根據(jù)用戶反饋快速迭代,高效率升級(jí),否則一不小心就會(huì)掉隊(duì),在第一輪風(fēng)口過去后陷入行業(yè)洗牌,緊跟行業(yè)趨勢(shì),不斷推動(dòng)模型升級(jí),又會(huì)面臨巨大的工作量與模型推理成本。

這個(gè)兩難選擇并不遙遠(yuǎn),很快就會(huì)成為困擾大量新玩家的頭疼問題。

而多年部署AI基礎(chǔ)設(shè)施與基礎(chǔ)技術(shù)的百度,其優(yōu)勢(shì)就在這時(shí)顯示了出來。飛槳與文心一言的聯(lián)合優(yōu)化,讓文心一言在訓(xùn)練和推理過程中效率大幅提升,實(shí)現(xiàn)了真正的人家起跑,我已經(jīng)幾輪加速,節(jié)奏快到飛起。

大模型與AI開發(fā)平臺(tái),是相輔相成、互為表里的關(guān)系。比如有分析人士解讀認(rèn)為,“大模型就仿佛汽車的發(fā)動(dòng)機(jī),光賬面上的動(dòng)力強(qiáng),參數(shù)大是沒有用的,要壓榨出發(fā)動(dòng)機(jī)瞬時(shí)最大爆發(fā)力(QPS)以及最優(yōu)的性能表現(xiàn)。深度學(xué)習(xí)框架就像是生產(chǎn)發(fā)動(dòng)機(jī)和變速箱的,可以讓發(fā)動(dòng)機(jī)整體部件組合更精密、動(dòng)力更強(qiáng)。自研產(chǎn)品彼此適配度更高,協(xié)同會(huì)更高效,這可能是效率提升的最根本原因。”依托風(fēng)口入局大模型,終歸會(huì)有一種空中樓閣的隱憂,至少難以將全面的技術(shù)棧掌握在自己手中,實(shí)現(xiàn)更高效、可控的模型升級(jí)。

由此可見,大模型走向成功,除了算力、數(shù)據(jù)的基礎(chǔ)之外,深度學(xué)習(xí)框架同樣扮演著關(guān)鍵角色。面對(duì)紛繁而出的大模型,百度文心系列大模型的差異化優(yōu)勢(shì),也就在百度十年搭建的飛槳平臺(tái)中展露了出來。

而當(dāng)我們把大模型與飛槳的聯(lián)動(dòng)關(guān)系,放到科技自立自強(qiáng)的戰(zhàn)略高度來審視。又會(huì)發(fā)現(xiàn)一些別樣的答案:飛槳既是百度的AI護(hù)城河,也是中國大模型的動(dòng)力引擎。

中國AI,勝負(fù)系于工程化

最近,我們能看到很多大語言模型的發(fā)布會(huì),差不多每一家都會(huì)說,我們目前確實(shí)不如ChatGPT,以后繼續(xù)努力。

那么問題來了,怎么努力?

事實(shí)上,努力不是說說就行了,而是要找到方式和方法。ChatGPT代表的算法優(yōu)勢(shì)、人才優(yōu)勢(shì)、算力優(yōu)勢(shì)都是短期很難抹平的,至少看不到可以快速超車的戰(zhàn)略空間。中國AI想要走通大模型這條路,就只能揚(yáng)長避短,而中國AI的優(yōu)勢(shì)在哪呢?從百度流出的內(nèi)部會(huì)議紀(jì)要中其實(shí)已經(jīng)告訴了我們答案:工程化。

通過飛槳長期堅(jiān)持的AI工程化路徑的掌握與打磨,我們可以看到百度發(fā)展大模型的獨(dú)特優(yōu)勢(shì),同時(shí)也可以看到中國AI整體性的戰(zhàn)略機(jī)遇。

首先,對(duì)于百度內(nèi)部來說,通過飛槳牢牢把控工程化能力,可以提升文心一言的迭代速度,降低算力、人工、數(shù)據(jù)等開銷,從而讓文心一言能夠在同等成本下服務(wù)的用戶更多,適配產(chǎn)品的效率更高。這就像同樣從一處名叫“大模型”的深海油井取得原油,飛槳就像一艘輪船,船速更快,運(yùn)量還大,而其他人在用帆船運(yùn)輸。效率意味著成本,成本意味著商業(yè)化可能性,這就是飛槳的價(jià)值,也是AI工程化能力的魅力。

從百度向外看,飛槳帶來的工程化能力,意味著文心系列大模型的推理成本更低,繼而導(dǎo)致其在各行業(yè)、各場(chǎng)景中的落地成本更低。這對(duì)于文心大模型融入行業(yè),通過產(chǎn)業(yè)智能化產(chǎn)生價(jià)值是個(gè)重大利好。大模型走向千行百業(yè),是今天每家公司都在喊的口號(hào),但這個(gè)過程中,一定不能把模型落地成本全部轉(zhuǎn)嫁給行業(yè)用戶。消解這一成本的關(guān)鍵,也在于飛槳代表的工程化路徑。

wKgaomRFKEmAQy1MAAEv39zd6SM408.jpg

最后,當(dāng)大模型已經(jīng)上升為國家戰(zhàn)略,我們必須看到AI框架在科技自立自強(qiáng)進(jìn)程中扮演的角色。如果事關(guān)國計(jì)民生,每天與無數(shù)國人進(jìn)行問答的大模型,建立在其他國家的框架上,那么其危險(xiǎn)系數(shù)可想而知。當(dāng)大模型愈發(fā)重要,關(guān)注并持續(xù)解決深度學(xué)習(xí)框架卡脖子的隱憂就更加重要。

而從另一個(gè)角度看,AI框架與AI開發(fā)平臺(tái)代表的AI工程化能力,是中國AI技術(shù)最亮眼、最特殊的部分。這一部分下接芯片,上達(dá)應(yīng)用,通向千行百業(yè)的AI開發(fā)需求,恰好是AI技術(shù)中的戰(zhàn)略要沖所在。中國AI能否揚(yáng)長避短,實(shí)現(xiàn)超車,極大概率就系于工程化能力的建設(shè)與發(fā)揮,系于AI框架與產(chǎn)業(yè)智能化的連接中。

中國大模型,就是行業(yè)大模型,就是強(qiáng)工程化、強(qiáng)落地性的大模型,只有走通這條路,中國AI才有未來。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 百度
    +關(guān)注

    關(guān)注

    9

    文章

    2389

    瀏覽量

    95246
  • QPS
    QPS
    +關(guān)注

    關(guān)注

    0

    文章

    24

    瀏覽量

    9100
  • 深度學(xué)習(xí)
    +關(guān)注

    關(guān)注

    73

    文章

    5610

    瀏覽量

    124656
  • ChatGPT
    +關(guān)注

    關(guān)注

    31

    文章

    1600

    瀏覽量

    10403
  • 文心一言
    +關(guān)注

    關(guān)注

    0

    文章

    134

    瀏覽量

    2226
  • 大模型
    +關(guān)注

    關(guān)注

    2

    文章

    3797

    瀏覽量

    5280
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    百度地圖與NIMO眼鏡達(dá)成深度合作

    近日,百度地圖與NIMO眼鏡達(dá)成深度合作,將百度地圖全棧導(dǎo)航能力以輕量化、低功耗、極簡交互的方式落地智能眼鏡場(chǎng)景,為騎行、步行、日常通勤用戶提供抬頭即見、安全隨行的新一代導(dǎo)航體驗(yàn)。
    的頭像 發(fā)表于 04-09 10:00 ?350次閱讀

    百度地圖LD解決方案助力無人配送行業(yè)規(guī)?;涞?/a>

    在今日舉辦的智能網(wǎng)聯(lián)汽車發(fā)展論壇無人配送生態(tài)大會(huì)主論壇上,百度地圖無人車解決方案產(chǎn)品負(fù)責(zé)人發(fā)表了題為《百度LD無人配送規(guī)?;涞卦辍返闹黝}演講——百度地圖依托AI大模型實(shí)現(xiàn)數(shù)據(jù)生產(chǎn)新
    的頭像 發(fā)表于 03-31 13:54 ?488次閱讀

    百度文心大模型5.0正式版上線

    今天,在百度文心Moment大會(huì)現(xiàn)場(chǎng),文心大模型5.0正式版上線。
    的頭像 發(fā)表于 01-23 16:48 ?1533次閱讀

    百度地圖開放平臺(tái)與400萬開發(fā)者共赴智能時(shí)空新未來

    二十年星辰大海,十五載開放引航。2025年,百度地圖迎來服務(wù)用戶的二十周年,其開放平臺(tái)亦走過了與開發(fā)者并肩同行的十五個(gè)春秋。在近期舉行的“2025百度地圖開發(fā)者盛典”上,百度地圖開放平臺(tái)回顧了從提供基礎(chǔ)地圖API,演進(jìn)為以AI為
    的頭像 發(fā)表于 01-23 09:03 ?965次閱讀
    <b class='flag-5'>百度</b>地圖開放平臺(tái)與400萬開發(fā)者共赴智能時(shí)空新未來

    百度健康升級(jí)發(fā)布文心健康管家

    面臨醫(yī)療資源分布不均、就診流程繁瑣、就醫(yī)信息不均等難題,“想讓每個(gè)家庭都擁有專屬醫(yī)生”成為百度健康的愿景。
    的頭像 發(fā)表于 12-23 15:01 ?931次閱讀

    格靈深瞳精彩亮相百度世界2025大會(huì)

    11月13日,百度世界2025大會(huì)在北京國家會(huì)議中心二期舉辦?;顒?dòng)期間,格靈深瞳與百度進(jìn)行深入交流,并圍繞VLM、AI Infra、應(yīng)用場(chǎng)景等話題展開全面分享。
    的頭像 發(fā)表于 11-19 17:09 ?925次閱讀

    百度世界大會(huì)亮點(diǎn) 五年五芯 百度宣布打造最硬AI云

    自2006年以來,百度世界大會(huì)已連續(xù)舉辦近20屆,百度世界大會(huì)是百度每年面向行業(yè)、媒體、合作伙伴和廣大用戶的最高級(jí)別盛事,作為百度年度最重要的的戰(zhàn)略、技術(shù)、產(chǎn)品發(fā)布會(huì),自2006年以來
    的頭像 發(fā)表于 11-13 15:47 ?1966次閱讀

    百度世界2025進(jìn)行中 百度昆侖芯超節(jié)點(diǎn)亮相 性能巨幅提升

    百度世界大會(huì)是百度每年面向行業(yè)、媒體、合作伙伴和廣大用戶的最高級(jí)別盛事,作為百度年度最重要的的戰(zhàn)略、技術(shù)、產(chǎn)品發(fā)布會(huì),自2006年以來已連續(xù)舉辦19年,持續(xù)為行業(yè)搭建起交流前沿技術(shù)、碰撞創(chuàng)新
    的頭像 發(fā)表于 11-13 11:51 ?1502次閱讀

    昆侖芯科技亮相2025百度云智大會(huì)

    近日,2025百度云智大會(huì)在北京國家會(huì)議中心二期隆重啟幕。本屆大會(huì)以“智能,生成無限可能”為主題,聚焦人工智能從技術(shù)到產(chǎn)業(yè)的全鏈條落地,深入探討AI賦能千行業(yè)的實(shí)踐路徑與未來機(jī)遇。
    的頭像 發(fā)表于 09-01 11:00 ?1518次閱讀

    百度智能云發(fā)布全球首批AI數(shù)字員工

    沒錯(cuò),在今天的百度AI Day開放日現(xiàn)場(chǎng),這么溜的同事們正式上崗!
    的頭像 發(fā)表于 08-12 09:47 ?1920次閱讀

    百度智能云亮相第二十二屆ChinaJoy

    百度智能云亮相第二十二屆ChinaJoy 8月1日,第二十二屆中國國際數(shù)碼互動(dòng)娛樂展覽會(huì)(ChinaJoy)在上海開幕。大會(huì)期間,百度全景展示了百度智能云千帆大模型平臺(tái)等行業(yè)領(lǐng)先的技術(shù)服務(wù)在AI+
    的頭像 發(fā)表于 08-05 09:47 ?955次閱讀

    歐洲央行行長一行到訪百度Apollo Park

    近日,拉加德一行到訪位于北京亦莊(經(jīng)濟(jì)技術(shù)開發(fā)區(qū))的百度Apollo Park,與百度Jackson等人交流自動(dòng)駕駛、AI發(fā)展等話題,并在亦莊東環(huán)南路、宏達(dá)南路等公開道路上,試乘了蘿卜快跑第六代無人駕駛汽車。
    的頭像 發(fā)表于 06-18 15:44 ?994次閱讀

    自動(dòng)駕駛“單車智能”并不意味著不聯(lián)網(wǎng)?

    不斷加強(qiáng),最終實(shí)現(xiàn)自動(dòng)駕駛。但智駕最前沿以為,單車智能并不意味著不聯(lián)網(wǎng),恰恰相反,單車智能的最終目標(biāo)將是實(shí)現(xiàn)車聯(lián)網(wǎng)(Internet of Vehicles,IoV),同一品牌或同一智駕系統(tǒng)的大量車輛將會(huì)接入云端平臺(tái),通過海量數(shù)據(jù)匯聚與群體智能
    的頭像 發(fā)表于 06-17 08:56 ?959次閱讀
    自動(dòng)駕駛“單車智能”并不<b class='flag-5'>意味著</b>不聯(lián)網(wǎng)?

    65%央企大模型落地首選百度智能云

    今天,很榮幸地分享一個(gè)好消息,百度智能云已牽手65%的央企,共同推進(jìn)大模型產(chǎn)業(yè)落地。得益于全棧的AI能力,百度聯(lián)合眾多央國企伙伴,針對(duì)各類不同業(yè)務(wù)場(chǎng)景,打造了一大批可推廣、可復(fù)制的標(biāo)桿案例。
    的頭像 發(fā)表于 06-11 15:44 ?1046次閱讀

    百度地圖重磅發(fā)布地圖AI開放平臺(tái)

    近日,在WGDC25全球時(shí)空智能大會(huì)上,百度地圖重磅發(fā)布地圖AI開放平臺(tái)。百度地圖深耕20年的數(shù)據(jù)能力、引擎能力與AI技術(shù)全面開放,向開發(fā)者深度開放四大核心能力和五大場(chǎng)景解決方案。
    的頭像 發(fā)表于 05-26 11:26 ?2064次閱讀
    泸水县| 阿拉尔市| 屏东县| 微博| 虎林市| 伊宁市| 建德市| 全椒县| 四平市| 邯郸县| 吐鲁番市| 三门峡市| 洪湖市| 疏勒县| 芜湖市| 昭平县| 邳州市| 西宁市| 荣成市| 南投市| 岢岚县| 弥勒县| 玛沁县| 会理县| 长寿区| 广东省| 七台河市| 墨江| 怀仁县| 华安县| 米林县| 津市市| 湛江市| 浦江县| 通化县| 黔江区| 皮山县| 乌兰察布市| 海门市| 永新县| 习水县|