日B视频 亚洲,啪啪啪网站一区二区,91色情精品久久,日日噜狠狠色综合久,超碰人妻少妇97在线,999青青视频,亚洲一区二卡,让本一区二区视频,日韩网站推荐

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

NVIDIA Triton開源推理服務(wù)軟件三大功能推動(dòng)效率提升

NVIDIA英偉達(dá)企業(yè)解決方案 ? 來源:NVIDIA英偉達(dá)企業(yè)解決方案 ? 作者:NVIDIA英偉達(dá)企業(yè)解 ? 2022-01-04 14:20 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

Microsoft Teams借助AI生成的實(shí)時(shí)字幕和轉(zhuǎn)錄功能,幫助全球?qū)W生和職場人士順利進(jìn)行在線會(huì)議。用于訓(xùn)練的NVIDIA AI計(jì)算技術(shù)和用于推理語音識別模型的NVIDIA Triton推理服務(wù)器進(jìn)一步提升了這兩個(gè)功能。

Microsoft Teams 是全球溝通和協(xié)作的重要工具,每月有近2.5億活躍用戶。Microsoft Azure 認(rèn)知服務(wù)為Teams提供28種語言的字幕和轉(zhuǎn)錄,并將很快能夠在NVIDIA GPU上運(yùn)行關(guān)鍵的計(jì)算密集型神經(jīng)網(wǎng)絡(luò)推理。

實(shí)時(shí)字幕功能幫助與會(huì)者實(shí)時(shí)跟蹤對話,轉(zhuǎn)錄功能方便與會(huì)者在日后回顧當(dāng)時(shí)的創(chuàng)意或回看未能參與的會(huì)議。

實(shí)時(shí)字幕對聾啞人、聽力障礙者,或者異國與會(huì)者特別有用。

NVIDIA Triton開源推理服務(wù)軟件能夠幫助Teams使用認(rèn)知服務(wù)優(yōu)化語音識別模型。

使用Triton,認(rèn)知服務(wù)能夠支持高度先進(jìn)的語言模型,以極低的延遲實(shí)時(shí)提供高度準(zhǔn)確、個(gè)性化的語音轉(zhuǎn)文本結(jié)果。同時(shí),可以保證運(yùn)行這些語音轉(zhuǎn)文本模型的NVIDIA GPU充分發(fā)揮其潛力,在消耗更少計(jì)算資源的同時(shí),為客戶提供更高的吞吐量,進(jìn)而降低成本。

底層語音識別技術(shù)作為認(rèn)知服務(wù)中的一個(gè)API,開發(fā)人員可以使用它定制和運(yùn)行自己的應(yīng)用程序——客服電話轉(zhuǎn)錄、智能家居控制或?yàn)榧本热藛T提供AI助手。

字字達(dá)意的AI

認(rèn)知服務(wù)會(huì)生成Teams的轉(zhuǎn)錄和字幕,將語音轉(zhuǎn)換為文本,并識別說話人。同時(shí)也能夠識別專業(yè)術(shù)語 、姓名和其他會(huì)議背景,提高字幕的準(zhǔn)確性。

Microsoft Teams的通話、會(huì)議及設(shè)備首席項(xiàng)目經(jīng)理Shalendra Chhabra表示:“這樣的AI模型非常復(fù)雜,需要數(shù)千萬個(gè)神經(jīng)網(wǎng)絡(luò)參數(shù)才能識別幾十種不同的語言。但模型越大,就越難以經(jīng)濟(jì)高效地實(shí)時(shí)運(yùn)行?!?/p>

NVIDIA GPU和Triton軟件能夠幫助微軟在不犧牲低延遲的情況下,通過強(qiáng)大的神經(jīng)網(wǎng)絡(luò),實(shí)現(xiàn)高準(zhǔn)確性,確保語音-文本的實(shí)時(shí)轉(zhuǎn)換。

當(dāng)啟用轉(zhuǎn)錄功能時(shí),與會(huì)者可以在會(huì)議結(jié)束后輕松補(bǔ)上錯(cuò)過的內(nèi)容。

Triton三大功能推動(dòng)效率提升

NVIDIA Triton有助于簡化AI模型部署,并解鎖高性能推理。用戶甚至可以為自己的應(yīng)用開發(fā)自定義后端。軟件的一些關(guān)鍵功能可將Microsoft Teams的字幕和轉(zhuǎn)錄功能擴(kuò)展到更多會(huì)議和用戶,包括:

流推理:新型流推理功能——通過跟蹤語音上下語境,提高延遲、敏感性字幕的準(zhǔn)確度,它助力NVIDIA和Azure認(rèn)知服務(wù)合作定制語音轉(zhuǎn)文本的應(yīng)用程序。

動(dòng)態(tài)合批:批大小指神經(jīng)網(wǎng)絡(luò)同時(shí)處理的輸入樣本數(shù)量。通過Triton的動(dòng)態(tài)合批,單項(xiàng)推理請求被自動(dòng)組合成一個(gè)批次,因此能夠在不影響模型延遲的情況下更好地利用GPU資源。

并發(fā)模型執(zhí)行:實(shí)時(shí)字幕和轉(zhuǎn)錄需要同時(shí)運(yùn)行多個(gè)深度學(xué)習(xí)模型。Triton使開發(fā)人員能夠在單個(gè)GPU上同時(shí)完成這些工作,包括使用不同深度學(xué)習(xí)框架的模型。

即刻啟程,借助Azure 認(rèn)知服務(wù),在您的應(yīng)用中使用語音轉(zhuǎn)文本的功能,并進(jìn)一步了解NVIDIA Triton 推理服務(wù)軟件如何幫助團(tuán)隊(duì)大規(guī)模部署AI模型。

NVIDIA 將參加 CES 2022, 并將在 1 月 5 日凌晨 0 點(diǎn)(北京時(shí)間)發(fā)表 NVIDIA 特別演講。

NVIDIA GeForce 高級副總裁 Jeff Fisher 和 NVIDIA 汽車部門副總裁兼總經(jīng)理 Ali Kani 將展示加速計(jì)算在設(shè)計(jì)、仿真、游戲和自動(dòng)駕駛汽車方面的新突破。掃描下方海報(bào),即刻將該日程添加到日歷!

原文標(biāo)題:Microsoft Azure 認(rèn)知服務(wù)和NVIDIA AI提升Microsoft Teams實(shí)時(shí)字幕和轉(zhuǎn)錄功能

文章出處:【微信公眾號:NVIDIA英偉達(dá)企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • NVIDIA
    +關(guān)注

    關(guān)注

    14

    文章

    5696

    瀏覽量

    110141
  • 功能
    +關(guān)注

    關(guān)注

    3

    文章

    590

    瀏覽量

    30363
  • 開源
    +關(guān)注

    關(guān)注

    3

    文章

    4368

    瀏覽量

    46464

原文標(biāo)題:Microsoft Azure 認(rèn)知服務(wù)和NVIDIA AI提升Microsoft Teams實(shí)時(shí)字幕和轉(zhuǎn)錄功能

文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達(dá)企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    Supermicro率先發(fā)布NVIDIA BlueField-4 STX存儲(chǔ)服務(wù)器,提升AI推理性能

    ? Supermicro憑借其基于NVIDIA STX AI存儲(chǔ)參考架構(gòu)打造的上下文內(nèi)存(CMX)存儲(chǔ)服務(wù)器,進(jìn)一步彰顯其行業(yè)領(lǐng)先地位。 BlueField-4 STX存儲(chǔ)服務(wù)器結(jié)合了NVID
    的頭像 發(fā)表于 03-19 15:46 ?190次閱讀
    Supermicro率先發(fā)布<b class='flag-5'>NVIDIA</b> BlueField-4 STX存儲(chǔ)<b class='flag-5'>服務(wù)</b>器,<b class='flag-5'>提升</b>AI<b class='flag-5'>推理</b>性能

    基于NVIDIA模組與軟件套件推動(dòng)邊緣與機(jī)器人AI推理

    NVIDIA 正式推出 NVIDIA Jetson T4000,將高性能 AI 與實(shí)時(shí)推理能力帶入更廣泛的機(jī)器人和邊緣 AI 應(yīng)用。T4000 針對更嚴(yán)格的功耗和散熱限制進(jìn)行了優(yōu)化,最高可提供
    的頭像 發(fā)表于 01-14 09:46 ?826次閱讀
    基于<b class='flag-5'>NVIDIA</b>模組與<b class='flag-5'>軟件</b>套件<b class='flag-5'>推動(dòng)</b>邊緣與機(jī)器人AI<b class='flag-5'>推理</b>

    全新軟件與模型優(yōu)化為NVIDIA DGX Spark注入強(qiáng)大動(dòng)力

    自發(fā)布以來,NVIDIA 通過持續(xù)的軟件優(yōu)化以及與軟件合作伙伴和開源社區(qū)的緊密協(xié)作,不斷提升基于 Grace Blackwell 架構(gòu)的 D
    的頭像 發(fā)表于 01-09 10:17 ?896次閱讀

    全新梅賽德斯奔馳CLA車型引入NVIDIA DRIVE AV軟件

    NVIDIA 正在推動(dòng)開啟 AI 定義的駕駛新時(shí)代,其搭載增強(qiáng)型 L2 級點(diǎn)到點(diǎn)駕駛輔助功能NVIDIA DRIVE AV 軟件,預(yù)計(jì)今
    的頭像 發(fā)表于 01-09 09:57 ?872次閱讀

    NVIDIA 推出 Alpamayo 系列開源 AI 模型與工具,加速安全可靠的推理型輔助駕駛汽車開發(fā)

    新聞?wù)?: l NVIDIA 率先發(fā)布為應(yīng)對輔助駕駛長尾場景挑戰(zhàn)而設(shè)計(jì)的開源視覺-語言-動(dòng)作推理模型(Reasoning VLA);NVIDIA Alpamayo 系列還包含賦能輔助
    的頭像 發(fā)表于 01-06 09:40 ?528次閱讀
    <b class='flag-5'>NVIDIA</b> 推出 Alpamayo 系列<b class='flag-5'>開源</b> AI 模型與工具,加速安全可靠的<b class='flag-5'>推理</b>型輔助駕駛汽車開發(fā)

    NVIDIA 收購開源工作負(fù)載管理提供商 SchedMD

    軟件的主要開發(fā)商,Slurm 是一款用于 HPC 和 AI 的開源工作負(fù)載管理系統(tǒng)。此次收購旨在幫助強(qiáng)化開源軟件生態(tài)系統(tǒng),并推動(dòng)研究人員、
    的頭像 發(fā)表于 12-16 18:24 ?1501次閱讀

    NVIDIA推動(dòng)面向數(shù)字與物理AI的開源模型發(fā)展

    NVIDIA 發(fā)布一系列涵蓋語音、安全與輔助駕駛領(lǐng)域的全新 AI 工具,其中包括面向移動(dòng)出行領(lǐng)域的行業(yè)級開源視覺-語言-動(dòng)作推理模型(Reasoning VLA) NVIDIA DRI
    的頭像 發(fā)表于 12-13 09:50 ?1576次閱讀

    如何在NVIDIA Jetson AGX Thor上通過Docker高效部署vLLM推理服務(wù)

    繼系統(tǒng)安裝與環(huán)境配置后,本期我們將繼續(xù)帶大家深入 NVIDIA Jetson AGX Thor 的開發(fā)教程之旅,了解如何在 Jetson AGX Thor 上,通過 Docker 高效部署 vLLM 推理服務(wù)
    的頭像 發(fā)表于 11-13 14:08 ?4462次閱讀
    如何在<b class='flag-5'>NVIDIA</b> Jetson AGX Thor上通過Docker高效部署vLLM<b class='flag-5'>推理</b><b class='flag-5'>服務(wù)</b>

    NVIDIA宣布開源Aerial軟件

    NVIDIA 開源其 Aerial 軟件,并將 NVIDIA Sionna 研究套件和 Aerial 測試平臺引入 NVIDIA DGX S
    的頭像 發(fā)表于 11-03 15:14 ?1210次閱讀

    NVIDIA TensorRT LLM 1.0推理框架正式上線

    TensorRT LLM 作為 NVIDIA 為大規(guī)模 LLM 推理打造的推理框架,核心目標(biāo)是突破 NVIDIA 平臺上的推理性能瓶頸。為實(shí)
    的頭像 發(fā)表于 10-21 11:04 ?1459次閱讀

    NVIDIA 利用全新開源模型與仿真庫加速機(jī)器人研發(fā)進(jìn)程

    科研人員及開發(fā)者打造功能更強(qiáng)大、適應(yīng)性更強(qiáng)的機(jī)器人。 ? 全新的 NVIDIA Isaac GR00T 開源基礎(chǔ)模型將為機(jī)器人賦予接近人類的推理能力,使其能夠拆解復(fù)雜指令,并借助已有知
    的頭像 發(fā)表于 09-30 09:52 ?3229次閱讀
    <b class='flag-5'>NVIDIA</b> 利用全新<b class='flag-5'>開源</b>模型與仿真庫加速機(jī)器人研發(fā)進(jìn)程

    NVIDIA Nemotron Nano 2推理模型發(fā)布

    NVIDIA 正式推出準(zhǔn)確、高效的混合 Mamba-Transformer 推理模型系列 NVIDIA Nemotron Nano 2。
    的頭像 發(fā)表于 08-27 12:45 ?2041次閱讀
    <b class='flag-5'>NVIDIA</b> Nemotron Nano 2<b class='flag-5'>推理</b>模型發(fā)布

    信而泰×DeepSeek:AI推理引擎驅(qū)動(dòng)網(wǎng)絡(luò)智能診斷邁向 “自愈”時(shí)代

    ,以“全流量采集 + AI根因診斷 + 預(yù)測性運(yùn)維”為核心支柱,推動(dòng)企業(yè)網(wǎng)絡(luò)運(yùn)維模式從傳統(tǒng)的“被動(dòng)響應(yīng)”向“主動(dòng)防御”和“故障自愈”的智能化方向躍遷。 大核心能力:AI推理引擎重塑網(wǎng)絡(luò)運(yùn)維邏輯1.全
    發(fā)表于 07-16 15:29

    全球各大品牌利用NVIDIA AI技術(shù)提升運(yùn)營效率

    歐萊雅、LVMH 集團(tuán)和雀巢利用 NVIDIA 加速的智能體 AI 和物理 AI,大幅提升產(chǎn)品設(shè)計(jì)、營銷及物流等方面的運(yùn)營效率
    的頭像 發(fā)表于 06-19 14:36 ?1377次閱讀

    使用NVIDIA Triton和TensorRT-LLM部署TTS應(yīng)用的最佳實(shí)踐

    針對基于 Diffusion 和 LLM 類別的 TTS 模型,NVIDIA Triton 和 TensorRT-LLM 方案能顯著提升推理速度。在單張
    的頭像 發(fā)表于 06-12 15:37 ?2102次閱讀
    使用<b class='flag-5'>NVIDIA</b> <b class='flag-5'>Triton</b>和TensorRT-LLM部署TTS應(yīng)用的最佳實(shí)踐
    崇文区| 灵寿县| 遂昌县| 监利县| 新密市| 临泉县| 永顺县| 长岭县| 资源县| 扎鲁特旗| 孟津县| 翼城县| 泊头市| 南京市| 六盘水市| 乌拉特前旗| 临湘市| 甘肃省| 五家渠市| 同心县| 龙井市| 宜阳县| 嵊泗县| 棋牌| 芒康县| 阿坝县| 邵阳县| 沐川县| 台前县| 苏州市| 鄂伦春自治旗| 响水县| 赣榆县| 沭阳县| 阿尔山市| 凤凰县| 安平县| 五指山市| 潮州市| 临洮县| 吴江市|