日B视频 亚洲,啪啪啪网站一区二区,91色情精品久久,日日噜狠狠色综合久,超碰人妻少妇97在线,999青青视频,亚洲一区二卡,让本一区二区视频,日韩网站推荐

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Nauto的“ADAS+DMS”的融合模型

Astroys ? 來源:Astroys ? 2023-05-30 11:11 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

隨著DMS即將廣泛采用,初創(chuàng)公司Nauto看到了一個(gè)機(jī)會,通過融合艙外和艙內(nèi)攝像頭的數(shù)據(jù),將其AI算法出售給OEM。Nauto是否真的在正確的時(shí)間推出了正確的技術(shù)呢?

許多車廠已經(jīng)在多款車型上采用了ADAS,搭載多個(gè)攝像頭。同時(shí),車廠也在搭載DMS,用攝像頭監(jiān)控車內(nèi)人類駕駛員的行為。

但這兩個(gè)系統(tǒng)從來都不是一起工作的。ADAS和DMS由不同的供應(yīng)商開發(fā),兩個(gè)系統(tǒng)間的數(shù)據(jù)也無法互相關(guān)聯(lián)(雖然說的不是一回事,但我總是能想起小鵬車主下跪刷臉是怎么回事……)。

加州Palo Alto的初創(chuàng)公司Nauto,希望改變這一情況。通過一個(gè)平臺,融合車輛外部和內(nèi)部生成的數(shù)據(jù),Nauto相信它將有助于提升道路與駕駛安全。

Nauto的創(chuàng)始人兼CEO Stefan Heck解釋說,“消費(fèi)者反饋顯示,許多駕駛員對ADAS或DMS經(jīng)常發(fā)出的誤報(bào)感到惱火。這代表行業(yè)還沒有做對這一點(diǎn)?!?/p>

數(shù)據(jù)融合

從2015年起,Nauto就一直在用艙內(nèi)攝像頭監(jiān)控商業(yè)車隊(duì)駕駛員的行為。同時(shí),Nauto也一直用艙外攝像頭監(jiān)控道路。這項(xiàng)研究收集了有關(guān)行人、騎自行車的人和其他車輛行為的知識。它捕獲了許多險(xiǎn)些發(fā)生、緊急避險(xiǎn)和高風(fēng)險(xiǎn)事件的場景。

通過結(jié)合艙外和艙內(nèi)攝像頭的數(shù)據(jù),Nauto看到了駕駛員分心行為和道路上實(shí)時(shí)發(fā)生的風(fēng)險(xiǎn)之間的關(guān)聯(lián)。該公司表示,它已經(jīng)分析了“數(shù)十億的數(shù)據(jù)點(diǎn)”,并開發(fā)了“可以預(yù)測、防止和減少高風(fēng)險(xiǎn)事件的算法。”

800個(gè)車隊(duì)

當(dāng)Heck創(chuàng)立Nauto時(shí),科技行業(yè)對完全自動駕駛汽車(AV)充滿了期待。當(dāng)時(shí)人們都在預(yù)測,AV的大量涌現(xiàn)意味著計(jì)算機(jī)駕駛員不僅將取代人類出租車和卡車司機(jī),而且還會使街道更加安全。

與眾不同的是,Heck一直專注于幫助人們更好地駕駛,而不是取代他們。Nauto表示,其原始使命是為期八年,目的是為車隊(duì)駕駛員提供預(yù)防碰撞的能力。

將Nauto與大多數(shù)其他AV初創(chuàng)公司區(qū)分開來的是兩種商業(yè)實(shí)踐:首先,與商業(yè)車隊(duì)服務(wù)運(yùn)營商建立合作關(guān)系;其次,專注于后市場以啟動Nauto平臺的部署。

Heck說,最初,Nauto強(qiáng)調(diào)的是艙內(nèi)發(fā)生的場景。但在這個(gè)過程中,Nauto也收集了艙外的風(fēng)險(xiǎn)數(shù)據(jù),例如追尾、斑馬線上的行人、信號燈和停車標(biāo)識。

在開發(fā)AI算法來預(yù)測高風(fēng)險(xiǎn)事件時(shí),Nauto采用了基于深度學(xué)習(xí)的方法,使用從800個(gè)商業(yè)車隊(duì)收集的數(shù)據(jù)。Heck估計(jì),800個(gè)車隊(duì)相當(dāng)于200,000名司機(jī),車輛總數(shù)稍微少一些。

Nauto 學(xué)到了什么?

對于從200,000名車隊(duì)駕駛員收集的數(shù)據(jù),Heck說,“所有碰撞事故的70%都是由駕駛員不注意引起的。比如使用手機(jī)、吃東西、低頭做別的事或困倦,導(dǎo)致了分心。”

這都讓Heck感到驚訝。他解釋說,這意味著“整個(gè)汽車行業(yè)歷來都只專注于那余下的30%,而忽視了由艙內(nèi)引發(fā)的70%的風(fēng)險(xiǎn)?!?/p>

Heck稱駕駛員分心是“流行病”。盡管有這樣的證據(jù),但車內(nèi)監(jiān)控仍然是一個(gè)相對新的功能。當(dāng)Euro NCAP開始評估能有效檢測疲勞和分心的DMS時(shí),汽車OEM們才開始有動力接受DMS。

安全專家們越來越認(rèn)為,來自DMS的準(zhǔn)確信息對安全至關(guān)重要。因?yàn)榫哂锌擅撌肿詣玉{駛的車輛正在陸續(xù)推出。

當(dāng)車廠允許人類駕駛員放開方向盤時(shí),DMS是一個(gè)后備方案,它能準(zhǔn)確地顯示出當(dāng)計(jì)算機(jī)駕駛員需要接管方向盤時(shí),人類司機(jī)正在做什么。

Nauto的路線圖

八年過去了,Nauto在車隊(duì)領(lǐng)域中取得了突破。Nauto的技術(shù)已被用于監(jiān)控商業(yè)車隊(duì)駕駛員以提高安全性。

那么,接下來會是什么呢?Heck說,Nauto的路線圖上有四件事。

首要的是“融合”。

Nauto正在努力融合車輛的外部和內(nèi)部風(fēng)險(xiǎn),創(chuàng)建一個(gè)“在駕駛監(jiān)控之上的下一級能力”。

Heck覺得車廠對有效的DMS越來越感興趣,而這正是Nauto的機(jī)會。

Heck說,內(nèi)外攝像頭數(shù)據(jù)的融合產(chǎn)生了全面的安全光譜?!叭绻覀冎礼{駛員分心了,我們會在碰撞之前更早介入?!彼Q這是“一種新能力”,因?yàn)橄袂胺脚鲎差A(yù)警這樣的ADAS功能通常獨(dú)立于DMS運(yùn)行。

a6290f3e-fe81-11ed-90ce-dac502259ad0.png

其次,Nauto的產(chǎn)品之前大部分在售后市場銷售,但即將進(jìn)入OEM車輛??梢詮腂rightDrop獲得集成了Nauto的電動送貨車。Heck表示,Navistar正在推出搭載了Nauto的商用卡車,“在接下來的幾個(gè)月里還有更多的合作伙伴?!?/p>

第三,Nauto正在研究集成的保險(xiǎn)模型?!拔覀冇幸粋€(gè)合作伙伴關(guān)系,任何公用事業(yè)公司只要有合適的保險(xiǎn)供應(yīng)商,就可以有效地免費(fèi)獲取Nauto?!盚eck提到了Nauto與英國最大的商業(yè)保險(xiǎn)公司Aviva的試點(diǎn)項(xiàng)目。Nauto的下一個(gè)目標(biāo)是美國。

Heck表示,公司的下一個(gè)目標(biāo)是讓Nauto設(shè)計(jì)到乘用車中。盡管尚未宣布,但計(jì)劃是“首先將Nauto集成到輕型商用車、貨車和皮卡中……然后擴(kuò)展到其它車型?!?/p>

硬件構(gòu)成

任何好的AI算法都需要優(yōu)秀的硬件,即合適的攝像頭和計(jì)算單元。那么,Nauto的售后市場平臺的硬件構(gòu)成是什么呢?

Nauto平臺的艙外攝像頭采用了Sony圖像傳感器,而艙內(nèi)攝像頭則是Omnivision的圖像傳感器。計(jì)算單元采用了Qualcomm Snapdragon 845,集成了高端GPUDSP和8個(gè)Arm內(nèi)核。

Heck說,Nauto在Snapdragon上運(yùn)行的艙內(nèi)和艙外算法最高可達(dá)每秒15幀。Nauto在Snapdragon的Arm內(nèi)核上運(yùn)行其融合模型。

Nauto平臺可從OBD端口獲取數(shù)據(jù),使Nauto能夠讀取剎車位置、安全氣囊部署和其他車內(nèi)機(jī)械裝置。Nauto從GPS傳感器和多普勒接收車輛位置和速度數(shù)據(jù),然后融合所有數(shù)據(jù)。

當(dāng)被問到這是如何工作時(shí),Heck說:“我們會查看你面前是否有威脅,你正在以多快的速度行駛,你是否正在轉(zhuǎn)彎,以及你是否已經(jīng)在剎車。然后我們會監(jiān)控你的注意力狀態(tài)。如果你在保持專注,并且已經(jīng)開始剎車,我們不會干擾,因?yàn)槲覀冎滥阋呀?jīng)看到了威脅,并且已經(jīng)在應(yīng)對它。但如果你正在加速或保持速度不變,而你面前有威脅,而你正在看手機(jī)或喝咖啡,那么我們會警告你并進(jìn)行干預(yù)?!?/p>

那么,如果OEM想要在他們的車輛中使用Nauto,他們需要添加什么呢?

車輛應(yīng)該有一個(gè)200-500MP的艙外攝像頭,Heck說:“低于720P,就很困難了。如果沒有艙內(nèi)攝像頭顯然是個(gè)問題。但是,好在現(xiàn)在每個(gè)車廠都在考慮在他們的新車中增加DMS。”

大多數(shù)車輛已經(jīng)有了GPS和LTE。但是算力呢?

Heck承認(rèn),這個(gè)特性的差別很大。對于使用Intel/Mobileye的車輛,Nauto運(yùn)行在Xeon上。對于部署了Qualcomm高端汽車平臺的其他車輛,則沒有問題。Heck指出,現(xiàn)在只有少數(shù)OEM使用Nvidia。Nauto已經(jīng)在Nvidia上進(jìn)行了測試,但尚未部署。

關(guān)于Nauto的融合模型所需的處理能力,Heck表示:“這不是一個(gè)黑白分明的問題,因?yàn)樗惴ǖ牟煌糠窒牡挠?jì)算量不同……一般來說,它需要幾個(gè)TOPS?!?/p>

通過在AV堆棧上增加Nauto的融合模型,汽車OEM能獲得什么呢?Heck表示,Nauto可以為人類駕駛員提供更細(xì)顆粒度的安全介入。

“你看到一個(gè)行人正在你面前過馬路。如果你看著前方道路卻沒有做出反應(yīng),那就是……典型的行人碰撞預(yù)警的場景。所以,這種情況下我們只會在碰撞前約三秒鐘才介入。但如果你正在看手機(jī),根本沒看行人,我們可能會在碰撞前四秒介入。而如果你已經(jīng)開始剎車,然后,也在看行人,那么,我們就不會介入?!?/p>

Heck說,融合的目標(biāo)是“稀疏但有效地介入?!?/p>

當(dāng)Nauto供應(yīng)售后市場產(chǎn)品時(shí),它也提供了它開發(fā)的所有ADAS和DMS軟件部分。

但對于OEM車輛,所有的軟件部分都是“可選的”。例如,如果OEM更喜歡Mobileye的ADAS系統(tǒng)和Seeing Machines的DMS,那沒問題。OEM需要做的就是在他們的堆棧上添加Nauto更安全的融合模型。Nauto的模型可以授權(quán)。

競爭

盡管市面上還沒有ADAS+DMS融合模型,但Nauto可能不會長時(shí)間保持優(yōu)勢。

一些DMS技術(shù)供應(yīng)商正在他們的DMS算法中研發(fā)融合模型。

然而,Heck強(qiáng)調(diào)了Nauto的領(lǐng)先地位?!拔覀兪切袠I(yè)先驅(qū),我們擁有一些非?;镜年P(guān)于內(nèi)外融合的專利?!彼麤]有詳細(xì)說明,但補(bǔ)充說,“想要繞過這一點(diǎn)將會很困難?!?/p>

大數(shù)據(jù)也是Nauto的明顯優(yōu)勢。因?yàn)镹auto起初在商用車隊(duì)中開始運(yùn)營,積累了關(guān)于內(nèi)外關(guān)系的數(shù)據(jù)。Heck表示,Nauto的大部分競爭對手要么“只關(guān)注艙內(nèi),要么只關(guān)注艙外,他們從未同時(shí)關(guān)注過兩者。”

接著是行駛里程。比起Waymo積累的2000萬英里(這是所有自動駕駛公司中最高的),Nauto已經(jīng)行駛了30億英里。

最后,因?yàn)镹auto一直與車隊(duì)合作,Heck說:“我們實(shí)際上知道其中涉及的經(jīng)濟(jì)風(fēng)險(xiǎn)。我們不僅會看它是否會導(dǎo)致碰撞,還會看碰撞的嚴(yán)重程度,以及會造成多大的損失。”

這種知識,在一個(gè)可預(yù)見的危險(xiǎn)情況下,將促使Nauto的技術(shù)提前介入。另一方面,在較不危險(xiǎn)的情況下,Nauto可以給予駕駛員更多的自由裁量權(quán)。Heck相信,管理這些變量最終可能會決定融合模型的用戶接受度。

Nauto已經(jīng)進(jìn)行了三輪融資,擁有約150名員工,其中三分之一是合同工。雖然尚未盈利,但Heck表示Nauto還處于“成長階段”,可能在幾年后進(jìn)行IPO。

審核編輯 :李倩

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 攝像頭
    +關(guān)注

    關(guān)注

    61

    文章

    5116

    瀏覽量

    103539
  • adas
    +關(guān)注

    關(guān)注

    311

    文章

    2344

    瀏覽量

    212154
  • 自動駕駛
    +關(guān)注

    關(guān)注

    795

    文章

    15014

    瀏覽量

    181726

原文標(biāo)題:Nauto的“ADAS+DMS”的融合模型

文章出處:【微信號:Astroys,微信公眾號:Astroys】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    《多模態(tài)大模型 前沿算法與實(shí)戰(zhàn)應(yīng)用 第一季》精品課程簡介

    的關(guān)鍵區(qū)域。例如在視覺問答任務(wù)中,模型會根據(jù)問題中的\"顏色\"一詞,重點(diǎn)關(guān)注圖像中物體的顏色特征。 3. 模態(tài)融合:協(xié)同決策的關(guān)鍵 融合策略直接影響模型性能: 早期
    發(fā)表于 05-01 17:46

    零基礎(chǔ)手寫大模型資料2026

    行代碼,大模型的開發(fā)是理論創(chuàng)新與工程實(shí)踐的深度融合。即使不依賴復(fù)雜框架,掌握注意力機(jī)制、殘差連接等核心原理的開發(fā)者,也能通過基礎(chǔ)代碼實(shí)現(xiàn)模型原型,進(jìn)而理解LoRA微調(diào)、量化壓縮等高級技術(shù)的本質(zhì)。這種從底層出發(fā)的技術(shù)理解,正是突破
    發(fā)表于 05-01 17:44

    光庭信息正式發(fā)布數(shù)據(jù)驅(qū)動ADAS開發(fā)平臺

    在2026北京車展上,光庭信息正式發(fā)布面向高階智駕研發(fā)環(huán)節(jié)的數(shù)據(jù)驅(qū)動ADAS開發(fā)平臺。該平臺旨在幫助車企以更低成本、更高效率實(shí)現(xiàn)模型能力的精準(zhǔn)提升,為智駕量產(chǎn)注入高價(jià)值的數(shù)據(jù)動能。
    的頭像 發(fā)表于 04-30 15:16 ?1501次閱讀

    ??低曂瞥龃诡惔?b class='flag-5'>模型軟件產(chǎn)品

    ??低曂瞥龃诡惔?b class='flag-5'>模型軟件產(chǎn)品,以??涤^瀾多模態(tài)大模型為底座,融合可見光、熱成像、毫米波等多維感知技術(shù),結(jié)合豐富的行業(yè)知識,推動垂類大模型與業(yè)務(wù)場景深度
    的頭像 發(fā)表于 04-24 16:27 ?480次閱讀

    慢SQL分析選型:DMS/DAS與NineData該如何選擇

    阿里云 DMS 的慢SQL 趨勢、DAS 的 SQL 審計(jì)能力成熟,可滿足阿里云用戶基礎(chǔ)需求。NineData 側(cè)重跨云統(tǒng)一工作臺、研發(fā)與 DBA 協(xié)同,打通慢日志分析、性能診斷、規(guī)范審核、索引建議全鏈路,更適配企業(yè)級慢查詢持續(xù)治理。
    的頭像 發(fā)表于 03-25 17:20 ?1560次閱讀
    慢SQL分析選型:<b class='flag-5'>DMS</b>/DAS與NineData該如何選擇

    電子工程師必備:ADAS1000-3/ADAS1000-4 ECG模擬前端深度解析

    電子工程師必備:ADAS1000-3/ADAS1000-4 ECG模擬前端深度解析 在醫(yī)療電子領(lǐng)域,心電圖(ECG)監(jiān)測設(shè)備的性能至關(guān)重要。ADAS1000-3/ADAS1000-4作
    的頭像 發(fā)表于 03-25 17:05 ?468次閱讀

    Smart Eye再獲歐洲卡車OEM的兩款車型DMS訂單

    Smart Eye 將為一現(xiàn)有歐洲客戶的兩款新型卡車車型提供其 DMS 軟件。基于產(chǎn)品生命周期預(yù)測,該訂單的預(yù)計(jì)收入為 1500 萬瑞典克朗。
    的頭像 發(fā)表于 03-12 11:46 ?509次閱讀

    BOS Semiconductors 選擇 Ceva 的 AI DSP 用于下一代 ADAS 平臺

    Eagle-A 利用 SensPro? 加速 LiDAR 和雷達(dá)傳感工作負(fù)載, 實(shí)現(xiàn)實(shí)時(shí)感知和傳感器融合 隨著車輛向軟件定義架構(gòu)和復(fù)雜的ADAS系統(tǒng)演進(jìn),行業(yè)正轉(zhuǎn)向?qū)崟r(shí)傳感器處理、安全關(guān)鍵型智能
    的頭像 發(fā)表于 01-12 18:06 ?1617次閱讀
    BOS Semiconductors 選擇 Ceva 的 AI DSP  用于下一代 <b class='flag-5'>ADAS</b> 平臺

    國內(nèi)五大星地?cái)?shù)據(jù)大模型ai融合分析與應(yīng)用分系統(tǒng)軟件介紹

    ? ? 雖未明確劃分“星地?cái)?shù)據(jù)大模型AI融合分析與應(yīng)用”的五大分系統(tǒng),但北京華盛恒輝、北京五木恒潤、Anthropic、MetaAI和SpaceX等機(jī)構(gòu)已通過關(guān)鍵技術(shù)突破與場景深耕,構(gòu)建了具有代表性
    的頭像 發(fā)表于 12-29 10:49 ?173次閱讀

    星地?cái)?shù)據(jù)大模型融合分析與應(yīng)用分系統(tǒng)平臺的應(yīng)用與未來發(fā)展

    ? ? 星地?cái)?shù)據(jù)大模型融合分析與應(yīng)用分系統(tǒng) ? ?北京華盛恒輝星地?cái)?shù)據(jù)大模型融合分析與應(yīng)用分系統(tǒng),是一套整合衛(wèi)星通信與地面網(wǎng)絡(luò)數(shù)據(jù),依托大模型
    的頭像 發(fā)表于 12-29 10:12 ?328次閱讀

    DFRobot亮相貿(mào)澤電子elexcon 2025展臺,展示與Qwen3大模型融合的AI應(yīng)用

    8月26日,elexcon2025深圳國際電子展在深圳會展中心隆重開幕。在全球知名新品引入(NPI)代理商貿(mào)澤電子(Mouser Electronics) 展臺(1號館1Q30),DFRobot展示了其LattePanda Sigma單板計(jì)算機(jī)與Qwen3大語言模型融合
    的頭像 發(fā)表于 08-30 10:51 ?1183次閱讀

    CANoe中ADAS功能集介紹

    高級駕駛輔助系統(tǒng)(ADAS)在汽車中的應(yīng)用日益增長,為了滿足工程師對于ADAS的分析、仿真和測試等功能的需求,CANoe從15.0版本開始提供ADASFeatureSet(ADAS功能集,簡稱AFS
    的頭像 發(fā)表于 07-10 14:55 ?1506次閱讀
    CANoe中<b class='flag-5'>ADAS</b>功能集介紹

    NVIDIA助力圖靈新訊美推出企業(yè)級多模態(tài)視覺大模型融合解決方案

    中國推出企業(yè)級多模態(tài)視覺大模型融合解決方案,推動先進(jìn) AI 模型在交通治理、工業(yè)質(zhì)檢、金融風(fēng)控等領(lǐng)域?qū)崿F(xiàn)高效識別、精準(zhǔn)預(yù)警和穩(wěn)定交付。
    的頭像 發(fā)表于 06-26 09:17 ?1554次閱讀

    佑駕創(chuàng)新獲得上汽大通智能座艙DMS項(xiàng)目獨(dú)家定點(diǎn)

    近日,佑駕創(chuàng)新(2431.HK)宣布獲得上汽大通智能座艙DMS(駕駛員監(jiān)測系統(tǒng))項(xiàng)目的獨(dú)家定點(diǎn)。根據(jù)規(guī)劃,佑駕創(chuàng)新全棧自研的智能座艙DMS一體機(jī)iCabin Lite,將全面搭載于上汽大通旗下多款輕客旗艦車型,標(biāo)志著公司在智能座艙的規(guī)?;瘧?yīng)用與全球化拓展取得新突破。
    的頭像 發(fā)表于 06-18 14:59 ?1808次閱讀

    商湯日日新SenseNova融合模態(tài)大模型 國內(nèi)首家獲得最高評級的大模型

    近日,中國信息通信研究院(以下簡稱“中國信通院”)完成可信AI多模態(tài)大模型首輪評估。 商湯日日新SenseNova融合模態(tài)大模型在所有模型中,獲得當(dāng)前最高評級——4+級,并成為國內(nèi)首家
    的頭像 發(fā)表于 06-11 11:57 ?1590次閱讀
    邵阳县| 常州市| 克山县| 昆明市| 南投市| 明星| 彭州市| 澄迈县| 荔波县| 儋州市| 交口县| 沾化县| 长沙县| 班玛县| 福安市| 金溪县| 吴桥县| 松阳县| 邻水| 齐齐哈尔市| 瓦房店市| 桦南县| 洛阳市| 栾城县| 远安县| 博野县| 邵阳市| 团风县| 合肥市| 讷河市| 阿克| 色达县| 武邑县| 西乡县| 岳阳市| 扎兰屯市| 阿坝县| 永吉县| 通山县| 麦盖提县| 镇原县|