7 月 17 日，涂鴉 OmniAI Foundation正式升級(jí)至 2.2 版本！本次迭代的核心亮點(diǎn)，在于我們對(duì) AI 智能體技能進(jìn)行了全面升級(jí)，顯著提升了系統(tǒng)在內(nèi)容理解、多技能協(xié)同以及泛化溝通方面的能力，讓 AI 助手能夠更自然、更精準(zhǔn)地理解并響應(yīng)用戶意圖。同時(shí)，我們聯(lián)合阿里云帶來了涂鴉私有版Qwen 模型，為用戶打造更快的 AI 對(duì)話響應(yīng)時(shí)間，為各業(yè)務(wù)場(chǎng)景提供更加強(qiáng)大、靈活、貼近需求的 AI 能力支持，并實(shí)現(xiàn)以下幾方面的重大突破：

端到端響應(yīng)速度提升 40%，弱網(wǎng)環(huán)境下語音延遲降低 50%

動(dòng)態(tài)記憶架構(gòu)，破解 AI 長(zhǎng)期交互中的性能衰退

精準(zhǔn)識(shí)別語音起止點(diǎn)，最快可達(dá)到 350ms 的極限打斷速度

升級(jí) AES 自適應(yīng)專家系統(tǒng)，顯著抑制大模型幻覺（即 AI 有時(shí)會(huì)一本正經(jīng)地胡說八道）

什么是 OmniAI Foundation？
OmniAI Foundation 是致力于提供穩(wěn)定、智能、開放的 AI Agent 能力基座平臺(tái)，通過涂鴉持續(xù)的技術(shù)創(chuàng)新和功能升級(jí)，為各業(yè)務(wù)場(chǎng)景帶來更強(qiáng)大的 AI 體驗(yàn)。

一、更卓越的 AI 對(duì)話體驗(yàn)

1、全面提升全球弱網(wǎng)對(duì)抗能力

涂鴉全新優(yōu)化了通信傳輸協(xié)議，顯著提升網(wǎng)絡(luò)環(huán)境不佳時(shí)的 AI 響應(yīng)速度。即使在 2G 網(wǎng)絡(luò)環(huán)境下，語音識(shí)別和響應(yīng)的延遲也大幅降低，確保用戶在各種網(wǎng)絡(luò)條件下均能享受到流暢的對(duì)話體驗(yàn)。依托涂鴉全球 7 大數(shù)據(jù)中心、100+ 網(wǎng)絡(luò)加速節(jié)點(diǎn)，在全球主流城市能達(dá)到網(wǎng)絡(luò)延時(shí) <68ms(中位數(shù))，弱網(wǎng)對(duì)抗能力快速提升 50%。

2、全面升級(jí)個(gè)體記憶能力

基于涂鴉精心打造的 AI 記憶架構(gòu)，OmniAI Foundation 實(shí)現(xiàn)了更精準(zhǔn)的用戶特征提取與動(dòng)態(tài)記憶管理。它采用分層記憶模型，結(jié)合抗衰減機(jī)制與情境關(guān)聯(lián)檢索，能通過權(quán)重分類器自動(dòng)降權(quán)沖突數(shù)據(jù)，高效保留用戶的關(guān)鍵信息（如用戶提問偏好類型、歷史交互細(xì)節(jié)）；同時(shí)智能過濾冗余內(nèi)容，最終輕松將記憶提取的響應(yīng)速度提高 40%，有效抑制長(zhǎng)期交互中的性能衰退。當(dāng)用戶信息更新或提問存在沖突時(shí)（如偏好變更、前后矛盾），系統(tǒng)會(huì)自動(dòng)標(biāo)記舊記憶的有效性，并優(yōu)先激活最新信息，避免重復(fù)詢問或回答矛盾。確保在多輪跨會(huì)話對(duì)話中，每一次交互都更貼合用戶的當(dāng)下需求。

（涂鴉 AI 記憶架構(gòu)圖）

3、更優(yōu)雅的打斷體驗(yàn)

相比同行，涂鴉擁有更好的 AI 斷句能力。在優(yōu)化版本前，我們拜訪了大量的真實(shí)用戶，并結(jié)合真正的用戶使用場(chǎng)景，沉淀大量測(cè)試信息進(jìn)行一一驗(yàn)證，最終成功開發(fā)出更貼合用戶真實(shí)習(xí)慣的優(yōu)雅打斷策略（即低延遲動(dòng)態(tài)打斷）。這一決策，并非過度追求無意義的極限數(shù)據(jù)，而是為了在確保整體響應(yīng)速度有競(jìng)爭(zhēng)力的前提下，能擁有最優(yōu)的打斷效果。

因此，OmniAI Foundation引入了基于深度學(xué)習(xí)的語音活動(dòng)檢測(cè)（VAD）算法，能夠更實(shí)時(shí)精準(zhǔn)地識(shí)別用戶說話的開始和結(jié)束，減少無效等待時(shí)間，同時(shí)大幅降低誤觸率，提升交互的自然度和流暢性。在實(shí)際對(duì)話中，涂鴉最快可支持 350ms 的極限打斷速度，但一般情況下，我們會(huì)更推薦用戶默認(rèn)使用優(yōu)雅打斷。因?yàn)閮?yōu)雅打斷在速度和連貫度之間擁有更恰到好處的平衡，能顯著降低誤切分和錯(cuò)聽的概率，整體交互效率更高。

基于用戶真實(shí)情況調(diào)研，我們?cè)O(shè)計(jì)了眾多貼合真實(shí)場(chǎng)景的測(cè)試用例，下面分享其中一個(gè)。也歡迎大家拿出手上的設(shè)備，驗(yàn)證是否會(huì)被打斷、以及打斷幾次：

【注】不同的硬件結(jié)構(gòu)和方案會(huì)對(duì)收音產(chǎn)生影響，我們同步也提供分貝數(shù)據(jù)的參考。

4、 阿里云+涂鴉私有版 AI 模型

涂鴉聯(lián)合阿里云重磅推出了私有版 Qwen 模型，提供了一整套密集型和混合專家型（MoE）模型，支持按對(duì)話場(chǎng)景，靈活地調(diào)度計(jì)算資源。基于廣泛的訓(xùn)練，在邏輯推理、指令遵循、代理能力及多語言支持方面，實(shí)現(xiàn)了突破性的進(jìn)展，可為用戶提供更加實(shí)時(shí)的秒級(jí)端到端響應(yīng)體驗(yàn)。

5、同步推出 AES 2.2 版本

基于涂鴉 AES（Adaptive Expert System）自適應(yīng)專家系統(tǒng)，可有效降低大模型幻覺，幫助提升技能執(zhí)行成功率和響應(yīng)時(shí)間。本次更新，溝通話術(shù)的泛化能力大幅提升，能夠更智能地應(yīng)對(duì)各種使用場(chǎng)景；針對(duì)基礎(chǔ)技能模塊，涂鴉也進(jìn)行了大幅優(yōu)化與各項(xiàng)能力的新增，功能更加全面。

基于 AES 2.2 版本，我們?nèi)嫣嵘烁黝I(lǐng)域技能體驗(yàn)。

5.1 音樂/內(nèi)容技能

試聽版：支持試聽數(shù)百首音樂/兒歌和完整版本的童話故事，可滿足用戶在內(nèi)容試播、演示以及快速產(chǎn)品化的即時(shí)需求；

版權(quán)版：國內(nèi)現(xiàn)已支持網(wǎng)易云音樂，如果大家也想接入，可聯(lián)系與您對(duì)接的涂鴉商務(wù)BD。

【注】如目前沒有對(duì)接的 BD，可點(diǎn)擊文末“閱讀原文”，填寫表單后，將會(huì)給大家分配。

5.2 智能家居技能

基于 AES 2.2 系統(tǒng)，我們分別對(duì)不同設(shè)備規(guī)模的家庭場(chǎng)景(目前支持 5-40 個(gè))進(jìn)行了數(shù)十個(gè)品類的測(cè)試，本次發(fā)布重在提升設(shè)備準(zhǔn)確率和降低響應(yīng)時(shí)間。由于設(shè)備品類和應(yīng)用場(chǎng)景眾多，我們將持續(xù)升級(jí)該領(lǐng)域能力。

5.3 AI 產(chǎn)品指令技能

如果你希望控制其它第三方設(shè)備，無需了解第三方設(shè)備的具體功能實(shí)現(xiàn)，只要直接開啟智能家居技能即可。

如果你僅需控制該產(chǎn)品本身，為了可以最大化發(fā)揮產(chǎn)品的 AI 能力，涂鴉為大家提供了便捷的“AI 產(chǎn)品指令”，你僅需在平臺(tái)上配置產(chǎn)品支持的功能即可。

比如：你的產(chǎn)品是只機(jī)器狗，你設(shè)置前進(jìn)、后退、舞蹈等動(dòng)作，以及音量、開關(guān)等基礎(chǔ)功能，即可實(shí)現(xiàn) AI 語音控制。

5.4 更泛化的實(shí)時(shí)查詢技能

5.4.1 天氣查詢

支持查詢國內(nèi)外城市的實(shí)時(shí)天氣、預(yù)報(bào)信息，適用于規(guī)劃出行。

5.4.2 日歷查詢

不僅可以查詢具體日期信息，更能獲取國內(nèi)節(jié)假日安排。

5.4.3 實(shí)時(shí)聯(lián)網(wǎng)查詢

涂鴉可一站式滿足用戶的多樣化信息需求，現(xiàn)已支持：

動(dòng)態(tài)獲取新聞資訊

實(shí)時(shí)查看股票行情

查詢本地生活服務(wù)（如餐飲、交通）

規(guī)劃與查詢地圖導(dǎo)航

用戶自定義相關(guān)內(nèi)容的精準(zhǔn)搜索能力

5.5 更便捷的個(gè)性化角色設(shè)定

涂鴉賦能 App 可根據(jù)用戶的需要靈活設(shè)定角色屬性（如傲嬌霸總、味覺探險(xiǎn)家等），并提供多達(dá)數(shù)十種可選的音色（音色種類還在持續(xù)拓展中～）。如沒有你喜歡的音色，也可以上傳 10 秒鐘音頻，快速克隆一個(gè)新音色。該功能有效豐富了消費(fèi)者對(duì)差異化角色的自定義和泛化玩法，提供更自然流暢、更具人情味的交流對(duì)話，提升整體交互溫度。

戳視頻，手把手教你配置個(gè)性化角色：