一、什么是 “Wukong”？

涂鴉全新推出的 “Wukong”AI 硬件開(kāi)發(fā)框架，是為實(shí)現(xiàn) AI 硬件領(lǐng)域的商業(yè)化而專門開(kāi)發(fā)設(shè)計(jì)的創(chuàng)新平臺(tái)。它基于 TuyaOS 所構(gòu)建，繼承了諸多優(yōu)勢(shì)，如跨平臺(tái)兼容性、模塊化設(shè)計(jì)、低代碼開(kāi)發(fā)、組件化結(jié)構(gòu)，以及卓越的互聯(lián)互通和安全合規(guī)性。同時(shí)，該框架在文字、音頻、圖像處理等功能上都進(jìn)行了顯著增強(qiáng)。

"Wukong" AI 硬件開(kāi)發(fā)框架支持多種大模型，可通過(guò)涂鴉云接入 deepseek、豆包、通義千問(wèn)、Kimi、元寶等國(guó)內(nèi)模型，海外則兼容 ChatGPT、Claude、Gemini 等先進(jìn)大模型。這種多樣化的支持，使得該框架能夠靈活地應(yīng)用于各種應(yīng)用場(chǎng)景中，為開(kāi)發(fā)者提供強(qiáng)大的工具箱。

通過(guò)大模型智能體與開(kāi)發(fā)框架的結(jié)合，"Wukong" AI 開(kāi)發(fā)框架實(shí)現(xiàn)了文字和語(yǔ)音對(duì)話、圖片生成、視頻生成等多種 AI 功能。這使其在消費(fèi)電子、玩具、家電等 AI 硬件方向上展現(xiàn)出廣泛的應(yīng)用潛力。無(wú)論是為智能家居設(shè)備賦能，還是為互動(dòng)玩具增添新穎功能，該框架都為開(kāi)發(fā)者提供了高效、靈活的解決方案，推動(dòng) AI 硬件產(chǎn)品的創(chuàng)新與發(fā)展。

目前"Wukong" AI 開(kāi)發(fā)框架 1.0 版本已經(jīng)發(fā)布，開(kāi)發(fā)者基于該框架開(kāi)發(fā)的 AI 玩具已經(jīng)實(shí)現(xiàn)量產(chǎn)，并受到了品牌消費(fèi)者的廣泛認(rèn)可。開(kāi)發(fā)者如果想要開(kāi)發(fā)自己的 AI 硬件產(chǎn)品，通過(guò) Tuya Wind IDE 即可下載 "Wukong" AI 開(kāi)發(fā)框架，接下來(lái)一起看下具體操作步驟。

二、如何獲取該 AI 硬件開(kāi)發(fā)框架？

1、復(fù)制下方鏈接安裝 Tuya Wind IDE 插件，并了解 TuyaOS 開(kāi)發(fā)流程：

https://developer.tuya.com/cn/docs/iot-device-dev/tuyaos-wind-ide?id=Kbfy6kfuuqqu3

2、啟動(dòng) Tuya Wind IDE，進(jìn)入“資源中心”，按照下圖選擇，申請(qǐng)開(kāi)發(fā)框架權(quán)限，填寫(xiě)涂鴉商務(wù)郵箱（界面會(huì)有郵箱地址提示），即可發(fā)起申請(qǐng)。

3、審批通過(guò)之后，進(jìn)入主頁(yè)，點(diǎn)擊“創(chuàng)建開(kāi)發(fā)框架”，按照下圖選擇，即可創(chuàng)建開(kāi)發(fā)框架。

4、一鍵編譯 demo

基于 demo開(kāi)發(fā)自己的 AI 語(yǔ)音產(chǎn)品（目前，“Wukong” 1.0 版本僅支持語(yǔ)音類接入，后續(xù)將更新更多個(gè)性化AI 語(yǔ)音玩法）

三、如何快速開(kāi)發(fā)？

1、初始化代碼

OPERATE_RET __soc_device_init(VOID_T){ OPERATE_RET rt = OPRT_OK;
// ....... // .......
TY_AI_TOY_PARA_T para = TY_AI_PROC_PARA_AIBOX_HOLD; /* Network button initialization */ app_key_init(para.reset_key_pin); /* AI toy initialization */ TUYA_CALL_ERR_RETURN(ty_ai_toy_init(?)); TUYA_CALL_ERR_RETURN(ty_ai_toy_start());
return 0;}

<向右滑動(dòng)查看更多>

2、引腳和模式配置

開(kāi)發(fā) AI 玩具需要配置幾個(gè)引腳，以實(shí)現(xiàn)系統(tǒng)重置、喚醒、揚(yáng)聲器開(kāi)關(guān)等功能。Demo 示例程序通過(guò) TY_AI_TOY_PARA_T 結(jié)構(gòu)體進(jìn)行參數(shù)設(shè)置，并預(yù)制了 5 個(gè)基本參數(shù)供快速啟動(dòng)，開(kāi)發(fā)者可按需選擇或根據(jù)自己的需求進(jìn)行修改：

●TY_AI_PROC_PARA_DEF

●TY_AI_PROC_PARA_DEF2

●TY_AI_PROC_PARA_CUSTOM

●TY_AI_PROC_PARA_AIBOX

●TY_AI_PROC_PARA_AIBOX_HOLD（默認(rèn)配置）

觸發(fā)方式分短按連續(xù)對(duì)話和長(zhǎng)按對(duì)話，目前 demo 只針對(duì)長(zhǎng)按觸發(fā)進(jìn)行過(guò)優(yōu)化。

3、系統(tǒng)重置引腳初始化接口

初始化重置引腳，實(shí)現(xiàn)長(zhǎng)按引腳 5s 之后設(shè)備即可重置，并重新進(jìn)入配網(wǎng)模式。

/*** @brief init reset key* @param[in] pin_id: key pin number*/
VOID_Tapp_key_init(TUYA_GPIO_NUM_Epin_id);

<向右滑動(dòng)查看更多>

4、初始化接口

初始化 AI 玩具功能。

/*** @brief init ai toy demo** @param[in/out] para: init parameters* @return OPERATE_RET: OPRT_OK on success, others on failed*/OPERATE_RETty_ai_toy_init(TY_AI_TOY_PARA_T*para);

<向右滑動(dòng)查看更多>

5、啟動(dòng)接口

啟動(dòng)AI玩具功能。

/*** @brief start ai toy demo** @return OPERATE_RET: OPRT_OK on success, others on failed*/OPERATE_RETty_ai_toy_start(void);

<向右滑動(dòng)查看更多>

6、其它說(shuō)明

demo 代碼還包括了電量檢測(cè)代碼，如果對(duì)應(yīng)的開(kāi)發(fā)板沒(méi)有電池檢測(cè)，可以在代碼中注釋調(diào)用 tuya_ai_toy_battery_init 和 tuya_ai_toy_battery_uninit 兩個(gè)接口。

高階迭代：Coming soon

"Wukong" AI 開(kāi)發(fā)框架 2.0 版本將在 2025年 Q1 發(fā)布，屆時(shí)將支持文字、語(yǔ)音、文件、圖片、視頻等進(jìn)階性的 AI 處理能力；同時(shí)支持開(kāi)發(fā)者直接連接第三方 AI 大模型，以開(kāi)發(fā)更靈活、更高智能的 AI 硬件產(chǎn)品。