0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

涂鸦WuKong AI 2.0开发框架发布!情绪感知+多模态交互,重新定义AI玩具新体验

涂鸦开发者 ? 2025-03-27 20:30 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

一、AI 玩具市场潜力有多强?

随着 AI 大模型能力的发展和成本的降低,全球玩具市场迎来新的发展机遇。尤其是2025 年春节后,国内电商平台的 AI 玩具销量环比激增 6 倍,其中 3-6 岁儿童早教玩具成为增长主力,占比超过 40%。这一爆发式增长不仅反映了消费者对智能化产品的强烈需求,也标志着玩具市场已然成为 AI 技术在 C 端的最强落地新风向。

AI 玩具行业的发展也吸引了广泛的参与者,从大模型厂商、传统玩具企业、硬件与芯片原厂到开源社区开发者,都积极地投入到这次 AI 玩具升级迭代的浪潮中。玩具也从初期的单一语音交互,不断向着多维度进化升级,如:


支持文字、语音、视频、文档、传感器、屏幕显示等多维度交互方式;

支持多模态数据处理;

具备多模态的情绪感知--理解--决策--表达能力

但传统玩具厂商要想转型开发 AI 玩具,并非简单地在玩具上加一个“ AI ”标签,它是一项跨学科、多维度的系统工程;从产品定位、体验设计与交互逻辑,到软硬件集成、算法优化等角度,每一个环节都可能成为“卡脖子”问题。

二、涂鸦助力低成本打造超强AI 玩具

为帮助合作伙伴以更低成本解决上述难题,涂鸦重磅升级了TuyaOSWuKong AI 2.0 硬件开发框架(点击查看 WuKong AI 硬件开发框架往期介绍),为广大玩具开发者提供了强有力的技术支撑!它具备语音唤醒、随意对话、情绪感知+表达、GUI 双眼表情互动等多种高级能力,大幅提升了 AI 玩具产品的竞争力。

在多模态数据交互上,该开发框架支持文字、语音、文件、视频等模式;并具备极其敏锐的情感感知能力,如在交互过程中,AI 会通过用户语音的细微波动来精准提取情绪,并给予恰到好处的反馈。通过TuyaOSWukong AI 2.0 硬件开发框架,开发者只需关注 AI 玩具的能力拓展即可。


358aed8a-0b07-11f0-9434-92fbcf53809c.png

WuKong AI 2.0 技术架构

此外,WuKong AI 2.0 硬件开发框架支持多种大模型,可通过涂鸦云接入 DeepSeek、豆包、通义千问、Kimi、元宝等国内模型,海外则兼容 ChatGPT、Claude、Gemini 等先进大模型。这种多样化的支持,使得该框架能够灵活地应用于各种 AI 玩具的应用场景中,为开发者提供强大的工具箱。

戳视频,体验涂鸦赋能 AI 玩具的灵动与强大:


1.多种交互方式

该开发框架支持长按对话、按键唤醒对话、语音唤醒对话、随意对话四大交互形式,使用户与 AI 的沟通模式得到极大丰富。

2.敏锐的情绪感知

涂鸦本次创新升级情绪感知算法,采用声学特征分析、语义+文本分析技术,可实时捕捉用户语音的细微波动。可以说,它赋予了 AI 玩具以生命力,能通过用户的声调、语速、甚至有没有哽咽,就能精准判别是开心还是悲伤,然后给出恰如其分的情绪回应。

3.有趣的 GUI 双眼表情互动

该开发框架通过内置的涂鸦 T5AI 开发板,搭配双 SPI 驱动两个显示屏,可充当 AI 玩具的两个大眼睛。内部存储丰富的表情包,能通过大模型情绪感知能力,精准识别和判断用户情绪。然后调用对应的双眼表情进行回应,做出如生气、惊喜、害怕、困惑、伤心、失望等眼神,十分生动有趣。


4.语音处理更灵敏

涂鸦对AEC(回声消除)、 VAD(语音活动检测)、ASR语音识别进行了大幅度优化,大大改善 AI 玩具对话过程中,被打断后响应会迟缓的问题,令整体对话更极速、更丝滑。


此外,它还支持语音唤醒功能。以前的 AI 玩具需要用户按下按钮或者拍一下玩偶才能唤醒。现在通过 VAD 技术,AI 可随时检测唤醒词,并自带深度学习降噪模型,在有噪声的环境下,也能响应你的呼唤。

三、如何快速实现开发?

通过安装 Tuya Wind IDE,可以直接获取 WuKong AI 2.0 硬件开发框架 V3.12.1 版本或者更新版本。具体流程如下:


1.安装 Tuya Wind IDE 插件,并了解 TuyaOS 开发流程

启动 Tuya Wind IDE,进入“资源中心”,按照下图选择,申请开发框架权限,并填写涂鸦商务邮箱,发起申请。


35a82b7a-0b07-11f0-9434-92fbcf53809c.png

2.审批通过之后,进入主页,点击“创建开发框架”。


35bcd566-0b07-11f0-9434-92fbcf53809c.png

3.一键编译 demo


35d1455a-0b07-11f0-9434-92fbcf53809c.png

四、开发者问题咨询

开发中如遇到任何问题,可以登录涂鸦开发者论坛进行提问,将有技术小哥随时为你解答

高阶迭代:Coming soon

WuKong AI 2.0硬件开发框架,将在 2025 年度 Q1~Q2 季度继续保持迭代升级。届时,将会支持运动子系统、通过动作表达情绪等能力。除此之外,我们还会不断丰富 AI 的落地场景,如:文生图、图生图、视频生成等 AI 处理能力,为开发者大大降低 AI 硬件的开发难度!

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    88

    文章

    35916

    浏览量

    283110
  • 涂鸦智能
    +关注

    关注

    7

    文章

    269

    浏览量

    20167
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    AI大模型智能盒子,语音对话人工智能开发套件

    上手即用的智能新体验,解锁未来科技乐趣!在AI技术爆发的时代,ANS-FG216MAI大模型智能盒子凭借其“开箱即用”的便捷性和强大的交互功能,迅速成为科技爱好者和智能玩具用户的新宠!
    的头像 发表于 05-30 14:03 ?374次阅读
    <b class='flag-5'>AI</b>大模型智能盒子,语音对话人工智能<b class='flag-5'>开发</b>套件

    网关智商暴增!涂鸦T5AI网关开发框架让设备秒懂人话,兼容国内外顶尖AI大模型

    2025年2月,涂鸦全新发布WuKongAI硬件开发框架(点击查看WuKongAI硬件开发框架
    的头像 发表于 05-22 18:30 ?821次阅读
    网关智商暴增!<b class='flag-5'>涂鸦</b>T5<b class='flag-5'>AI</b>网关<b class='flag-5'>开发</b><b class='flag-5'>框架</b>让设备秒懂人话,兼容国内外顶尖<b class='flag-5'>AI</b>大模型

    BOYA博雅发布BOYAMIC 2 BOYALINK 3,AI降噪重新定义无线音频纯净时代

    BOYA博雅自主研发的“AI深度降噪3.0”技术,以-40dB行业顶尖降噪深度、70万+噪声样本数据库及毫秒级实时处理能力,重新定义了无线麦克风的性能标准。此次发布
    的头像 发表于 05-14 11:14 ?588次阅读
    BOYA博雅<b class='flag-5'>发布</b>BOYAMIC 2 BOYALINK 3,<b class='flag-5'>AI</b>降噪<b class='flag-5'>重新定义</b>无线音频纯净时代

    XMOS为普及AI应用推出基于软件定义SoC的模态AI传感器融合接口

    模态传感信号AI处理为智算中心和边缘智能开启感知智能的新篇章
    的头像 发表于 05-12 17:51 ?267次阅读
    XMOS为普及<b class='flag-5'>AI</b>应用推出基于软件<b class='flag-5'>定义</b>SoC的<b class='flag-5'>多</b><b class='flag-5'>模态</b><b class='flag-5'>AI</b>传感器融合接口

    让大模型“开口说话”,启英泰伦重塑AI玩具交互新体验

    的热潮。接入大模型的AI玩具从市场需求来看,AI玩具正在重新定义儿童陪伴与教育的方式,不仅满足“玩”的基本需求,而且,通过智能“拟人化”
    的头像 发表于 04-11 18:31 ?601次阅读
    让大模型“开口说话”,启英泰伦重塑<b class='flag-5'>AI</b><b class='flag-5'>玩具</b><b class='flag-5'>交互</b><b class='flag-5'>新体验</b>!

    TCL携手INDEMIND重新定义家庭AI交互边界

    与INDEMIND联合打造的创新产品,不仅重新定义了家庭陪伴方式,更通过全场景视觉感知技术助力机器人实现从"功能执行"到"情感共生"的跨越式突破。
    的头像 发表于 03-25 13:32 ?776次阅读

    移远通信智能模组全面接入模态AI大模型,重塑智能交互新体验

    随着千行百业数智化进程的不断加速,模态AI大模型的应用需求不断攀升,图像、语音、视频等多样化的交互方式正逐渐成为推动行业变革的新动力。 ? 3月20日,全球物联网整体解决方案供应商移
    发表于 03-21 14:12 ?322次阅读
    移远通信智能模组全面接入<b class='flag-5'>多</b><b class='flag-5'>模态</b><b class='flag-5'>AI</b>大模型,重塑智能<b class='flag-5'>交互</b><b class='flag-5'>新体验</b>

    移远通信智能模组全面接入模态AI大模型,重塑智能交互新体验

    随着千行百业数智化进程的不断加速,模态AI大模型的应用需求不断攀升,图像、语音、视频等多样化的交互方式正逐渐成为推动行业变革的新动力。3月20日,全球物联网整体解决方案供应商移远通信
    的头像 发表于 03-20 19:03 ?493次阅读
    移远通信智能模组全面接入<b class='flag-5'>多</b><b class='flag-5'>模态</b><b class='flag-5'>AI</b>大模型,重塑智能<b class='flag-5'>交互</b><b class='flag-5'>新体验</b>

    直播预告| AI 玩偶爆款密码:涂鸦 AI 玩偶方案如何赋能开发者伙伴?

    一、涂鸦AI玩具解决方案的独特之处涂鸦AI玩具解决方案重磅联手DeepSeek、豆包、通义千问、
    的头像 发表于 03-13 18:00 ?655次阅读
    直播预告| <b class='flag-5'>AI</b> 玩偶爆款密码:<b class='flag-5'>涂鸦</b> <b class='flag-5'>AI</b> 玩偶方案如何赋能<b class='flag-5'>开发</b>者伙伴?

    智能照明新纪元:涂鸦 AI 照明系统如何重塑空间光影体验

    、语音交互开发者生态与商业闭环体系,重新定义了智能照明的边界,为用户与开发者提供了一站式解决方案。PART1AI场景生成从需求到光影,一键
    的头像 发表于 03-13 18:00 ?870次阅读
    智能照明新纪元:<b class='flag-5'>涂鸦</b> <b class='flag-5'>AI</b> 照明系统如何重塑空间光影体验

    广和通AI玩具解决方案通过火山引擎成功接入DeepSeek开源模型

    2月17日,广和通AI玩具解决方案通过火山引擎接入DeepSeek开源模型,满足AI玩具场景在模态
    的头像 发表于 03-03 17:45 ?868次阅读
    广和通<b class='flag-5'>AI</b><b class='flag-5'>玩具</b>解决方案通过火山引擎成功接入DeepSeek开源模型

    涂鸦AI玩具2.0解决方案发布!连续对话×声音克隆,打造更懂孩子的智慧伙伴

    交互方式易断层、反应僵硬、必须等待回答结束才能响应下一个问题等,严重影响用户端交互体验。针对行业核心痛点,涂鸦智能此次重磅升级AI玩具解决
    的头像 发表于 02-28 21:16 ?1629次阅读
    <b class='flag-5'>涂鸦</b><b class='flag-5'>AI</b><b class='flag-5'>玩具</b><b class='flag-5'>2.0</b>解决方案<b class='flag-5'>发布</b>!连续对话×声音克隆,打造更懂孩子的智慧伙伴

    广和通AI玩具解决方案接入DeepSeek

    2月17日,广和通AI玩具解决方案通过火山引擎接入DeepSeek开源模型,满足AI玩具场景在模态
    的头像 发表于 02-17 18:07 ?1632次阅读

    涂鸦Wukong AI硬件开发框架超强兼容DeepSeek等大模型,助你打造爆款AI硬件

    一、什么是“Wukong”?涂鸦全新推出的“WukongAI硬件开发框架,是为实现
    的头像 发表于 02-13 20:58 ?1023次阅读
    <b class='flag-5'>涂鸦</b><b class='flag-5'>Wukong</b> <b class='flag-5'>AI</b>硬件<b class='flag-5'>开发</b><b class='flag-5'>框架</b>超强兼容DeepSeek等大模型,助你打造爆款<b class='flag-5'>AI</b>硬件

    AI大模型重新定义传统玩具涂鸦方案赋能客户打造火爆全球的AI玩具

    一、AI玩具凭什么火爆全球最近,AI玩具到底有火呢?一款AI赋能的国产变形金刚威震天,让马斯克
    的头像 发表于 01-23 18:00 ?1298次阅读
    用<b class='flag-5'>AI</b>大模型<b class='flag-5'>重新定义</b>传统<b class='flag-5'>玩具</b>!<b class='flag-5'>涂鸦</b>方案赋能客户打造火爆全球的<b class='flag-5'>AI</b><b class='flag-5'>玩具</b>