新闻  |   论坛  |   博客  |   在线研讨会
【理论到操作实现】让AI玩具机器人等智能硬件在嘈杂环境中只听我说话
ListenAI | 2025-10-15 17:52:40    阅读:50   发布文章

理论操作实现AI玩具机器人智能硬件在嘈杂环境中前言

本文分享小聆AI相关改善理论声纹技术主要用来提升 AI 智能玩具机器人智能硬件实际场景语音交互体验用户使用通常遇到这些问题1身边交谈干扰2用户发音模糊3玩具碰撞声、哭闹声等突发高频噪声易被声学 VAD 误判为语音4呼吸声、风声等高频干扰导致语音失真针对这些影响人机交互常见问题小聆AI对应处理程序增加单独人声配置功能,大家按照文章步骤操作即可自主实现智能硬件下方视频实际人机交互场景效果

video(46).mp4

 

单独人声虑噪的实现理论

为保证AI玩具机器人等智能硬件在嘈杂环境中只听“我”说话的效果,从以下几点进行了优化:

1、  语音VAD优化消除噪声,不响应常见家居噪声(如风扇、电视等)

2、  声纹过滤人声进行声纹对比保留指定声纹音频

3、  语义VAD噪声过滤分析上下文语义,用户附和不打断播报用户犹豫停顿延长拾音时间

 

实现步骤

1、  准备一个语音交互硬件可以CSK6大模型开发板聆思Arcs mini大模型MCP开发板可以ESP32语音模组

 

2、  打开小聆AI小程序点击添加设备选择对应硬件提示操作即可完成绑定进行配置 ESP32开发板可以选择开源套件

 

3、  绑定成功进入语音识别配置识别模式 识别注册声纹用户

识别默认默认所有人

识别已注册声纹的用户在连续交互模式下,仅识别已注册声纹的用户语音如果AI语音回复指定可以选择这项

识别唤醒设备的用户在连续交互模式下,仅支持唤醒设备的用户继续交互,其余人的语音将不会被识别  可以理解AI语音回复名字叫醒那个

 

4、  点击确认进入声纹注册页面点击开始录音文本读完点击创建即可

 

5、  声纹创建成功进入声纹对应编辑画像界面这个页面可以手动填入声纹主人兴趣爱好需要AI长期记忆内容

画像编辑完成后返回【识别模式】界面,选择【仅识别已注册声纹的用户】即可实现视频中的效果

 

小聆AI语音交互的更多资料和玩法实现参考

小聆AI详细配置参考:https://docs2.listenai.com/x/S_TEd8h7C

零代码克隆原神可莉实现桌面陪伴参考: https://docs2.listenai.com/x/x7CVdoQI3

更多个性配置方法可以参考官方开发文档:https://docs2.listenai.com/x/S_TEd8h7C

CSK6大模型开发板硬件资料https://docs2.listenai.com/x/nTn9kMMCU

 


*博客内容为网友个人发布,仅代表博主个人观点,如有侵权请联系工作人员删除。

参与讨论
登录后参与讨论
推荐文章
最近访客