官方语音助手已开放销售(已公开原理图）

Pinkman

itispip 发表于 2024-12-21 01:11
能否录这些：

1. MIC在安静环境下收音距离

好，我配置看看

duanyudan123

Pinkman 发表于 2024-12-23 16:31
哈哈哈哈  确实口语不太好， nabu很容易识别，后面2个就比较差了， 现在我装了TTS和STT在PI4上反应很慢， ...

社区有你更精彩，感谢分享。

lichao622

ha新版本还没有把回退修复好。

duanyudan123

lichao622 发表于 2024-12-23 18:40
ha新版本还没有把回退修复好。

要在1月的版本中了

lichao622

duanyudan123 发表于 2024-12-23 21:04
要在1月的版本中了

Music assistant也得在1月才能用语音搜索的意图吧

duanyudan123

lichao622 发表于 2024-12-23 22:39
Music assistant也得在1月才能用语音搜索的意图吧

依然不支持，但是会用奇怪的方式支持语音控制。

lichao622

duanyudan123 发表于 2024-12-24 10:37
依然不支持，但是会用奇怪的方式支持语音控制。

啥方式。现在语音搜索不可用，这点可真是不方便

duanyudan123

lichao622 发表于 2024-12-24 12:12
啥方式。现在语音搜索不可用，这点可真是不方便

用蓝图的方式，MA的开发说语音功能遇到点问题。他们只能退而求其次。另外HA暂时没有为媒体播放方面考虑添加更多意图。不知道怎么想的。我之前试过一个临时方案就是将用户的对话文本用对话的方式交给LLM，然后定义LLM仅返回歌曲名字（注意这并不一定时正确的歌曲名字），然后将返回的歌曲名字存储在定义的函数中，接着将响应函数（也就是歌曲名字）传递给自动话调用music_assistant.play_media行动进行播放。这一切的关键就是LLM能否返回正确歌曲名字。另外要获得用户的对话文本并不简单，目前没有这个实体来获取对话的内容。如果不出意外的MA所说的蓝图方案，跟我讲的大致相同。
开发者的原话:
Well, we had a bit of struggle with the assist/voice stuff but in the end settled for a blueprint to get people going quickly. And next to that you can go all crazy with custom sentences

lichao622

duanyudan123 发表于 2024-12-24 13:06
用蓝图的方式，MA的开发说语音功能遇到点问题。他们只能退而求其次。另外HA暂时没有为媒体播放方面考虑添 ...

那这个很不方便，之前用llm可以说，播放xx的专辑。或者说 播放xx歌曲。等等模糊的语句，播放器就可以自动播放，现在就不行了。就回复无法播放，设备不响应，蓝图的话，语句也得很匹配才行吧。这个这么重要的功能居然版本升级后无法使用了。

bugensui

楼主，请问，如果自己买个esp32s3，加上麦克风和扬声器组件，手搓1个，跟这个成品有什么区别，这个官方的掐音效果好，抗干扰和背景噪声对吧？另外ha有个Assist Microphone加载项，好像是关于usb麦克风的，我自己买个好点的usb麦克风，插在nas上，直通给ha，是不是就可以当语音助手了？我nas里已经部署好了tts和stt。