『瀚思彼岸』» 智能家居技术论坛

 找回密码
 立即注册
查看: 444|回复: 3

[流程系列] 音乐助手+语音助手=低配小爱

[复制链接]

15

主题

200

帖子

1095

积分

金牌会员

Rank: 6Rank: 6

积分
1095
金钱
895
HASS币
0
发表于 2024-11-26 23:17:00 | 显示全部楼层 |阅读模式
本帖最后由 duanyudan123 于 2024-11-26 23:40 编辑

具体看视频介绍把:
Home Asisitant语音助手+音乐助手 https://b23.tv/yAP0JfN
官方voice-kit的部分配置+淘宝120的esp32触摸屏(内置麦克风、功放,这个屏幕所有外设均受esphome支持)+音乐助手+AI+STT+TTS+手搓的带3.5cm接口的音箱(可以买现成)

下面介绍如何复制:
esphome配置部分:home-assistant-voice-pe/home-assistant-voice.yaml at dev · esphome/home-assistant-voice-pe
硬件: X宝搜"ESP32触摸屏“那个圆形铝壳子带无线充电+QSPI协议就是(不建议购买,因为官方的硬件马上就出来了)比这种强太多了。
音乐助手:官方推荐的东西不多说了文档完善。不过不支持国内音乐提供商,我是用的本地的。目前还有各种bug,看HA的官方意思是要把这个用作核心音乐方案,马上会集成到核心。我看了一下音乐提供商的开发文档把本地部署的云音乐的API集成到音乐助手应该没什么的但是没有时间弄,希望有人能贡献。
AI部分:我分享有好多白嫖的API都可以用。想折腾就本地部署OLLAMA+显卡+whisper。音乐助手AI部分目前开箱即用,但是有bug。然后下个HA版本会有协助回退操作。意思就是不管你是否使用人工智能对话全部给到HA内置代理来处理。处理不了会丢给AI。目前是使用AI是用不了扩展意图或自定对话的会全部丢到AI。
STT: 订阅nabu或者本地部署。没有什么好的办法。这部分真的无语(越是成熟的东西越不容易白嫖到)
TTS: Edge_tts好用免费
音箱:吸顶音箱是最合适,大方点,买个带大功率和分频的吸顶音箱。加上官方的语音助手开发套件,你会体验到真正的全屋音乐。然后就是华强北琉璃4

正常的话如果HA能跟踪到你所在房间信息的话,音乐会跟着你跑。



回复

使用道具 举报

75

主题

593

帖子

2566

积分

金牌会员

Rank: 6Rank: 6

积分
2566
金钱
1968
HASS币
0
发表于 2024-11-27 17:00:33 | 显示全部楼层
刚试了官方music assitant 插件 可以把苹果音乐集进去。本地挂载也可以,我是部署在群晖的docker上,然后ha集成,ha是安装在群晖的虚拟机上,家里有三个可以推流的音响设备,一个是天龙功放1700h,可以用airplay 和 dlan,小爱音响pro显示airplay ,还有一个哈曼卡顿音响连接的 苹果的路由airport ,也显示为airplay,还有macmini 也显示为airpaly ,目前使用感受 天龙功放airplay和dlan均可以播放,但是,响应速度很慢,偶尔音乐其实已经在播放了,但是没有声音!哈曼卡顿也一样,小爱和mac无法播放,可能是他的airplay2不支持1,总体来说,不是很好用,我是用gpt手机语音控制,还没有硬件!
回复

使用道具 举报

75

主题

593

帖子

2566

积分

金牌会员

Rank: 6Rank: 6

积分
2566
金钱
1968
HASS币
0
发表于 2024-11-27 17:06:26 | 显示全部楼层
对了,airplay只支持44 16bit ,dlan好很多。尝试了在macos 上安装Music Assistant Companion https://music-assistant.io/companion-app/。想把输出换成耳机音响。启用播放器厚ma还是无法发现播放器
回复

使用道具 举报

15

主题

200

帖子

1095

积分

金牌会员

Rank: 6Rank: 6

积分
1095
金钱
895
HASS币
0
 楼主| 发表于 2024-11-27 21:19:47 | 显示全部楼层
lichao622 发表于 2024-11-27 17:06
对了,airplay只支持44 16bit ,dlan好很多。尝试了在macos 上安装Music Assistant Companion https://musi ...

是的bug挺多的,响应最快的是esphome的媒体组件,功能完善,bug少。推到其它播放设备上边去各种问题。我也一样。
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|Hassbian

GMT+8, 2025-1-22 09:19 , Processed in 0.074891 second(s), 25 queries .

Powered by Discuz! X3.4

Copyright © 2001-2021, Tencent Cloud.

快速回复 返回顶部 返回列表