『瀚思彼岸』» 智能家居技术论坛

 找回密码
 立即注册
楼主: ptbsare

[技术探讨] 本地语言助手基于Sherpa Onnx的Wyoming STT/TTS Addon无惧断网纯离线

[复制链接]

16

主题

227

帖子

1219

积分

金牌会员

Rank: 6Rank: 6

积分
1219
金钱
992
HASS币
0
发表于 2025-2-16 18:58:35 | 显示全部楼层
使用cuda基本没有提升多少。都感觉不出来。这么优秀的工具,站长应该加个红标题啊。
回复

使用道具 举报

20

主题

708

帖子

3170

积分

论坛元老

Rank: 8Rank: 8

积分
3170
金钱
2462
HASS币
0
发表于 2025-2-16 20:12:02 | 显示全部楼层
piajava 发表于 2025-2-16 18:49
是在纯内网环境用的https,并且浏览器访问的麦克风吗
浏览器使用麦克风权限需要ssl连接(https),但是如 ...

你的方法我试过,可以使用麦克风,我也是在内网使用https,当然我也配置了证书,不过不管它,这不是主要问题,主要问题是现在无论我手输也行,模型是无法理解我说的。。,然后我的日志一直不断地client disconnect
回复

使用道具 举报

1

主题

47

帖子

300

积分

论坛技术达人

积分
300
金钱
253
HASS币
0
 楼主| 发表于 2025-2-17 09:23:36 | 显示全部楼层
gzroc 发表于 2025-2-16 18:00
我部署的方式是使用你的docker-compose(高阶用户)这段代码部署的,我直接在debian11虚拟机拉取的,容器 ...

你好,你这个是openwakeWord的日志,这个是跟stt有连接么?stt这边有没有报错?你可以在语音助手设置那里点击试试声音看看会不会发声?
回复

使用道具 举报

20

主题

708

帖子

3170

积分

论坛元老

Rank: 8Rank: 8

积分
3170
金钱
2462
HASS币
0
发表于 2025-2-17 10:02:49 | 显示全部楼层
ptbsare 发表于 2025-2-17 09:23
你好,你这个是openwakeWord的日志,这个是跟stt有连接么?stt这边有没有报错?你可以在语音助手设置那里 ...

会发声的,只是助手理解不了我说的
回复

使用道具 举报

0

主题

4

帖子

34

积分

新手上路

Rank: 1

积分
34
金钱
30
HASS币
0
发表于 2025-2-17 11:15:57 | 显示全部楼层
本帖最后由 csukuangfj 于 2025-2-17 11:19 编辑

sherpa-onnx 最近刚增加了 kokoro 1.0  tts 的支持,这个模型,目前 sherpa-onnx 支持了中英文。有 53 个说话人,其中,有8个中文口音。
请看文档https://k2-fsa.github.io/sherpa/ ... english-53-speakers

文档里有合成的测试音频。感兴趣的同学,可以去听一下。

---

请面有同学说 40% 这种文字,没法合成。这个不是模型的问题,而是前端的问题.

40% 目前应该只能读 40 (四十). 需要加个 fst, 把 40% 变成 百分之四十,然后送给模型.
注意: 这个模型比较大,在树莓派4B 上的速度比较慢。
https://k2-fsa.github.io/sherpa/ ... ned_models/rtf.html 这里列出了文档的一些模型在树莓派4B 上的 RTF.


回复

使用道具 举报

9

主题

148

帖子

1852

积分

金牌会员

Rank: 6Rank: 6

积分
1852
金钱
1704
HASS币
0
发表于 2025-2-17 15:42:57 | 显示全部楼层
TTS_MODEL设置为vits-melo-tts-zh_en,报错显示为cannot access local variable 'tts_model' where it is not associated with a value

回复

使用道具 举报

1

主题

47

帖子

300

积分

论坛技术达人

积分
300
金钱
253
HASS币
0
 楼主| 发表于 2025-2-17 20:40:56 | 显示全部楼层
Higashi39 发表于 2025-2-17 15:42
TTS_MODEL设置为vits-melo-tts-zh_en,报错显示为cannot access local variable 'tts_model' where it is n ...

你好,0.2.6没有集成此模型,需要0.2.8/0.2.9
回复

使用道具 举报

1

主题

140

帖子

448

积分

中级会员

Rank: 3Rank: 3

积分
448
金钱
308
HASS币
0
发表于 2025-2-17 22:21:54 | 显示全部楼层
学习学习
回复

使用道具 举报

22

主题

658

帖子

2956

积分

金牌会员

Rank: 6Rank: 6

积分
2956
金钱
2298
HASS币
0
发表于 2025-2-17 23:44:41 | 显示全部楼层
gzroc 发表于 2025-2-17 10:02
会发声的,只是助手理解不了我说的

网络问题,助手应该是云端的,,无法响应
回复

使用道具 举报

9

主题

148

帖子

1852

积分

金牌会员

Rank: 6Rank: 6

积分
1852
金钱
1704
HASS币
0
发表于 2025-2-18 10:36:25 | 显示全部楼层
ptbsare 发表于 2025-2-17 20:40
你好,0.2.6没有集成此模型,需要0.2.8/0.2.9

哦哦,了解,升级一下看看

回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|Hassbian

GMT+8, 2025-3-4 22:57 , Processed in 0.088817 second(s), 30 queries .

Powered by Discuz! X3.4

Copyright © 2001-2021, Tencent Cloud.

快速回复 返回顶部 返回列表