本地语言助手基于Sherpa Onnx的Wyoming STT/TTS Addon无惧断网纯离线

ptbsare

bugensui 发表于 2025-2-11 11:35
说话速度太慢了。默认好像是1，我改成0.5好像效果一样，加快应该设置多少，另外说话的声音哪个模型，比较贴 ...

你好，时间原因，插件目前是仅工作状态，一些功能可能需要时间适配比如自定义模型等，speed参数调大可变快，可能还有一些bug，说话声音是是模型的提供的，插件只是对接模型。关于效果，因为我们要在速度和效果上取得一个折中点，采用Sherpa Onnx是因为他在本地运行识别stt和tts比较快，CPU即可不需要太强GPU；目前效果比较好的模型一般需要的运算力比较大且难以实时识别及输出。如果你有更好的想法，欢迎在Github上提交pull request。谢谢!
更新：自定义模型/参数已在v0.2.8。

bugensui

ptbsare 发表于 2025-2-11 11:43
你好，时间原因，插件目前是仅工作状态，一些功能可能需要时间适配比如自定义模型等，speed参数调大可变 ...

谢谢回复，那我期待插件完善

ptbsare

bugensui 发表于 2025-2-11 11:35
说话速度太慢了。默认好像是1，我改成0.5好像效果一样，加快应该设置多少，另外说话的声音哪个模型，比较贴 ...

hi，你好啊，如果改speed速度（例如加快语速将其改为1.5）后启动addon，再调用TTS，如果TTS文字一样homeassistant是不会重新调用TTS引擎的，而是使用已有的缓存结果的，测试可以换个TTS文字，我刚才测试speed是生效的。或者在homeassistant里面执行Text-to-speech (TTS): 清除 TTS 缓存: tts.clear_cache服务后再测试试试，谢谢！

bugensui

ptbsare 发表于 2025-2-11 12:45
hi，你好啊，如果改speed速度（例如加快语速将其改为1.5）后启动addon，再调用TTS，如果TTS文字一样homea ...

原来如此，ha的缓存机制我忘记了。一样的文字，tts就不工作了。直接调用上次的，我说怎么没有效果，谢谢了。

penguinmm

我是debian12系统，amd64架构，我想用docker pull ghcr.io/ptbsare/home-assistant-addons/amd64-addon-sherpa-onnx-tts-stt拉取镜像

xun897426280

我是N5095，测试了一下，控制速度飞快，吊打siri，买了一个HA Voice，等到了试试看，能不能用这个作为STT和TTS，可以的话，就siri可以退休了

duanyudan123

社区有你更精彩

dscao

效果还不错，本地tts在小主机上也基本上可以用了。 本地中文语言方面又进了一大步。J4125 allinone 一般一句话tts在3秒左右，stt 30个字左右的一句话约8秒。如果用性能强的主机速度上肯定更好。

因为没有latest，docker 部署需要在最后加上版本号，即  :0.2.6

群晖中Container manager项目部署：

version: "3.0"
services:
  certimate:
    image: ghcr.io/ptbsare/home-assistant-addons/amd64-addon-sherpa-onnx-tts-stt:0.2.6
    container_name: sherpa-onnx-tts-stt
    environment:
      LANGUAGE: "zh-CN"
      STT_MODEL: "sherpa-onnx-paraformer-zh-2023-03-28"
      SPEED: "1.2"
      STT_USE_INT8_ONNX_MODEL: "True"
      STT_THREAD_NUM: "3"
      TTS_MODEL: "matcha-icefall-zh-baker"
      TTS_THREAD_NUM: "3"
      TTS_SPEAKER_SID: "0"
      DEBUG: "True"
    ports:
      - 10400:10400
    restart: unless-stopped

复制代码

后来用 mac mini m4测试了一下，基本是秒出结果。

ptbsare

penguinmm 发表于 2025-2-11 13:33
我是debian12系统，amd64架构，我想用docker pull ghcr.io/ptbsare/home-assistant-addons/amd64-addon-she ...

你好啊，不好意思是我的疏忽，代码粘漏了，感谢@dscao 提醒，已经同步更新帖子，pull加上tag 0.2.6：

docker pull ghcr.io/ptbsare/home-assistant-addons/amd64-addon-sherpa-onnx-tts-stt:0.2.6

复制代码

再试试，谢谢！

penguinmm

好的，谢谢，已经正常拉取。