Walkie-Talkie Mode
2026-03-30
新闻来源:网淘吧
围观:25
电脑广告
手机广告
对讲机模式
此功能利用本地转录和本地文本转语音技术,在WhatsApp上实现语音到语音的自动化循环。
工作流程
-
接收音频:当用户发送音频/ogg/opus文件时:

- 使用
tools/transcribe_voice.sh获取文本。 - 将此文本作为普通用户提示进行处理。
- 使用
-
发送回复:
- 不发送文本回复,而是使用
bin/sherpa-onnx-tts生成语音。 - 将生成的
.ogg文件作为语音笔记发送回用户。
- 不发送文本回复,而是使用
触发条件
- 用户发送音频消息。
- 用户说“activa modo walkie-talkie”或“hablemos por voz”。
限制条件
- 仅使用本地工具(ffmpeg、whisper-cpp、sherpa-onnx-tts)。
- 保持快速的响应时间(RTF < 0.5)。
- 始终同时回复文本(为了清晰)和音频。
手动执行(内部)
要手动以语音回应:
bin/sherpa-onnx-tts /tmp/reply.ogg "Tu mensaje aquí"
然后发送/tmp/reply.ogg通过消息工具与filePath。
文章底部电脑广告
手机广告位-内容正文底部


微信扫一扫,打赏作者吧~