当前多数语音AI依赖云端服务,每生成一句都要往返服务器,不仅产生延迟,还可能带来隐私泄露风险。Phonon TTS模型彻底改变这一模式,它体积小巧,可完全在用户本地设备上运行,文本和生成的语音均不离开设备。

团队在四月宣布项目后,用六个月时间与合作伙伴、早期用户共同迭代,根据反馈把模型做得更小,增加更多语言支持,并加入语音克隆和语音设计功能,让开发者能轻松定制声音。Phonon基于Pocket TTS,使用流匹配技术生成音频,这与主流TTS建模方式差异明显,使得小模型也能达到高品质,同时也带来了训练阶段的新挑战。

许可与性能

Phonon 31m参数模型采用Apache 2.0许可,开发者可免费用于包括商业产品在内的任何项目。其他版本使用CC BY-NC许可,适用于非商业用途,若用于商业则按用户数量而非生成量计费。该系列在Hugging Face Open TTS Leaderboard上取得领先成绩。

本地TTS对AI应用意义重大,尤其适合移动端、边缘计算或离线环境。中文开发者可在智能助手、文档朗读工具或AI Agent的语音交互模块中集成Phonon,实现零延迟、自然发音且完全私密的体验。获取权重后可立即测试,并根据具体设备资源进一步优化。