gen-aliyun-tts-doc.js 8.6 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193
  1. #!/usr/bin/env node
  2. /**
  3. * gen-aliyun-tts-doc.js — 生成阿里云百炼 TTS 文档
  4. *
  5. * 数据来源:
  6. * 1. 代码里 server/src/modules/tts/tts.service.ts 的 ALIYUN_VOICE_MAP(10 个龙系列音色)
  7. * 2. server/.env 里的 DASHSCOPE_* 配置
  8. * 3. 公开资料补充
  9. *
  10. * 注意:DashScope 没提供 list_voices HTTP 接口(试过 SpeechSynthesizer/voices、
  11. * multimodal-generation/voices、/api/v1/models 等都返回 url error),
  12. * 完整列表需要从阿里云控制台 → 模型服务 → 语音合成 → 音色列表页 复制。
  13. */
  14. const fs = require('fs');
  15. const path = require('path');
  16. const repo = path.resolve(__dirname, '..', '..');
  17. const ttsService = fs.readFileSync(path.join(repo, 'server/src/modules/tts/tts.service.ts'), 'utf8');
  18. // 解析 ALIYUN_VOICE_MAP
  19. const aliyunMatch = ttsService.match(/const ALIYUN_VOICE_MAP[^=]*=\s*\{([\s\S]*?)\};/);
  20. const aliyunVoices = [];
  21. if (aliyunMatch) {
  22. const block = aliyunMatch[1];
  23. for (const line of block.split('\n')) {
  24. const m = line.match(/^\s*(voice_\d+):\s*'(\w+)',\s*(?:\/\/\s*(.+))?$/);
  25. if (m) {
  26. aliyunVoices.push({
  27. id: m[1],
  28. name: m[2],
  29. desc: m[3] ? m[3].trim() : '',
  30. });
  31. }
  32. }
  33. }
  34. const md = [];
  35. md.push('# 阿里云百炼 TTS 文档');
  36. md.push('');
  37. md.push('> 当前线上同时支持 Edge TTS(免费) 和 阿里云百炼(付费,听感更自然)。');
  38. md.push('');
  39. md.push('**项目当前默认:** Edge TTS(因为免费),阿里云是降级/fallback 选项。要切换默认改 `server/src/config/models.json` 的 `tts.defaultVendor: bailian`。');
  40. md.push('');
  41. md.push('## 关键配置文件');
  42. md.push('');
  43. md.push('### 1. `server/.env`');
  44. md.push('');
  45. md.push('```bash');
  46. md.push('DASHSCOPE_API_KEY=sk-c25679401ba24c749f53be86b0c9a7a6');
  47. md.push('DASHSCOPE_MODEL=qwen3-tts-instruct-flash # 默认 TTS 模型');
  48. md.push('DASHSCOPE_TTS_MODELS=qwen3-tts-flash # 备用模型列表(逗号分隔)');
  49. md.push('DASHSCOPE_VOICE=Cherry # Qwen-TTS 默认音色');
  50. md.push('DASHSCOPE_USE_REALTIME=true # 启用流式 WebSocket');
  51. md.push('DASHSCOPE_REALTIME_MODEL=qwen3-tts-instruct-flash-realtime');
  52. md.push('```');
  53. md.push('');
  54. md.push('### 2. `server/src/config/models.json`');
  55. md.push('');
  56. md.push('TTS 供应商注册(在 vendor registry 里维护):');
  57. md.push('');
  58. md.push('```json');
  59. md.push('{');
  60. md.push(' "tts": {');
  61. md.push(' "defaultVendor": "edge", // 当前默认');
  62. md.push(' "defaultModel": "edge-tts",');
  63. md.push(' "defaultVoice": "zh-CN-XiaoxiaoNeural",');
  64. md.push(' "bailian": {');
  65. md.push(' "priority": 3,');
  66. md.push(' "models": [');
  67. md.push(' { "id": "cosyvoice-v3-flash", "enabled": true },');
  68. md.push(' { "id": "qwen3-tts-instruct-flash", "enabled": true },');
  69. md.push(' { "id": "qwen3-tts-flash", "enabled": true }');
  70. md.push(' ]');
  71. md.push(' }');
  72. md.push(' }');
  73. md.push('}');
  74. md.push('');
  75. md.push('### 3. `server/src/modules/tts/tts.service.ts:243` ALIYUN_VOICE_MAP');
  76. md.push('');
  77. md.push('前端统一 ID(voice_01~voice_10)→ 阿里云真实音色的映射(代码里):');
  78. md.push('');
  79. md.push('| 前端 ID | 阿里云音色 | 描述 |');
  80. md.push('|---------|------------|------|');
  81. for (const v of aliyunVoices) {
  82. md.push(`| ${v.id} | \`${v.name}\` | ${v.desc} |`);
  83. }
  84. md.push('');
  85. md.push('> 命名规律:"龙"+性格(安欢/安洋/呼呼/媛/逸尘/老伯/华/硕/安柔/泡泡),"\_v3" 后缀是 cosyvoice V3 模型系列。');
  86. md.push('');
  87. md.push('## 阿里云 TTS 模型对照');
  88. md.push('');
  89. md.push('| 模型 ID | 系列 | 特点 | 项目是否启用 |');
  90. md.push('|---------|------|------|-------------|');
  91. md.push('| `cosyvoice-v3-flash` | CosyVoice | 中文专精,支持方言和情感 instruct,**降速是模型级**(非后处理) | ✅ |');
  92. md.push('| `cosyvoice-v2` | CosyVoice | 中文 V2,质量好但慢 | ❌(备用) |');
  93. md.push('| `qwen3-tts-instruct-flash` | Qwen-TTS | 多语言,支持自然语言 instruct("语速较慢") | ✅(.env 默认) |');
  94. md.push('| `qwen3-tts-flash` | Qwen-TTS | 多语言快速版 | ✅(备用) |');
  95. md.push('');
  96. md.push('## 当前默认音色: Cherry');
  97. md.push('');
  98. md.push('- **模型:** `qwen3-tts-instruct-flash`');
  99. md.push('- **音色名:** Cherry');
  100. md.push('- **性别:** 女声');
  101. md.push('- **支持语言:** 中文(普通话)、英文、粤语等');
  102. md.push('');
  103. md.push('要换音色:');
  104. md.push('');
  105. md.push('```bash');
  106. md.push('# .env');
  107. md.push('DASHSCOPE_VOICE=longanhuan_v3 # 或 voice_01(代码会映射)');
  108. md.push('');
  109. md.push('# 或者直接传 ID(只对 cosyvoice 有效)');
  110. md.push('DASHSCOPE_VOICE=longyichen_v3 # 龙逸尘阳光男声');
  111. md.push('```');
  112. md.push('');
  113. md.push('## 切换整个 vendor 到阿里云(全量替换 Edge TTS)');
  114. md.push('');
  115. md.push('编辑 `server/src/config/models.json`:');
  116. md.push('');
  117. md.push('```diff');
  118. md.push(' "tts": {');
  119. md.push('- "defaultVendor": "edge",');
  120. md.push('+ "defaultVendor": "bailian",');
  121. md.push(' "defaultModel": "qwen3-tts-instruct-flash",');
  122. md.push(' "defaultVoice": "Cherry"');
  123. md.push(' }');
  124. md.push('```');
  125. md.push('');
  126. md.push('然后 `pm2 restart server` 即可,所有新生成的音频都会走阿里云(消耗 dashscope 余额)。');
  127. md.push('');
  128. md.push('## 完整 voice 列表(从阿里云控制台)');
  129. md.push('');
  130. md.push('**当前缺口:** DashScope 没提供程序化的 voice list API(POST `/services/audio/tts/SpeechSynthesizer/voices` 一直返回 "url error"),所以本节需要手动维护。');
  131. md.push('');
  132. md.push('获取方式:');
  133. md.push('');
  134. md.push('1. 登录 [阿里云百炼控制台](https://bailian.console.aliyun.com/)');
  135. md.push('2. 进入 **模型服务 → 语音合成 → 音色列表**');
  136. md.push('3. 切换模型(cosyvoice / qwen-tts 分别看)');
  137. md.push('4. 复制音色清单 → 提交 PR 补到本节');
  138. md.push('');
  139. md.push('或者翻到 `https://help.aliyun.com/zh/model-studio/cosyvoice-voice-list` 这个官方页面手工抄。');
  140. md.push('');
  141. md.push('### 已知 / 项目支持(从代码汇总)');
  142. md.push('');
  143. md.push('| 音色 | 系列 | 性别 | 描述 |');
  144. md.push('|------|------|------|------|');
  145. md.push('| `Cherry` | Qwen-TTS | 女 | Qwen-TTS 默认,中文/英文 |');
  146. md.push('| `longanhuan_v3` | CosyVoice | 女 | 元气女声,支持 Instruct |');
  147. md.push('| `longanyang` | CosyVoice | 男 | 阳光男声,支持 Instruct |');
  148. md.push('| `longhuhu_v3` | CosyVoice | 女童 | 飞天泡泡音,支持 Instruct |');
  149. md.push('| `longyuan_v3` | CosyVoice | 女 | 温暖治愈 |');
  150. md.push('| `longyichen_v3` | CosyVoice | 男 | 阳光活力,支持 Instruct |');
  151. md.push('| `longlaobo_v3` | CosyVoice | 男 | 沧桑老伯 |');
  152. md.push('| `longhua_v3` | CosyVoice | 女 | 元气甜美 |');
  153. md.push('| `longshuo_v3` | CosyVoice | 男 | 清朗男声 |');
  154. md.push('| `longanrou_v3` | CosyVoice | 女 | 温柔闺蜜,支持 Instruct |');
  155. md.push('| `longpaopao_v3` | CosyVoice | 女童 | 飞天泡泡音,支持 Instruct |');
  156. md.push('');
  157. md.push('> 注:CosyVoice V3 系列里更多音色(龙小白/龙大叔/龙小美等)代码里没引用,需要时直接换 `.env` 的 `DASHSCOPE_VOICE` 即可(API 不校验)。');
  158. md.push('');
  159. md.push('## 语速控制差异(对比 Edge TTS)');
  160. md.push('');
  161. md.push('| 实现 | 等价于播放器减速? | 听感自然度 |');
  162. md.push('|------|-------------------|----------|');
  163. md.push('| **Edge TTS `--rate=-22%`** | **是**(后处理拉伸) | 一般 |');
  164. md.push('| **Qwen-TTS Instruct "语速较慢"** | **否**(模型级慢生成) | **更好**(模型重新设计停顿和韵律) |');
  165. md.push('');
  166. md.push('结论:');
  167. md.push('- Edge TTS 路径下,所有 voiceParams.speed 都被忽略(强制 1.0)。用户想减速用播放器 UI 倍速按钮(详情见 commit dd1fea03)。');
  168. md.push('- 阿里云路径下,preserve speed 参数,通过 instruct("语速较慢")传给模型,听感更好。');
  169. md.push('');
  170. md.push('## 常见问题');
  171. md.push('');
  172. md.push('**Q: 阿里云音色比 Edge TTS 贵多少?**');
  173. md.push('');
  174. md.push('A: 阿里云按字符计费,cosyvoice-v3-flash 价格约 ¥0.00003/字,4000 字章节音频约 ¥0.12。qwen-tts 类似价。Edge TTS 免费。');
  175. md.push('');
  176. md.push('**Q: 怎么测试某个音色?**');
  177. md.push('');
  178. md.push('```bash');
  179. md.push('# 1. 在 .env 改 DASHSCOPE_VOICE=longyichen_v3');
  180. md.push('# 2. 调用 /api/tts/generate 走默认 vendor=bailian 路径');
  181. md.push('# 3. 或在 models.json 把 defaultVendor 改成 bailian');
  182. md.push('```');
  183. md.push('');
  184. md.push('**Q: 音色 ID 拼错了会怎样?**');
  185. md.push('');
  186. md.push('A: 阿里云不会本地验证,直接发 HTTP 请求,服务端返回 400 或用默认音色(不会报错)。');
  187. md.push('');
  188. process.stdout.write(md.join('\n'));