有没有具备感情的 tts? - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
shalingye
V2EX    问与答

有没有具备感情的 tts?

  •  
  •   shalingye 2023-06-22 14:26:25 +08:00 via Android 3264 次点击
    这是一个创建于 918 天前的主题,其中的信息可能已经有所发展或是发生改变。
    如题,想把一些日语文字转换成具有感情的音频,有没有开源的仓库?付费的服务也可以。



    背景:小组想把某 galgame 中缺少的语音补全,已经利用 vits 训练好了模型,对话也提取出来了,但发现普通 tts 缺乏感情,导致最终的音频很机械。
    19 条回复    2023-06-23 16:39:49 +08:00
    renmu
        1
    renmu  
       2023-06-22 14:30:53 +08:00 via Android
    自己读,然后用再转换
    DTCPSS
        2
    DTCPSS  
       2023-06-22 14:31:55 +08:00
    不要纯靠 TTS
    自己充满感情地读一遍后用 Voice Conversion 转成目标说话人的声音
    shalingye
        3
    shalingye  
    OP
       2023-06-22 14:34:50 +08:00 via Android
    @DTCPSS
    @renmu
    太多了,而且人读需要成本
    Phasma
        4
    Phasma  
       2023-06-22 14:42:33 +08:00
    shalingye
        5
    shalingye  
    OP
       2023-06-22 14:47:02 +08:00 via Android
    @hymzhek 谢谢,不过这个仓库已经很久没更新了
    fox
        6
    fox  
       2023-06-22 14:54:23 +08:00
    初音未来?
    shalingye
        7
    shalingye  
    OP
       2023-06-22 15:01:26 +08:00 via Android
    @fox 非也
    x77
        8
    x77  
       2023-06-22 15:29:00 +08:00
    pochy06
        9
    pochy06  
       2023-06-22 16:12:28 +08:00
    要不试试 bark ,支持情绪化的一些语音生成
    https://github.com/suno-ai/bark
    whatalittleboy
        10
    whatalittleboy  
       2023-06-22 16:50:05 +08:00
    shalingye
        11
    shalingye  
    OP
       2023-06-22 17:27:17 +08:00 via Android
    @x77 不太符合...
    shalingye
        12
    shalingye  
    OP
       2023-06-22 17:27:42 +08:00 via Android
    @spico1026 已测试,感情很不稳定...每次生成很随机
    findex
        13
    findex  
       2023-06-22 21:33:11 +08:00 via iPhone
    同求啊
    strp
        14
    strp  
       2023-06-22 22:47:13 +08:00
    男声的话 iOS 的 British Voice 2 还有 Russian Voice 1 我觉得都挺有感情的。Japanese Voice 1 是男声 Voice 2 是女声。
    id80108900
        15
    id80108900  
       2023-06-23 00:41:56 +08:00
    现阶段不敢奢求感情,只求『自然』点。
    shalingye
        16
    shalingye  
    OP
       2023-06-23 03:16:05 +08:00 via Android
    @id80108900
    @findex
    @whatalittleboy
    已测试 emotion-vits ,其携带感情向量,基本达到预期效果。然而,项目错误太多,经过艰难险阻后最终也没有办法训练出模型,只能曲线救国使用它的面板制作前置 tts 语音,然后借助前置语音用自己的模型在 so-vits 面板上推理出最终的效果。
    id80108900
        17
    id80108900  
       2023-06-23 14:03:31 +08:00
    @shalingye 我挺相信人工智能的,说不定过些日子,就有突破了。
    shalingye
        18
    shalingye  
    OP
       2023-06-23 16:36:30 +08:00   1
    进展:已成功开启 emotion-vits 训练,等晚上用面板推理实际文件。
    shalingye
        19
    shalingye  
    OP
       2023-06-23 16:39:49 +08:00
    @strp 不太符合需求,因为不仅仅是需要感情,还有一些情景的考虑,这些变量应该让人来选择。
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     5261 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 25ms UTC 09:02 PVG 17:02 LAX 01:02 JFK 04:02
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86