我之前有研究過DeepFaceLab換臉屬於專人專模所以每換一個人, 都需要再特別訓練這個人的模型
今天剛開始研究MockingBird也下載了網友提供的已訓練模型但很妙的是, 只需要提供本地的一小段音訊來源, 就能有不錯的合成效果既然如此, 有必要特別去訓練一個新的模型嗎? (或是特地製作一個新的資料集/語料庫)
bsxbgnwa1#
如果你想要专门产生某个人的特化模型，只需要很小的数据集就能训练出更唯妙唯俏的模型，另外，模仿的效果受数据集影响，有些数据集中没有的字词可能没法很好的发音
vfh0ocws2#
@AyahaShirane
感謝解答另外我想問
我已下載了 @FawenYo (台灣口音) 的模型原本開發者提供的數據集都是大陸口音如果我想特化的人是台灣口音的話
cgvd09ve3#
专项训练参照这个视频MockingBird数据集制作教程-手把手教你克隆海子姐的声线_哔哩哔哩_bilibili< https://www.bilibili.com/video/BV1dq4y137pH > 实测在已有模型基础上训练20K左右就能改变成想要的语音语调了。你如果是想要泛用型台湾口音的话，就尽可能收集更多人的数据集，否则会偏向特定某一个人的口音，而且断句和停顿似乎也会受到新数据集的影响 Sent from Mail< https://go.microsoft.com/fwlink/?LinkId=550986 > for Windows From:***@***.***> Sent: 2022年2月11日 1:28 To:***@***.***> Cc:***@***.***>;***@***.***> Subject: Re: [babysor/MockingBird] 小白l�� ��的用意? (Issue #380) @AyahaShirane< https://github.com/AyahaShirane > 感x解答 另外我想�� 我已下d了 @FawenYo< https://github.com/FawenYo > (台�晨谝) 的模型 原本_l者提供的��际谴箨�口音 如果我想特化的人是台�晨谝舻脑� 1. 那N我除了��浯巳说��, 是否需要跟原本_l者提供的��黄鹩��? �是�渭��此人的就可以了? 2. 我是否可以用�e人已�好的模型�榈鬃, 用新的��(我想特化的�ο)^m��? ― Reply to this email directly, view it on GitHub<#380 (comment)>, or unsubscribe< https://github.com/notifications/unsubscribe-auth/AT53I7Q3RN5FDDFTZQMU4NTU2PYVDANCNFSM5OAGBC7A >. Triage notifications on the go with GitHub Mobile for iOS< https://apps.apple.com/app/apple-store/id1477376905?ct=notification-email&mt=8&pt=524675 > or Android< https://play.google.com/store/apps/details?id=com.github.android&referrer=utm_campaign%3Dnotification-email%26utm_medium%3Demail%26utm_source%3Dgithub >. You are receiving this because you were mentioned.Message ID:***@***.***>
xhv8bpkk4#
已被收集至 https://github.com/babysor/MockingBird/issues/437， great thanks to @AyahaShirane
4条答案
按热度按时间bsxbgnwa1#
如果你想要专门产生某个人的特化模型，只需要很小的数据集就能训练出更唯妙唯俏的模型，另外，模仿的效果受数据集影响，有些数据集中没有的字词可能没法很好的发音
vfh0ocws2#
@AyahaShirane
感謝解答
另外我想問
我已下載了 @FawenYo (台灣口音) 的模型
原本開發者提供的數據集都是大陸口音
如果我想特化的人是台灣口音的話
還是單純練此人的就可以了?
cgvd09ve3#
专项训练参照这个视频MockingBird数据集制作教程-手把手教你克隆海子姐的声线_哔哩哔哩_bilibili< https://www.bilibili.com/video/BV1dq4y137pH > 实测在已有模型基础上训练20K左右就能改变成想要的语音语调了。你如果是想要泛用型台湾口音的话，就尽可能收集更多人的数据集，否则会偏向特定某一个人的口音，而且断句和停顿似乎也会受到新数据集的影响 Sent from Mail< https://go.microsoft.com/fwlink/?LinkId=550986 > for Windows From:***@***.***> Sent: 2022年2月11日 1:28 To:***@***.***> Cc:***@***.***>;***@***.***> Subject: Re: [babysor/MockingBird] 小白l�� ��的用意? (Issue #380) @AyahaShirane< https://github.com/AyahaShirane > 感x解答 另外我想�� 我已下d了 @FawenYo< https://github.com/FawenYo > (台�晨谝) 的模型 原本_l者提供的��际谴箨�口音 如果我想特化的人是台�晨谝舻脑� 1. 那N我除了��浯巳说��, 是否需要跟原本_l者提供的��黄鹩��? �是�渭��此人的就可以了? 2. 我是否可以用�e人已�好的模型�榈鬃, 用新的��(我想特化的�ο)^m��? ― Reply to this email directly, view it on GitHub<#380 (comment)>, or unsubscribe< https://github.com/notifications/unsubscribe-auth/AT53I7Q3RN5FDDFTZQMU4NTU2PYVDANCNFSM5OAGBC7A >. Triage notifications on the go with GitHub Mobile for iOS< https://apps.apple.com/app/apple-store/id1477376905?ct=notification-email&mt=8&pt=524675 > or Android< https://play.google.com/store/apps/details?id=com.github.android&referrer=utm_campaign%3Dnotification-email%26utm_medium%3Demail%26utm_source%3Dgithub >. You are receiving this because you were mentioned.Message ID:***@***.***>
xhv8bpkk4#
已被收集至 https://github.com/babysor/MockingBird/issues/437， great thanks to @AyahaShirane