Модель нақты нені көшіреді

OpenVoice сөйлеушінің қысқа үлгісінен тембрді клондауға арналған. Зерттеу жобасы сөйлеу стилін басқаруды және тілдер арасында көшіруді де сипаттайды. Модельді адам болмысын толық қайталауға немесе кез келген бастапқы сөйлемнің интонациясын дәл беруге уәде ретінде қабылдауға болмайды. Тембрдің танылуы мен орындау сапасын бөлек бағалау қажет.

Репозиторийде бір модельдің V1 және V2 буындары берілген. V2 үшін алты нативті қолдау көрсетілетін тіл аталған: ағылшын, испан, француз, қытай, жапон және корей тілдері. Басқа тілдердегі жеке демонстрациялар оларды бірдей қолдау көрсетілетін өндірістік режимге айналдырмайды. Ұзақ жазбаны дайындамас бұрын қажетті тіл мен сөйлеу процесін құру тәсілі тексеріледі.

Өз үлгіңізді дайындау

Оқу тапсырмасына тыныш бөлмеде өз дауысыңызды жазып, бірнеше қысқа сөйлем дайындаңыз. Орындаушы рұқсатының орнына сұхбаттан алынған бөтен үзіндіні қолданбаңыз. Алдымен бастапқы жазбаны тексеріңіз: қатты фон, шамадан тыс дыбыс және анық емес сөйлеу өзгерістің қайсысы модельден болғанын бағалауды қиындатады.

Генерациядан кейін қысқа және ұзақ сөздердегі айтылуды, кідірістерді және тембр біркелкілігін салыстырыңыз. Ызың дыбыстар, сөз аяқталуы және дыбыс деңгейінің өзгеруі де маңызды. Дайын нұсқа ұқсас естіліп, бірақ сөз жоғалтса, оны түзету не ауыстыру керек. Бастапқы материалды, баптаулар мен аралық деректерді сақтаңыз; бір үзінді нәтижесі бүкіл дыбыстау сапасына кепіл болмайды.

Мысалды қайталау жоспарланса, код нұсқасы, қолданылған салмақтар және аудионы дайындау туралы мәліметті сақтаңыз. Синтездің бір компонентін ауыстыру дауыс үлгісі сол қалпында болса да, айтылуды өзгертуі мүмкін. Мұндай журнал модель нәтижесін оның айналасындағы бағдарламалық процестің айырмашылықтарынан ажыратуға көмектеседі және бір аудиофайлға қарап қайталанғыштықты уәде етпеуге мүмкіндік береді.

Лицензия және өз ортаңыз

Ресми репозиторий V1 мен V2 үшін MIT лицензиясын көрсетіп, модельді сол лицензия бойынша коммерциялық пайдалануға рұқсат береді. Бұл адамның дауысына, бастапқы жазбалар мен мәтіндерге құқықты жоймайды. Бағдарламалық кодты пайдалануға рұқсат пен нақты дауысты қайталауға келісім бөлек негіздерге жатады.

Іске қосу тәуелділіктерді, салмақтар мен байланысты синтез компоненттерін дайындауды талап етеді. Модельге бөлек ақы алынбаса да, өз жабдығыңыз бен қолдау шығыны сізде қалады. Зерттеу моделін жылдамдығы белгіленген, қолдауы кепілденген дайын бұлттық сервиспен теңестірмеңіз. Жауапты жарияланымда синтетикалық сөйлеудің шығу тегі түсінікті болуын да тексеріңіз.

Қандай тапсырмаларға жарайды

Рұқсат етілген дауыс үлгісімен дыбыстау жасау
Тембрді тілдер арасында көшіруді зерттеу
Өз сөйлеу синтезі процесін құру

Мүмкіндіктер

Артықшылықтары

MIT бойынша ашық код пен модельдер
Жергілікті іске қосу және зерттеу құжаттамасы

Ескерген жөн

Шектеулер

Синтез ортасын дайындау қажет
Тіл қолдауы мен сапа тексеруді талап етеді

Таңдау және шарттар

Тегін режим: Иә
Сынақ кезеңі: Расталмаған
Тіркелусіз: Расталмаған
Орысша интерфейс: Расталмаған
Жергілікті орнату: Иә
API: Расталмаған

«Расталмаған» деген белгі мәліметтің жеткіліксіз екенін білдіреді. Мүмкіндік бар болуы ықтимал; әзірлеушінің шарттарын тексеріңіз.

Бастапқы пішімдер: Мәтін, Аудио
Нәтиже: Аудио

Шарттар

MIT лицензиясы модельге қатысты, бірақ дауыс пен бастапқы материал құқықтарын алмастырмайды. Өз ортаңыз қажет; V2 нативті қолдауы әзірлеуші атаған тілдермен шектеледі.

Тапсырмадан алғашқы нәтижеге

Практикалық мысал

Тапсырма: Рұқсат етілген дауыс үлгісімен дыбыстау жасау
Не дайындау керек: Ағылшын тіліндегі өз қысқа мәтініңіз, қолдануға рұқсат берілген дауыс жазбасы және бапталған OpenVoice V2 ортасы.

Тапсырма немесе сұрау

Hello. We will check the notification settings. First, open your profile. Then open the settings and find notifications. Save your changes.

Күтілетін нәтиже

Тыңдап тексеруге арналған ағылшынша дыбыстау нобайы. Дауыс тембрінің ұқсастығын, айтылымын және үзілістерін бөлек бағалаңыз.

Нәтижені қалай тексеруге болады

Айтылым мен түсіп қалған сөздерді ағылшынша мәтінмен салыстырыңыз.
Дауыс тембрін рұқсат берілген үлгімен бірдей дыбыс деңгейінде салыстырыңыз.
Код пен модель салмақтарының нұсқаларын және аудионы дайындау баптауларын сақтаңыз.

Бұл сервисті жеке сынаудың нәтижесі емес, тапсырманы қоюға арналған редакциялық оқу мысалы. Қажетті режимнің қолжетімділігін, бастапқы материалдарға құқықтарды және нәтижені пайдалану шарттарын тексеріңіз.

Толық мәліметті тексеру

Ресми дереккөздер

Сипаттама әзірлеуші материалдары бойынша жасалған. Мүмкіндіктер, бағалар мен қолжетімділік өзгеруі мүмкін; пайдаланбас бұрын бастапқы дереккөзбен салыстырыңыз.

OpenVoice.