Найти в Дзене

Сайт weights казалось бы теперь можно создавать прикольные каверы с голосами известных вокалистов, но...

Но это почти так. Ниже я выложу намеренно криво исполненные песни каверы, чтобы показать какой же ии алгоритм ещё сырой. Чтобы окончательно дать издохнуть ии вокалу и измотать его дам ему две песни Уитни Хьюстон, которые ни один вокальный ии пока без орехов не смог исполнить. И другие тоже. Испытуемый будет ии вокал исполнителя D.O. of Exo - взятый отсюда- https://www.weights.com/ru/models/clm73gsud2dn1cctc9y66cto6. А первый кавер будет с ии голосом NCT Doyoung. И собственно что вышло- первый кавер если оценивать по 10 бальной шкале- 5 из 10, ближе к концу вокальный ии сдох и питч сломался. Второй- вроде неплохо так взял ноты-поставлю 7 из 10, но увы, снова не без багов в вокале. Песни Уитни Хьюстон- ну похвалить ии думаю стоит- темр красивый и вписался органично. На песне I am every woman ии вокал D.O. of Exo издох быстро хоть и стал пытаться брать высокие ноты, захлебнулся и сломал питч себе. В песне I have nothing, что странно питч почти не сломался(ближе к концу только)и захлебну

Но это почти так. Ниже я выложу намеренно криво исполненные песни каверы, чтобы показать какой же ии алгоритм ещё сырой.

Чтобы окончательно дать издохнуть ии вокалу и измотать его дам ему две песни Уитни Хьюстон, которые ни один вокальный ии пока без орехов не смог исполнить. И другие тоже.

Испытуемый будет ии вокал исполнителя D.O. of Exo - взятый отсюда- https://www.weights.com/ru/models/clm73gsud2dn1cctc9y66cto6.

А первый кавер будет с ии голосом NCT Doyoung.

И собственно что вышло- первый кавер если оценивать по 10 бальной шкале- 5 из 10, ближе к концу вокальный ии сдох и питч сломался.

Второй- вроде неплохо так взял ноты-поставлю 7 из 10, но увы, снова не без багов в вокале.

Песни Уитни Хьюстон- ну похвалить ии думаю стоит- темр красивый и вписался органично.

На песне I am every woman ии вокал D.O. of Exo издох быстро хоть и стал пытаться брать высокие ноты, захлебнулся и сломал питч себе.

В песне I have nothing, что странно питч почти не сломался(ближе к концу только)и захлебнулся ии вокал лишь чуть чуть.

В общем всё зависит от случая- где-то как в вышеперечисленных песнях они будут очень слышны, а в других вы не обратите на это внимания- в одной песне вокал ии спел её так чисто без огрехов, что мне завидно стало. Почему чисто загадка. Просто повезло?

Я намеренно взял сложные для исполнения песни.

В общем пока к сервису куча вопросов:

почему если одну песню ии поёт чисто, то другие не хочет и появляются артефакты? Тем более песня в довольно высокой тональности(что спел ии чисто).

Почему некоторые слова он не пропевает?

Почему ломается питч? Ведь как уверяли в статье про тот же Soft VC, тембр, высота звука не имеет значения- он споёт вам как вы хотите, тем более оба алгоритма схожи и Soft VC и RVC 2(модели на сайте weights в основном сделаны на последней проге RVC 2). На деле не споёт выходит.

Почему появляются хрипы и запинания и заикания, эффект зажёванной ленты от кассеты?

Почему понижения или повышения питча вокальной модели не убирают хрипы и ломание питча?

Можно ли обучить вокальную модель так чтобы вышеназванных артефактов не было или это всё вина алгоритма?

Может быть питч у ии вокала ломается только когда вокальная мелодия слишком резко идёт вниз или вверх?