Найти тему
632 подписчика

Искусственный интеллект подвёл


Я некоторое время назад хвалился, как я ловко делаю минусы с помощью нейронных сетей (например, есть сервис vocali.si, и он далеко не единственный такой). И вот как я на этом напоролся. Есть такая песня Аль Бано, называется Angeli. В ней он нельзя сказать, чтобы очень точно интонирует. Ну, итальянцы, вибрато. Что я сделал:
* разрезал с помощью vocali.se её на вокал и остальное
* выяснил (не сразу), что настройка в моей записи примерно на 435 герц
* мелодайном привёл всё пение Аль Бано к равномерно-темперированному строю (это не идеально, но лучше, чем у него было)
* стал слушать исправленное пение, подпевать ему и аккомпанементу

Надо сказать, я эту песню знаю с детства, поэтому я выучил её интонации и переучиться на новые интонации трудно, хотя и возможно. И тут мне попалось место, на слова "абрача ми", где ну никак не получается. Пою точно или подправляю себя мелодайном и слышу фальшь.

Я уже давно рисую себе страшилки про некратные (как в рояле) или негармоничные гармоники в пении, например, 7-я, 11-я, 13-я и 14-я гармоники попадают очень сильно мимо любой ноты. Соответственно, если они громкие, то может из-за этого звучать фальшиво. И может быть, думал я, занижение - это этакая "кривая рейлсбека" для голоса, с помощью которой вокалисты всё это приводят к некоему среднему, наименее фальшивому на слух значению. Для проверки можно резать эти частоты эквалайзером, а потом, если это окажется правдой, настраивать тембр голоса так, чтобы этих частот было поменьше. Но это пока что лишь гипотеза.

А вот что я нашёл в реальности, когда стал разбираться конкретно с этой нотой - так то, что нейронная сеть не полностью выделила голос из вокала и какой-то кусок исходного заниженного голоса Аль-Бано остался. Именно в сочетании с ним моё точное пение звучало фальшиво.

Пожалуй, я теперь буду гораздо аккуратнее пользоваться нейронными сетями. Как минимум, нужно отсматривать возможность такой неполной очистки голоса, в мелодайне это осуществимо - для этого нужно полифонически разобрать аккомпанемент и найти, что где фальшивит. Кстати, и сам аккомпанемент просто бывает нестройным, в том числе и в итальянской эстраде.
1 минута
130 читали