Вышла MARS5 — нейросеть от CAMB.AI, способная клонировать голос на более чем 140 языках. Это одна из самых многоязычных моделей среди аналогов. Ключевая особенность MARS5 — способность сохранять интонацию и эмоциональную окраску оригинального голоса при клонировании.
MARS5 поддерживает русский язык и автоматически генерирует субтитры на языках, на которые выполняется перевод. Эта функция значительно упрощает локализацию контента, делая его доступным для широкой многоязычной аудитории. Субтитры создаются синхронно с переводом, что делает процесс удобным и быстрым при работе с видеоконтентом.
Кроме того, MARS5 умеет подстраивать липсинг — синхронизацию движений губ с новыми репликами на другом языке. Эта функция помогает сделать дубляж более естественным, так что речь персонажей совпадает с их визуальной артикуляцией, создавая целостное восприятие.
Хотя нейросеть работает довольно точно, она иногда допускает ошибки в ударениях, особенно в имён собственных. Эти неточности случаются редко и не оказывают серьёзного влияния на общую работу системы.
Нейросеть доступна для локальной установки через GitHub или для онлайн использования бесплатно на сайте CAMB.AI.
MARS5 может стать полезной для дубляжа видео, создания голосовых помощников или перевода контента на разные языки.
______________________________________