Media2Face – искусственный интеллект, который генерирует “говорящую голову” под существующий текст. Например, если у вас уже есть озвучка, но не хватает актёра в кадр для видео, в нейросети Media2Face вы сможете создать видео со спикером.
Нейросеть Media2Face в настоящий момент находится в закрытом режиме, то есть недоступна для использования. Но на официальном сайте есть подробное описание алгоритма, что позволяет повторить результаты всем, кто умеет программировать. Остальным придется дождаться, пока создатели выложат исходный код в публичный доступ.
Согласно официальной документации, нейросеть Media2Face генерирует спикера для видео на любом языке. “Липсинк”, то есть синхронизация губ спикера с текстом, осуществляется на основе звуков, а не слов, поэтому вы можете использовать решение и для видео на русском языке.
Если вам нужно решение, которое работает прямо сейчас, вместо Media2Face вы можете использовать нейросеть Kapwing, которая умеет генерировать не просто “говорящую голову”, а полноценное видео со спикером в кадре, который говорит естественным голосом, а также позволяет быстро отредактировать ролик прямо в браузере.
Язык интерфейса: Английский
Бесплатная