Seed Audio 1.5 · Скоро на Popcraft

Seed Audio 1.5. Услышьте всё.

Скоро на Popcraft. Предварительный просмотр звука сцены с диалогами, атмосферой, звуковыми эффектами и музыкой на основе текстовых, видео- и аудиореференсов. Дата релиза и стоимость Seed Audio 1.5 на Popcraft пока не объявлены.

Узнать больше о Seed Audio 1.5 ↓
Примеры

Послушайте в контексте.

Демо-ролики из презентации Seed Audio 1.5. Генерация в Popcraft появится скоро.

Дубляж видео

Сцена со звуком

Послушайте, как голос, музыка и звуковые эффекты объединяются в одной сцене.

Видео содержит экранные описания диалогов, музыки и эффектов.
Управление по таймкодам

Голоса, музыка, моменты

Послушайте рекламу на английском языке, где несколько голосов, музыка и звуковые эффекты распределены с помощью таймкодов.

Что нового

Больше возможностей для работы со звуком.

Комбинируйте текстовые, видео- и аудиореференсы, чтобы влиять на результат.

Входные данные / возможностиКак это работаетAudio 1.5Audio 1.0Обычный TTS
Синтез речи (Text-to-speech)Выберите голос и введите текст.ДаДаДа
Клонирование голосаИспользуйте один аудиоклип в качестве голосового референса для речи.ДаДаДа
Текст → аудиоОпишите речь, звуковые эффекты и фоновую музыку.ДаДаНет
Текст + аудио → аудиоДобавьте референс для передачи характеристик голоса или эмоций.ДаДаНет
Текст + видео → аудиоОпишите аудио, которое соответствует визуальному ряду видео.ДаНетНет
Текст + видео + аудио → аудиоДобавьте аудиореференс, чтобы задать конкретный голос для дубляжа.ДаНетНет
Текст → музыкаОпишите музыку длительностью до шести минут.ДаНетНет
Одна модель, больше возможностей

Озвучьте свой визуальный контент.

Возможности и ограничения в этом превью основаны на презентации Seed Audio 1.5. Финальный набор функций и лимиты Popcraft будут подтверждены при запуске.

От создания звукового ландшафта до перевода на новый язык — создавайте аудио для своей истории.

6 минмаксимальная длина аудио на один запрос
6аудиореференсов в одном запросе
33поддерживаемых языков
01 / ДУБЛЯЖ ВИДЕО

Звук для сцены

Используйте видео в качестве референса для генерации голоса, эффектов и музыки, соответствующих картинке.

Опишите точные диалоги, эффекты и музыку; дубляж не выполняется автоматически.
02 / ПЕРЕВОД ВИДЕО

Масштабируйте голос

Переводите речь, сохраняя оригинальные характеристики голоса, звуковые эффекты и фоновую музыку.

Доступные пары перевода включают китайский или английский языки и 30 целевых языков.
03 / РАЗДЕЛЕНИЕ НА ДОРОЖКИ

Пространство для доработки

Получайте вокал, эффекты и музыку в виде отдельных дорожек (стемов) для последующего монтажа.

04 / ГЕНЕРАЦИЯ МУЗЫКИ

Создайте саундтрек

Опишите музыку текстом или создайте песню со словами. Длительность — до шести минут.

До наложения саундтрека

Начните со сцены.

Оригинальная сцена

Сравните это видео с улучшенной сценой в примерах выше.

Рабочие процессы с видео

Создавайте звук. Сохраняйте историю.

Дублируйте или улучшайте сцену

Используйте только видео или видео с аудиореференсом для дубляжа фильмов или улучшения некачественного звука.

  1. Выберите видеореференс.
  2. Добавьте аудиореференс, если вам нужен конкретный тембр голоса.
  3. Опишите точное содержание речи, звуковые эффекты и фоновую музыку.

Дубляж видео поддерживает 30 языков. Требуется текстовое описание; автоматический дубляж не предусмотрен.

Запустить пример сцены ↓

Переведите речь

Начните с китайской или английской речи. Переводите на любой из 30 поддерживаемых языков с сохранением голоса, эффектов и музыки.

Примеры включают демонстрацию перевода: сцену из «Одержимости» на английском и японском, а также сцену из «Теории большого взрыва» на английском и мексиканском испанском.

Список языков перевода ↓
Примеры перевода видео

Услышьте одну и ту же сцену по-разному.

Разделение на стемы

Разберите микс на части.

Загрузите аудиофайл, чтобы разделить вокал, эффекты и музыку на независимые дорожки для постобработки. Текущая версия поддерживает до шести треков.

Из аудио в редактируемые дорожки

Каждую дорожку можно использовать отдельно в процессе сведения.

В примере длительностью 58 секунд микс разделяется на голос диктора, девочки, мальчика, фэнтезийную музыку, шаги и хлопок двери.

Учитывайте ограничения

  • До шести выходных дорожек при разделении на стемы.
  • До шести аудиореференсов в одном запросе.
  • До шести минут сгенерированного аудио на запрос.
Разделите и сравните

Один микс. Шесть частей.

Разделение на стемы в сцене

Демонстрация вокала, звуковых эффектов и музыки как отдельных выходных данных.

Послушайте микс и каждую дорожку в отдельности.

Оригинальный микс

Диктор

Девочка

Мальчик

Фэнтезийная музыка

Шаги

Закрытие двери

Генерация музыки

Опишите саундтрек.

Управляйте музыкальными решениями

Укажите жанр, настроение, вокал, инструменты и структуру. Генерируйте музыку по текстовому описанию или создавайте песни с текстом.

Длительность музыки может составлять до шести минут.

Пять языков для музыки

Для генерации музыки поддерживаются английский, китайский, японский, корейский и кантонский диалект.

Этот список для музыки отделен от общего списка из 33 языков, поддерживаемых моделью.

Пример музыки

От техзадания до готового трека.

Генерация музыки

Посмотрите демонстрацию генерации музыки.

Поддержка языков

Ознакомьтесь с охватом языков.

Модель поддерживает 33 языка. Перевод возможен с китайского или английского на любой из этих 30 целевых языков.

  • Китайский · zh
  • Английский · en
  • Японский · ja
  • Корейский · ko
  • Немецкий · de
  • Французский · fr
  • Бразильский португальский · pt-BR
  • Тайский · th
  • Индонезийский · id
  • Вьетнамский · vi
  • Малайский · ms
  • Филиппинский · fil
  • Итальянский · it
  • Русский · ru
  • Нидерландский · nl
  • Польский · pl
  • Турецкий · tr
  • Шведский · sv
  • Кастильский испанский · es-ES
  • Мексиканский испанский · es-MX
  • Арабский · ar
  • Европейский португальский · pt-PT
  • Финский · fi
  • Датский · da
  • Норвежский · no
  • Чешский · cs
  • Венгерский · hu
  • Греческий · el
  • Румынский · ro
  • Хинди · hi

Вне списка перевода

Общий список из 33 языков также включает тамильский, одия и бенгальский. Арабский язык представлен саудовским акцентом. Эти дополнительные возможности не расширяют список документированных пар для перевода.

Точный контроль

Сделайте каждый момент значимым.

Используйте таймкоды, чтобы расположить закадровый голос, эффекты и музыку именно там, где этого требует сюжет.

ГОЛОС

Разместите речевой фрагмент.

ЗВУКОВЫЕ ЭФФЕКТЫ

Добавьте текстуру действию.

МУЗЫКА

Создайте настроение вокруг сцены.

Изучите тайминг и режиссуру голоса в рекламе

Временные диапазоны определяют место речи, эффектов и музыки. У каждого голоса также есть свой тембр, акцент и манера исполнения.

  1. 0.0–49.5 с

    Динамичная электронная музыка сопровождает всё рекламное объявление.

  2. 0.0–1.2 с

    Четкий всплеск открывает аудиоряд.

  3. 1.9–4.9 с

    Мальчик с нежным и чистым тембром, невинный и мечтательный характер, центральноазиатский британский английский акцент; ровная, расслабленная, беззаботная детская манера озвучки: «BYD — это большой корабль, который я видел на пристани».

  4. 5.8–9.0 с

    Девочка с гибким, чистым голосом, живой и располагающий характер, американский английский акцент; бодрый ритм и слегка противоречивая манера озвучки: «Нет, мой дедушка сказал, что BYD — это восточная легенда».

  5. 10.1–13.2 с

    Девочка с ярким, милым, мягким голосом, американский английский с китайским акцентом; жизнерадостная манера озвучки с оттенком веселья: «Моя мама работает в BYD. Она говорит: BYD — воплощай свои мечты».

  6. 13.4–15.4 с

    Детский смех, затем ускоряющаяся технологичная музыка с эффектами затвора камеры.

  7. 15.8–17.8 с

    Молодая женщина с глубоким, слегка придыхательным голосом, утонченный и элегантный характер, американский английский с французским прононсом; восхищенная, спокойная и четкая манера озвучки: «Просто незабываемая модель из всех, что я видела».

  8. 19.3–22.1 с

    Исследователь среднего возраста с глубоким, суровым, слегка хрипловатым голосом, зрелый характер, стандартный американский акцент; смелая, решительная и экспрессивная манера озвучки: «Это самый надежный спутник для перехода через Анды».

  9. 23.2–25.2 с

    Молодой человек с голосом в среднем и высоком регистре, несколько плоская вокальная текстура, стандартный американский акцент; короткая, восторженная манера озвучки: «Это новый зверь на арене».

  10. 27.3–29.7 с

    Молодой человек с глубоким голосом, выдержанный деловой характер, стандартный американский акцент; мягкая, расслабленная манера озвучки с оттенком удовлетворения: «BYD — мой бизнес-зал на колесах».

  11. 29.7–49.5 с

    Брендовая музыка завершает рекламу звуками волн, ветра и шумом автомобиля.

Послушать рекламу ↑

Полезно знать.

Seed Audio 1.5 скоро появится на Popcraft; генерация здесь пока недоступна. Дата релиза и стоимость еще не объявлены.

Документация описывает текстовые, видео- и аудиореференсы. В одном запросе можно использовать до шести аудиореференсов.

Нет. Вам необходимо предоставить текстовое описание желаемого контента, звуковых эффектов и фоновой музыки.

Документированные пары перевода видео начинаются с китайского или английского языков и переводятся на 30 поддерживаемых целевых языков. Всего модель поддерживает 33 языка.

Seed Audio 1.5 · Скоро на Popcraft

Услышьте историю целиком.

Узнайте, что вы можете создать с помощью Seed Audio 1.5.

Посмотреть примеры ↑

Продолжайте исследовать

Похожие модели