Официальное открытие API Feedance 2.0: генерация видео ИИ в эпоху мультимодульного режиссера

И только сегодня байт-прыжковый двигатель вулкана официально открывает API-интерфейс Seedance 2.0. Что это значит? Это означает, что вам не нужно выстраиваться в очередь, чтобы подать заявку на интроспекции, поэтому вы можете назвать этот видеогенератор ИИ «Прямое размещение обычных людей».

Честно говоря, видео с ИИ породило этот трек, который больше нельзя катить. Но в Seedance 2.0, этой волновой операции, есть что-то.

Генерация видео

Двойная версия модели. Это рукотворный.

Seedance 2.0 предлагает два варианта:

Семейство 2.0Погоня за высочайшим качеством, подходящим для качественных сценариев
Семейство 2.0 быстроБыстрее, дешевле, подходит для массового производства

Обе версии полностью функционально совместимы, различая точность скорости генерации и конечный эффект. Как? Посмотри на кошелек.

Многомодульный вход. Это большая картина.

В то время как другой инструмент искусственного интеллекта воспроизводит видео Винсента, Feedance 2.0 эволюционировал для поддержки.Изображения, видео, аудио, текстЧетыре формы вводятся в любой комбинации.

В частности:

Фото: до 9 справочных карт
Видео: до 3-х референсных видео
Аудио: до 3 аудиофайлов
Текст: Описание естественного языка

Мультимодульное создание

Например, вы можете загрузить карту продукта + фоновую музыку + зеркальное справочное видео, а затем написать подсказку, и ИИ может создать полное видео с BGM, зеркальным стилем и презентацией продукта.

Такая игра для друга, который делает короткие видеокассеты, является разрушительным ударом.

Три основные компетенции непосредственно функционируют.

Многомодульные опорные генерации

Это самая раздражающая функция Sex 2.0. ИИ может наследовать образ персонажа эталонной картины, зеркало действия эталонного видео, звуковую мелодию эталонного аудио, а затем генерировать совершенно новое видео.

Например, в официальном примере реклама фруктов и чая: загружая карты продуктов, помещая фоновую музыку, написав сценарий спектроскопии, ИИ может генерировать 8-секундный рекламный ролик с голосом, зеркалом и полной историей.

Редактирование видео

Это не просто поколение, это редактирование. ИИ может заменить объект в видео, удалить несущественные элементы или перерисовать локальные изображения.

Например, меняя парфюм с видео на крем для лица, зеркала остаются прежними. Эта прекрасная операция, которая использовалась медленно, теперь выполнена.

Видео редактор

3 Расширение видео

Думаешь, восьми секунд недостаточно? Seedance 2.0 поддерживает расширение видео вперед или назад, связывая несколько видео с последовательным, длинным видео.

Например, у вас есть три части материала: внешний, внутренний, крупный план. ИИ может автоматически завершить изображение промежуточного перехода, чтобы три части были легко соединены.

Спецификация выхода с первого взгляда

Параметры	Сфера поддержки
Резолюция	480p, 720p
Соотношение виджетов	21:9, 16:9, 4:3, 1:1, 3:4, 9:16
Длина	4-15 секунд
Формат	MP4
Рамочная ставка	24fps

Отметим, что 1080 pp пока не поддерживается, но 720 p вполне достаточно для короткой видеоплатформы.

Как? Пример кода.

Вулканические движки предоставляют Python SDK с несколькими строками кода:

from volcenginesdkarkruntime import Ark

client = Ark(
    base_url='https://ark.cn-beijing.volces.com/api/v3',
    api_key=os.environ.get("ARK_API_KEY"),
)

create_result = client.content_generation.tasks.create(
    model="doubao-seedance-2-0-260128",
    content=[
        {"type": "text", "text": "你的提示词"},
        {"type": "image_url", "image_url": {"url": "图片URL"}, "role": "reference_image"},
    ],
    generate_audio=True,
    ratio="16:9",
    duration=8,
)

Разработка программ

Полные файлы можно найти в сети вулканических двигателей, так что не будем здесь останавливаться.

Некоторые ограничения должны соблюдаться.

Корпоративные пользователи могут подать заявку на публичные опросы (отдельные разработчики временно недоступны).
Не поддерживает прямую загрузку материала с реальными лицами (виртуальные коллекции доступны на платформах)
Генерация видео - это переходный интерфейс, который требует вращения результатов запроса.
Оригинальный URL видео действителен только 24 часа. Рекомендуется перенести на объект хранения

В конце.

Seedance 2.0, на этот раз открытый API, отмечает байт-бит, который официально присоединяется к коммерческой битве, сгенерированной IA. По сравнению с Подиумом, Пика, этими заокеанскими игроками, преимущество Feedance заключается в том, чтоМногомодульные возможности интеграциииПонимание китайской фразыЯ не знаю.

Для создателей контента это означает более низкие пороги производства видео и более высокую производительность. Конечно, это означает и более конкурентную среду.

Инструменты готовы для вас.

Будущее наступает.