Byte beat Feedance 2.0 API oficjalne otwarcie: AI wideo generacja w wieku multimodułowego reżysera

I właśnie dzisiaj, przeskakujący silnik wulkanu oficjalnie otwiera interfejs API Seedance 2.0. Co to znaczy? To znaczy, że nie musisz się ustawiać w kolejce, by ubiegać się o introspekcję, więc możesz nazwać generator filmowy Al o nazwie "Letting Ordinary People Direct".

Szczerze mówiąc, film A.I. wygenerował ten utwór, który nie może być już toczony. Ale Seedance 2.0, ta operacja fali, ma coś.

Podwójna wersja modelu. To człowiek.

Nasienie 2.0 daje dwie opcje:

• Nasienie 2.0: dążenie do najwyższej jakości, nadaje się do scenariuszy jakości
• Nasienie 2.0 szybko: Szybszy, tańszy, nadaje się do produkcji masowej

Obie wersje są w pełni funkcjonalnie spójne, odróżniając precyzję prędkości generacji od efektu końcowego. Jak? Spójrz na portfel.

Wielomodułowe wejście. To jest najważniejsze.

Podczas gdy inne narzędzie wideo AI gra Vincenta wideo, Feedance 2.0 ewoluował wspieraćObrazy, filmy, audio, tekstCztery formy są wprowadzane w dowolnej kombinacji.

W szczególności:

• Zdjęcie: do 9 wykresów odniesienia
• Wideo: do 3 filmów referencyjnych
• Audio: Do 3 plików audio
• Tekst: Naturalny opis języka

Na przykład, można przesłać mapę produktu + muzykę w tle + lustrzany film referencyjny, a następnie napisać podpowiedź, a AI może wygenerować kompletny film z BGM, lustrzanym stylu i prezentacji produktu.

Ten rodzaj gry, dla przyjaciela, który robi krótkie taśmy wideo, jest niszczycielski cios.

Trzy podstawowe kompetencje są bezpośrednio operacyjne.

Wielomodułowa generacja odniesienia

To jest najbardziej denerwująca funkcja Sex 2.0. Możesz mieć AI odziedziczyć obraz charakteru obrazu odniesienia, lusterko działania wideo odniesienia, melodię audio dźwięku odniesienia, a następnie wygenerować cały nowy film.

Na przykład, w oficjalnym przykładzie, reklama owoców i herbaty: przesyłanie map produktów, umieszczanie muzyki w tle, pisanie skryptu spektroskopii, AI może wygenerować 8- sekundową reklamę z głosem, lustrem i pełną historią.

Edycja wideo

To nie tylko generacja, to montaż. AI może zastąpić obiekt w filmie, usunąć nieistotne elementy lub ponownie narysować obrazy lokalne.

Na przykład, zmieniając perfumy z filmu na krem do twarzy, lustra pozostają takie same. Ta delikatna operacja, która używała AE powoli, jest wykonywana teraz.

3. Rozszerzenie wideo

Myślisz, że osiem sekund to za mało? Seedance 2.0 obsługuje rozszerzenie wideo do przodu lub do tyłu, łącząc wiele filmów z spójnym, długim wideo.

Na przykład, masz trzy elementy materiału: zewnętrzne, wewnętrzne, zbliżenie. AI może automatycznie zakończyć pośredni obraz przejściowy, tak, że trzy elementy są płynnie połączone.

Specyfikacja produktu w skrócie

Parametry	Zakres wsparcia
Rozdzielczość	480p, 720p
Współczynnik widget	21: 9, 16: 9, 4: 3, 1: 1, 3: 4, 9: 16
Długość	4- 15 sekund
Format	MP4
Rata	24fps

Zauważ, że 1080 pp nie jest jeszcze obsługiwane, ale 720 p wystarczy na krótką platformę wideo.

Jak? Przykład kodu.

Silniki wulkaniczne zapewniają Python SDK, z kilku linii kodu:

from volcenginesdkarkruntime import Ark

client = Ark(
    base_url='https://ark.cn-beijing.volces.com/api/v3',
    api_key=os.environ.get("ARK_API_KEY"),
)

create_result = client.content_generation.tasks.create(
    model="doubao-seedance-2-0-260128",
    content=[
        {"type": "text", "text": "你的提示词"},
        {"type": "image_url", "image_url": {"url": "图片URL"}, "role": "reference_image"},
    ],
    generate_audio=True,
    ratio="16:9",
    duration=8,
)

Kompletne pliki można znaleźć w sieci silników wulkanicznych, więc nie mieszkajmy tutaj.

Należy przestrzegać pewnych ograniczeń.

• Użytkownicy przedsiębiorstw mogą ubiegać się o publiczne badania (indywidualni deweloperzy są tymczasowo niedostępni)
• Nie obsługuj bezpośredniego przesyłania materiałów z prawdziwymi twarzami (wirtualne kolekcje dostępne na platformach)
• Generacja wideo jest interfejsem przelotowym, który wymaga rotacji wyników zapytań
• Oryginalny URL wideo ważny tylko przez 24 godziny. Zaleca się przeniesienie do magazynu obiektów

Na końcu.

Seedance 2.0, tym razem otwarty API, oznacza beat bajtów, który oficjalnie dołącza do wideo IA generowane walki komercyjnej. W porównaniu do Runway, Pika, tych zagranicznych graczy, zaletą Feedance jestWielomodułowa zdolność integracjiorazZrozumienie chińskiego zwrotuNie wiem.

Dla twórców treści oznacza to niższe progi produkcji wideo i szybszą wydajność. Oczywiście oznacza to również bardziej konkurencyjne środowisko.

Narzędzia są gotowe.