ByteDance julkaisee uuden äänen ja videon sukupolven mallinsa, Dreamina Seedance 2.0:n, muokkausalustalleen CapCutille.
Tämä käyttöönotto asettaa ByteDancen avaintekijäksi tekoälyvideoiden tuotantomarkkinoilla OpenAI:n päätöksen jälkeen supistaa Sora-sovellusponnistelujaan.
Mallin avulla tekijät voivat luonnostella, muokata ja synkronoida video- ja äänisisältöä kehotteiden, kuvien tai viitevideoiden avulla ByteDancen mukaan.
Käyttöönotto kohdistuu aluksi CapCut-käyttäjiin Brasiliassa, Indonesiassa, Malesiassa, Meksikossa, Filippiineillä, Thaimaassa ja Vietnamissa. ByteDance ilmoitti, että uusia markkinoita lisätään asteittain.
Yhtiö kohtasi aiemmin mallia koskevia immateriaalioikeuksia koskevia huolenaiheita, mikä johti raportoituun keskeytykseen sen maailmanlaajuisessa käyttöönotossa ja Hollywoodin kritiikkiin väitetystä tekijänoikeusrikkomuksesta. Tämä saattaa selittää rajoitetun alkuperäisen saatavuuden markkinoilla.
Kiinassa Dreamina Seedance 2.0 on saatavilla ByteDancen Jianying-sovelluksessa.
Videoiden sukupolven malli voi toimia ilman viitekuvia, jolloin tekijät voivat kuvata kohtauksia muutamalla sanalla, ByteDance ilmoitti.
CapCut voi renderöidä realistisia kuvioita, liikettä ja valaistusta mallin eri visuaalisista näkökulmista ja kulmista. Yhtiö huomautti, että tämä ominaisuus voisi parantaa tai korjata olemassa olevaa luojan materiaalia.
Käyttäjät voivat myös testata varhaisiin konsepteihin tai luonnoksiin perustuvia sisältöideoita ennen kuvaamista, yhtiö sanoi.
Dreamina Seedance 2.0 tukee sisältötyyppejä, kuten ruoanlaittoreseptejä, kunto-opasteita, yrityskatsauksia ja toimintaan keskittyviä videoita, alueita, joilla tekoälyvideomallit kohtasivat aiemmin haasteita, ByteDance selitti.
Julkaisuhetkellä malli tukee jopa 15 sekunnin pituisia videoleikkeitä kuudella kuvasuhteella.
Integrointi CapCutiin sisältää ominaisuuksia, kuten AI Video, ja generointityökalut, kuten Video Studio. Malli laajenee myös ByteDancen AI-sukupolvialustaan Dreaminaan ja sen markkinointialustaan, Pippitiin.
ByteDance on ottanut käyttöön turvallisuusrajoituksia estääkseen mallia luomasta videoita kuvista tai videoista, jotka sisältävät oikeita kasvoja sen realististen sisällöntuotantoominaisuuksien vuoksi. CapCut estää myös immateriaalioikeuksien luvattoman luomisen.
Dreamina Seedance 2.0:n tuottama sisältö sisältää näkymätön vesileiman, joka tunnistaa tekoälyn luoman materiaalin, kun se jaetaan alustan ulkopuolella. Tämä ominaisuus voi auttaa käsittelemään oikeudenhaltijoiden poistopyyntöjä, ByteDance lisäsi.
ByteDance aikoo tehdä yhteistyötä asiantuntijoiden ja luovien yhteisöjen kanssa käyttöönoton aikana parantaakseen mallin ominaisuuksia iteratiivisesti.
