nachricht

um das problem der modellkonsistenz bei der videogenerierung zu lösen, bietet die chinesische version von „sora“ vidu die möglichkeit, „das motiv mit einem bild zu fixieren“.

2024-09-11

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

am 11. september veranstaltete shengshu technology einen tag der offenen tür für medien und veröffentlichte die funktion „subjektkonsistenz“, mit der eine konsistente generierung jedes themas erreicht werden kann, wodurch die videogenerierung stabiler und kontrollierbarer wird. es versteht sich, dass diese funktion den benutzern derzeit kostenlos zur verfügung steht.

zuvor wurde ende april vidu, ein von shengshu technology und der tsinghua-universität gemeinsam entwickeltes original-großvideomodell, der welt vorgestellt. es wurde ende juli offiziell eingeführt und ist vollständig zur nutzung freigegeben.

tang jiayu, ceo von shengshu technology, sagte medienreportern, darunter reportern von „daily economic news“, am tag der offenen tür, dass die funktion „themenreferenz“ dazu gedacht sei, die „unkontrollierbaren“ einschränkungen des videomodells zu lösen. derzeit weisen videomodelle einschränkungen wie schwache kontinuität und zufällige ausgabe auf. eine schwache kontinuität bedeutet, dass die konsistenz des themas, der szene, des stils usw. nicht bei jeder erstellung eines videos gewährleistet werden kann, insbesondere wenn komplexe interaktionen beteiligt sind. zufällige ausgabe bedeutet, dass die ausgabeergebnisse relativ zufällig sind und kontinuierliche versuche zur generierung erforderlich sind. eine feine und genaue steuerung von details wie spiegelbewegung und lichteffekten kann nicht erreicht werden.

fotoquelle von tang jiayu, ceo von shengshu technology: foto von reporter li shaoting

zuvor versuchte die branche, die methode „zuerst erzeugt ki bilder, dann bilder erzeugen videos“ zu übernehmen. dabei wurden ki-zeichenwerkzeuge verwendet, um split-shot-bilder zu erzeugen, wobei zunächst das motiv auf bildebene konsistent gehalten wurde und die bilder dann in videos umgewandelt wurden clips zu erstellen und sie zu bearbeiten und zu synthetisieren.

mit der funktion „subjektreferenz“ können benutzer ein bild eines beliebigen motivs hochladen, um das bild des motivs zu sperren, szenen durch deskriptoren willkürlich wechseln und ein video mit demselben motiv ausgeben. diese funktion ist nicht auf ein einzelnes objekt beschränkt, sondern steht „jedem subjekt“ offen, einschließlich charakteren, tieren, waren, animationsfiguren, fiktiven subjekten usw.

tägliche wirtschaftsnachrichten

bericht/feedback