Bernini: KI-Video-Leitfaden & Prompts

Konsistenzgesperrte Bearbeitung

Da der Planer die Semantik festlegt, bevor der Renderer malt, hält Bernini die Teile eines Clips fest, die Sie nicht ändern wollten. Benennen Sie die Änderung, dann das, was fix bleiben soll, und unberührte Bereiche bleiben im gesamten Video ruhig, ohne Flackern oder Drift. Es ist die stärkste Eigenschaft des Modells bei der Bearbeitung.

Referenzgestützte Bearbeitung

Geben Sie ein Referenzbild oder einen zweiten Clip vor, und Bernini wendet es auf das Quellvideo an. Tauschen Sie ein Kleidungsstück bei einer bewegten Figur anhand eines einzelnen Standbilds aus, oder fügen Sie ein Produkt oder ein Bildschirmvideo ein, sodass es dem Originalmaterial folgt. Der Rest des Quellclips bleibt um die Änderung herum intakt.

Subject-to-Video

Übergeben Sie Referenzbilder und verweisen Sie im Prompt per Index auf jedes (image0, image1), um festzulegen, welches Motiv oder Merkmal aus welchem Bild stammt. Bernini überträgt das Motiv in eine neue Szene, wobei das Gesicht während der Bewegung erkennbar bleibt, das herausragende Ergebnis in ByteDances Subject-to-Video-Evaluierungen.

Bewegungsbearbeitung

Ändern Sie, was eine Figur in einem bestehenden Clip tut, eine Person geht in die Hocke statt sich zu bücken, während Identität, Bildausschnitt, Licht und Hintergrund erhalten bleiben. So wird eine Aktion neu inszeniert, ohne die Aufnahme neu zu drehen.

Vereinte Bild- und Videofunktion

Ein Modell deckt Text-zu-Bild, Bildbearbeitung, Text-zu-Video und Videobearbeitung ab, sodass ein Standbild und eine bewegte Bearbeitung aus derselben Prompt-Sprache stammen. Sie lernen eine Methode, um es anzuweisen, und wenden sie auf beide Formate an.

Zwei Gewohnheiten entscheiden bei Bernini über die meiste Qualität.

• Schreiben Sie eine Anweisung, nicht nur eine Beschreibung. Bei Bearbeitungen verändern Sie einen bestehenden Clip, der Prompt ist also eine Anweisung: was hinzugefügt, entfernt oder verändert werden soll, und wo. Bei der Generierung (Text-zu-Video, Text-zu-Bild) beschreiben Sie die gesamte Szene wie gewohnt.
• Benennen Sie, was sich ändert, dann, was bleibt. Der Renderer kann jeden Bereich berühren, daher gelingen die zuverlässigsten Bearbeitungen, wenn Sie die Änderung benennen und danach alles fixieren, was sich nicht bewegen soll. Diese zweite Gewohnheit ist die Konsistenzsperre, die im nächsten Abschnitt behandelt wird.

Eine detaillierte, strukturierte Anweisung schlägt eine knappe. Berninis Planer arbeitet besser, wenn Sie Größe, Platzierung, Materialien und die Anpassung des Lichts des neuen Elements an die Szene ausformulieren, statt sich auf einen Einzeiler zu verlassen.

Der Renderer hält unberührte Bereiche gut fest, aber nur, wenn der Prompt ihm sagt, welche das sind. Das Muster: die Änderung präzise benennen, dann alles auflisten, was unverändert bleiben muss, und mit „unverändert“ enden. Beim Entfernen funktioniert es genauso, beschreiben Sie die Füllung, dann fixieren Sie die Umgebung.

Ohne Sperre darf das Modell den Hintergrund neu zeichnen. Mit einem Satz dazu wirkt die Bearbeitung wie ein natürlicher Teil der Originalaufnahme.

• Keine Sperre: Benennen Sie, was unverändert bleiben soll, sonst greift die Bearbeitung auf den Rest des Bildes über.
• Eine knappe Anweisung: Beschreiben Sie das neue Element vollständig, Größe, Platzierung, Materialien und Licht, statt eines Drei-Wort-Befehls.
• Vage Referenzen: Verweisen Sie bei Subject-to-Video per Index auf jedes Bild (image0, image1) und benennen Sie, welches Merkmal aus welchem Bild stammt, statt „diese Referenzen verwenden“.
• Bewegungsbearbeitungen, die die Identität verschieben: Fixieren Sie beim Ändern der Bewegung Person, Kleidung, Position und Kamera, damit sich nur die Aktion ändert.
• 4K erwarten: Die Standardauflösung liegt bei 480p mit 16 fps, ausgelegt auf Bearbeitungstreue statt Auflösung. Bewerten Sie das Ergebnis danach, wie sauber unberührte Bereiche erhalten bleiben.