Ein Agent erstellt ein Musikvideo

Mit dem SimpliGen-Connector (@simpligen/mcp 0.5.0 oder neuer) kann ein Agent wie Claude im Video Studio ein komplettes Musikvideo erstellen: er legt Ihren Song auf die Timeline, erkennt sein Tempo, positioniert Clips auf den Takten, schreibt jeden Shot, rendert die Takes und exportiert den Film. Öffnen Sie den Film im Studio, während er arbeitet, und Sie sehen jede Änderung live. Alles, was er tut, kann mit Strg+Z rückgängig gemacht werden, und das Ergebnis ist ein gewöhnlicher Film, den Sie weiterhin von Hand bearbeiten können.

1. Fragen Sie danach

Geben Sie dem Agent den Song, die Personen und die Orte an und sagen Sie, was passieren soll:

Make a music video for C:\Music\neon-rain.wav. Kai sings it on a rooftop at night; Mira walks a neon street in the second verse. 16:9, 1080p, rendered on this PC.

2. Was der Agent tut

1. Das Ensemble und die Orte. Er nutzt Charaktere, die Sie haben (list_characters), oder erstellt sie mit create_character. Einen Ort, den er noch nicht hat, erstellt er in drei Schritten: generate ein Bild davon, wait_for_result, dann create_location mit diesem Job.
2. Der Film. create_film mit Form und Auflösung, dann upload_file und add_track für den Song (Art singing, wenn es Gesang ist, damit der Mund der Sängerin folgt), und detect_tempo, um in Takten zählen zu können.
3. Der Entwurf. Ein apply_film_plan legt jeden Clip auf den Takten mit seinen Shots, dem Ensemble, dem Ort und ob er vom vorherigen Clip fortgesetzt wird. Wenn etwas falsch ist (ein Name, den er falsch geschrieben hat, Shots länger als ihr Clip), kommen alle Probleme auf einmal zurück und nichts ändert sich, bis der Plan stimmt.
4. Die Renders. render_clips startet jeden Clip, der einen braucht; Clips, die vom vorherigen Clip fortgesetzt werden, rendern nacheinander. wait_for_renders wartet, bis sie fertig sind.
5. Die Überprüfung. Er liest die Timeline (get_film), behebt mit update_clip, was zu beheben ist, wählt zwischen Takes mit list_takes und use_take, und rendert bei Bedarf erneut.
6. Der Film. export_film verbindet ihn mit dem Song und gibt die Datei zurück.

3. Arbeiten Sie zusammen daran

Öffnen Sie den Film im Video Studio, während der Agent arbeitet. Jede Änderung erscheint live; drücken Sie Strg+Z zum Rückgängigmachen. Sie können gleichzeitig bearbeiten: der Agent liest den Film immer so, wie er gerade ist, einschließlich Ihrer Änderungen. Wenn er fertig ist, ist der Film Ihres zum Bearbeiten wie jeder andere.

Gut zu wissen

• Takte: nach detect_tempo können Clips und Marker in Takten ({ "bar": 5 }) positioniert und in Takten ({ "bars": 2 }) vergrößert werden. Takt 1 ist der erste Taktstrich des Songs.
• Fortgesetzte Shots: ein Clip, der fortgesetzt wird, beginnt auf dem letzten Frame des vorherigen Clips, sodass sein erster Shot diese Rahmung beibehält.
• Cloud-Renders: vor dem Start bewertet und gegen das Ausgabenlimit des Agents verrechnet.
• Referenz: jedes Tool ist in der MCP-Tool-Referenz, jede Route in der Control API-Referenz.