Un agente crea un videoclip
Dale a un agente de IA una canción y un elenco, y observa cómo construye un videoclip en el Video Studio, clip a clip, en tiempo real.
Con el conector SimpliGen (@simpligen/mcp versión 0.5.0 o superior), un agente como Claude puede construir un videoclip completo en el Video Studio: coloca tu canción en la línea de tiempo, encuentra su tempo, pone clips en los compases, escribe cada toma, renderiza los takes y exporta la película. Abre la película en el estudio mientras trabaja y ves cada cambio en tiempo real. Todo lo que hace se deshace con Ctrl+Z, y el resultado es una película ordinaria que sigues editando a mano.
Antes de empezar
SimpliGen debe estar en ejecución, el Video Studio instalado y un agente conectado (consulta Conectar un agente). Los renderizados usan tu GPU o créditos en la nube cuando la película se renderiza en la nube.
1. Pídelo
Dale al agente la canción, las personas y los lugares, y di qué debería suceder:
Make a music video for C:\Music\neon-rain.wav. Kai sings it on a rooftop at night; Mira walks a neon street in the second verse. 16:9, 1080p, rendered on this PC.
2. Lo que hace el agente
- El elenco y los lugares. Reutiliza personajes que tienes (
list_characters) o los crea concreate_character. Un lugar que no tiene lo crea en tres pasos:generateuna imagen de él,wait_for_result, luegocreate_locationcon ese trabajo. - La película.
create_filmcon el formato y la resolución, luegoupload_fileyadd_trackpara la canción (tiposingingcuando son voces, para que la boca del cantante las siga), ydetect_tempo, así puede contar en compases. - El borrador. Un único
apply_film_plandistribuye cada clip en los compases con sus tomas, elenco, ubicación y si continúa del clip anterior. Si algo está mal (un nombre que escribió mal, tomas más largas que su clip), cada problema vuelve a la vez y nada cambia hasta que el plan sea correcto. - Los renderizados.
render_clipsinicia cada clip que necesita uno; los clips que continúan del clip anterior se renderizarn uno a la vez.wait_for_rendersespera hasta que terminen. - La revisión. Lee la línea de tiempo (
get_film), corrige lo que necesita conupdate_clip, elige entre takes conlist_takesyuse_take, y renderiza de nuevo donde sea necesario. - La película.
export_filmla une con la canción y devuelve el archivo.
3. Trabaja en ella juntos
Abre la película en el Video Studio mientras el agente trabaja. Cada cambio aparece en tiempo real; presiona Ctrl+Z para deshacer uno. Puedes editar al mismo tiempo: el agente siempre lee la película tal como es ahora, tus cambios incluidos. Cuando termina, la película es tuya para seguir editando como cualquier otra.
Bueno saber
- Compases: después de
detect_tempo, los clips y marcadores pueden colocarse en compases ({ "bar": 5 }) y dimensionarse en compases ({ "bars": 2 }). El compás 1 es el primer pulso de la canción. - Tomas continuas: un clip que continúa comienza en el último fotograma del clip anterior, así su primera toma mantiene ese encuadre.
- Renderizados en la nube: se cotizan antes de que nada comience y se restan del límite de gastos del agente.
- Referencia: cada herramienta está en la referencia de herramientas MCP, cada ruta en la referencia de API de Control.