SimpliGen Docs
AI Agents

Un agente crea un videoclip

Dale a un agente de IA una canción y un elenco, y observa cómo construye un videoclip en el Video Studio, clip a clip, en tiempo real.

Con el conector SimpliGen (@simpligen/mcp versión 0.5.0 o superior), un agente como Claude puede construir un videoclip completo en el Video Studio: coloca tu canción en la línea de tiempo, encuentra su tempo, pone clips en los compases, escribe cada toma, renderiza los takes y exporta la película. Abre la película en el estudio mientras trabaja y ves cada cambio en tiempo real. Todo lo que hace se deshace con Ctrl+Z, y el resultado es una película ordinaria que sigues editando a mano.

Antes de empezar

SimpliGen debe estar en ejecución, el Video Studio instalado y un agente conectado (consulta Conectar un agente). Los renderizados usan tu GPU o créditos en la nube cuando la película se renderiza en la nube.

1. Pídelo

Dale al agente la canción, las personas y los lugares, y di qué debería suceder:

Make a music video for C:\Music\neon-rain.wav. Kai sings it on a rooftop at night; Mira walks a neon street in the second verse. 16:9, 1080p, rendered on this PC.

2. Lo que hace el agente

  1. El elenco y los lugares. Reutiliza personajes que tienes (list_characters) o los crea con create_character. Un lugar que no tiene lo crea en tres pasos: generate una imagen de él, wait_for_result, luego create_location con ese trabajo.
  2. La película. create_film con el formato y la resolución, luego upload_file y add_track para la canción (tipo singing cuando son voces, para que la boca del cantante las siga), y detect_tempo, así puede contar en compases.
  3. El borrador. Un único apply_film_plan distribuye cada clip en los compases con sus tomas, elenco, ubicación y si continúa del clip anterior. Si algo está mal (un nombre que escribió mal, tomas más largas que su clip), cada problema vuelve a la vez y nada cambia hasta que el plan sea correcto.
  4. Los renderizados. render_clips inicia cada clip que necesita uno; los clips que continúan del clip anterior se renderizarn uno a la vez. wait_for_renders espera hasta que terminen.
  5. La revisión. Lee la línea de tiempo (get_film), corrige lo que necesita con update_clip, elige entre takes con list_takes y use_take, y renderiza de nuevo donde sea necesario.
  6. La película. export_film la une con la canción y devuelve el archivo.

3. Trabaja en ella juntos

Abre la película en el Video Studio mientras el agente trabaja. Cada cambio aparece en tiempo real; presiona Ctrl+Z para deshacer uno. Puedes editar al mismo tiempo: el agente siempre lee la película tal como es ahora, tus cambios incluidos. Cuando termina, la película es tuya para seguir editando como cualquier otra.

Bueno saber

  • Compases: después de detect_tempo, los clips y marcadores pueden colocarse en compases ({ "bar": 5 }) y dimensionarse en compases ({ "bars": 2 }). El compás 1 es el primer pulso de la canción.
  • Tomas continuas: un clip que continúa comienza en el último fotograma del clip anterior, así su primera toma mantiene ese encuadre.
  • Renderizados en la nube: se cotizan antes de que nada comience y se restan del límite de gastos del agente.
  • Referencia: cada herramienta está en la referencia de herramientas MCP, cada ruta en la referencia de API de Control.