SimpliGen Docs
AI Agents

에이전트가 뮤직비디오를 만듭니다

AI 에이전트에게 곡과 출연진을 주고, Video Studio에서 클립별로 뮤직비디오를 만드는 것을 지켜보세요.

SimpliGen 커넥터(@simpligen/mcp 0.5.0 이상)를 사용하면 Claude 같은 에이전트가 Video Studio에서 전체 뮤직비디오를 만들 수 있습니다. 타임라인에 곡을 올리고, 템포를 찾고, 박자에 클립을 배치하고, 모든 샷을 작성하고, 테이크를 렌더링하고, 영화를 내보냅니다. 스튜디오에서 작업하는 동안 영화를 열면 모든 변화가 실시간으로 보입니다. 작업한 모든 것은 Ctrl+Z로 취소할 수 있으며, 결과는 손으로 계속 편집할 수 있는 일반 영화입니다.

시작하기 전에

SimpliGen이 실행 중이어야 하고, Video Studio가 설치되어 있어야 하며, 에이전트가 연결되어 있어야 합니다(에이전트 연결하기 참조). 렌더링은 당신의 GPU를 사용하거나, 영화가 클라우드에서 렌더링될 때 클라우드 크레딧을 사용합니다.

1. 요청하기

에이전트에게 곡, 사람들, 장소를 주고 어떤 일이 일어나야 하는지 말하세요:

Make a music video for C:\Music\neon-rain.wav. Kai sings it on a rooftop at night; Mira walks a neon street in the second verse. 16:9, 1080p, rendered on this PC.

2. 에이전트가 하는 일

  1. 출연진과 장소. 당신이 가진 캐릭터를 재사용하거나(list_characters) create_character로 만듭니다. 아직 없는 장소는 세 단계로 만듭니다: 그림을 generate하고, wait_for_result한 다음, 그 작업으로 create_location합니다.
  2. 영화. create_film으로 형태와 해상도를 정하고, upload_file과 add_track으로 곡을 추가합니다(보컬이면 kind는 singing이므로 가수의 입이 가사를 따릅니다). detect_tempo로 박자를 세울 수 있도록 합니다.
  3. 초안. 한 번의 apply_film_plan으로 모든 클립을 박자에 배치하고 샷, 출연진, 장소, 이전 클립에서 계속되는지 여부를 정합니다. 뭔가 잘못되면(철자를 틀린 이름, 클립보다 긴 샷), 모든 문제가 한 번에 돌아오고 계획이 맞을 때까지 아무것도 바뀌지 않습니다.
  4. 렌더링. render_clips은 렌더링이 필요한 모든 클립을 시작합니다. 이전 클립에서 계속되는 클립은 한 번에 하나씩 렌더링합니다. wait_for_renders로 완료될 때까지 기다립니다.
  5. 검토. 타임라인을 읽고(get_film), update_clip으로 고칠 것을 수정하고, list_takes와 use_take로 테이크를 선택하고, 필요한 곳에서 다시 렌더링합니다.
  6. 영화. export_film으로 곡과 함께 연결하고 파일을 반환합니다.

3. 함께 작업하기

에이전트가 작업하는 동안 Video Studio에서 영화를 열어두세요. 모든 변화가 실시간으로 나타나고, Ctrl+Z를 눌러 하나를 취소할 수 있습니다. 동시에 편집할 수 있습니다. 에이전트는 항상 지금 상태의 영화를 읽으며, 당신의 변경사항도 포함됩니다. 완료되면 영화는 다른 것처럼 계속 편집할 수 있습니다.

유용한 정보

  • 박자: detect_tempo 후, 클립과 마커는 박자에 배치할 수 있습니다({ "bar": 5 }). 박자 1은 곡의 첫 다운비트입니다.
  • 계속되는 샷: 계속되는 클립은 이전 클립의 마지막 프레임에서 시작하므로, 첫 번째 샷이 그 구도를 유지합니다.
  • 클라우드 렌더링: 무언가 시작되기 전에 가격이 결정되고 에이전트의 지출 한도에 계산됩니다.
  • 참조: 모든 도구는 MCP 도구 참조에, 모든 경로는 Control API 참조에 있습니다.