드디어 AI 영상 편집을 정복했습니다! (전체 가이드)
원제: I Finally Solved AI Video Editing! (full guide)
Duncan Rogoff | Learn Claude CodeDuncan Rogoff | Learn Claude Code핵심 요약
Claude Code는 조사와 스크립트 작성부터 컷 편집, 그래픽, 품질 검사, 수정까지 편집 타임라인을 사용하지 않고 동영상을 편집합니다. 제작자는 여전히 촬영하고 컷을 승인합니다. 이번 편집에는 약 12시간과 14억 토큰이 들었으며, API 이용료로는 약 $445로 추산되지만 제작자의 Claude Max 20X 구독으로 사용량이 충당되었습니다.
한 번의 프롬프트로 완성된 영상을 요청하기보다 편집을 서로 다른 작업으로 나누고 리뷰 의견을 바탕으로 스킬 규칙을 갱신하면 작업 흐름이 개선됩니다. 이번 편집에는 규칙서 12개가 사용되었고 한 번의 컷 편집에 대한 의견 36개가 반영되었습니다. 제작자는 자신의 작업에 이 방식이 가치 있다고 보지만, 시작용 스킬은 더 단순하며 완성도 높은 결과는 5개월간의 반복 개선을 거친 것이라고 설명합니다.
영상 흐름
- 0100:00
사람이 작성한 스크립트, 그다음 AI 편집
제작자가 카메라 앞에서 스크립트를 읽으면 Claude Code가 사람이 편집 타임라인을 다루지 않고도 자막, 모션 그래픽 및 기타 편집 작업을 만듭니다. 완성도 높은 결과에 이르기까지 5개월간 반복 개선을 거쳤으며, 한 번에 완성된 영상을 요청하는 대신 Claude에 한 번에 하나씩 작업을 맡기는 방식으로 바뀌었습니다.
- 0201:15
사실 확인을 곁들인 조사와 스크립트 작성
Claude는 인기 크리에이터들의 성공적인 도입부를 분석하고 유용한 예시를 모음집에 저장한 다음 스크립트를 작성합니다. 이 영상의 첫 문장은 특이하게 성과가 좋았던 도입부를 참고했습니다. 모든 사실 주장은 파일이나 웹페이지 같은 실제 출처와 대조해 확인해야 하며, 근거가 없는 문장은 제작자가 카메라 앞에서 스크립트를 읽기 전에 삭제합니다.
- 0302:21
깔끔한 컷 편집과 화면 동기화
원본 녹화본에서 Claude는 각 단어의 시점을 포함해 받아쓰고, 각 대사의 마지막으로 깔끔하게 녹음된 테이크를 남긴 뒤 재촬영분과 어색한 침묵을 제거합니다. 이전 테스트에서는 재촬영분 10개 중 약 8개를 찾아냈습니다. 또한 카메라 화면과 마이크 오디오 사이의 지연을 측정해 보정하고, 결과가 제대로 나올 때까지 반복 확인합니다.
- 0403:27
비트 맵과 참고 자료로 영상 구성 계획하기
비트 맵에는 말하는 문장과 화면에 표시할 내용이 각각 정리되어 있습니다. 이전 영상에는 비트가 140개 있었습니다. Claude는 시각 자료를 참고해 텍스트 움직임이나 장면 전환 같은 선택을 추론한 다음, 그래픽을 제작하기 전에 모든 그래픽을 비트 맵에 대응시킵니다. 이렇게 하면 완성된 그래픽을 수정하는 것보다 변경 비용이 줄어듭니다.
- 0504:40
그래픽 제작과 효율적인 렌더링
Claude는 영상을 여러 구간으로 나누고 서브에이전트에 그래픽 제작을 맡깁니다. 서브에이전트는 Hyperframes를 사용해 코드로 그래픽을 만듭니다. 더 성능이 뛰어난 모델은 계획을 세우고, 빠르고 저렴한 모델은 제작을 담당합니다. 컴퓨터 과부하를 막기 위해 렌더링은 한 번에 하나씩 실행합니다. 모션 블러를 끄면 렌더링이 약 3배 빨라졌으며, 제작자의 컴퓨터에서 FFmpeg 같은 도구를 사용해 승인 후 전체 화질로 렌더링하기 전에 절반 크기의 초안을 만듭니다.
- 0606:16
실제 재생 속도로 편집 확인하기
이제 Claude는 초당 한 프레임이 아니라 10프레임을 확인하며 여섯 가지 오류를 살핍니다. 반복되는 애니메이션, 잠깐 나타나는 그래픽, 늦게 표시되는 텍스트, 제작자의 얼굴을 가리는 그래픽, 중복된 발화, 입 모양과 소리의 동기화 어긋남입니다. 이 확인은 속도를 최적화하기보다 사람이 시청하는 방식에 맞추려는 것입니다.
- 0706:58
리뷰 의견을 지속적으로 적용되는 규칙으로 바꾸기
Claude는 리뷰 의견을 활용해 각 실수를 막았을 규칙을 찾아 고쳐 씁니다. 예를 들어 음악 음량 규칙을 설정하거나 화면에 중복 복사본이 나타나지 않는지 확인하는 항목을 추가합니다. 스킬에는 규칙서 12개가 있으며, 규칙을 계속 덧붙이는 대신 기존 규칙을 갱신하면 규칙의 일관성 저하, 비대화, 환각을 줄일 수 있습니다.
- 0808:03
비용, 시간, 시작용 스킬
이번 편집에는 약 14억 토큰과 Claude 작업 시간 약 12시간이 들었으며, 여기에 검토 시간이 추가됩니다. API 요금으로는 약 $445이지만 제작자의 Claude Max 20X 구독으로 사용량이 충당되었습니다. 제작자는 숙련된 사람 편집자라면 3일에서 일주일이 걸릴 것으로 추산하며, 자신의 작업에는 이 시스템이 가치 있다고 봅니다. Club 시작용 스킬은 더 단순하며 사용자가 의견을 저장할수록 개선됩니다.
도구·자료
3개 역할 · 참고자료 1개
2개 역할
제작자가 편집 타임라인을 사용하지 않고도 코드로 동영상 편집 작업을 처리합니다.
- 01제작자가 편집 타임라인을 사용하지 않고도 코드로 동영상 편집 작업을 처리합니다.00:15
- 02제작자가 편집 타임라인을 사용하지 않고도 코드로 동영상 편집 작업을 처리합니다.01:43
- 03제작자가 편집 타임라인을 사용하지 않고도 코드로 동영상 편집 작업을 처리합니다.02:42
- 04제작자가 편집 타임라인을 사용하지 않고도 코드로 동영상 편집 작업을 처리합니다.03:33
- 05제작자가 편집 타임라인을 사용하지 않고도 코드로 동영상 편집 작업을 처리합니다.04:46
- 06제작자가 편집 타임라인을 사용하지 않고도 코드로 동영상 편집 작업을 처리합니다.06:22
- 07제작자가 편집 타임라인을 사용하지 않고도 코드로 동영상 편집 작업을 처리합니다.07:13
녹화본을 정리하고 편집을 확인하는 편집 스킬의 시작용 버전을 제공합니다.
시각 참고 자료로 사용할 모션 그래픽 예시와 제작에 사용한 프롬프트를 제공합니다.
- 01시각 참고 자료로 사용할 모션 그래픽 예시와 제작에 사용한 프롬프트를 제공합니다.04:10
코드로 만든 웹페이지 그래픽을 동영상으로 변환하며, 단어별 자막도 처리합니다.
- 01코드로 만든 웹페이지 그래픽을 동영상으로 변환하며, 단어별 자막도 처리합니다.05:02
그래픽 작업 흐름의 계획과 크리에이티브 방향을 담당합니다.
- 01그래픽 작업 흐름의 계획과 크리에이티브 방향을 담당합니다.05:14
계획 수립과 창의적 사고를 위한 고성능 모델 역할을 합니다.
- 01계획 수립과 창의적 사고를 위한 고성능 모델 역할을 합니다.05:14
그래픽을 제작하는 더 빠르고 저렴한 서브에이전트를 실행합니다.
- 01그래픽을 제작하는 더 빠르고 저렴한 서브에이전트를 실행합니다.05:20
제작자의 컴퓨터에서 동영상을 로컬 렌더링합니다.
- 01제작자의 컴퓨터에서 동영상을 로컬 렌더링합니다.06:05
토큰별 API 요금 대신 월간 구독으로 제작자의 Claude 사용량을 충당합니다.
- 01토큰별 API 요금 대신 월간 구독으로 제작자의 Claude 사용량을 충당합니다.08:22