Reelful의 에이전트 기반 비디오 편집기, 콘텐츠 제작의 대중화 목표

많은 사람들이 행사, 여행, 컨퍼런스에서 사진과 비디오를 촬영하지만 온라인에 공유하는 경우는 드물다고 Ekaterina Deyneka가 지적합니다. 이러한 망설임은 비디오 편집이 어렵고, 지루하며, 수동적이라는 인식에서 비롯됩니다.

Kate는 이러한 '예술과 같은' 수동 프로세스가 사람들이 녹화한 콘텐츠를 게시하지 못하게 하는 핵심 장벽이라고 강조합니다.

에이전트 기반 비디오 편집은 프로세스를 단순화합니다. 사용자는 미디어(사진 및 비디오)를 입력하고 최소한의 컨텍스트 또는 지침을 제공합니다. 그러면 AI 에이전트가 미디어 콘텐츠를 이해하고 가장 관련성 높은 순간을 식별하여 작업을 시작합니다.

에이전트는 비디오를 조립하고, 캡션을 생성하고, 음악을 추가하고, 보이스오버를 통합하고, B-롤 푸티지를 포함하여 즉시 공유 가능한 클립을 제공합니다. 이 자동화는 카메라에 대고 말하는 비디오에서 일시 중지나 덜 성공적인 장면을 제거하는 등의 작업도 처리합니다.

인프라 관점에서 에이전트 기반 비디오 편집기는 에이전트 기반 앱 빌더와 매우 유사합니다. 두 시스템 모두 에이전트에게 격리된 환경을 제공하기 위해 실행되는 원격 머신인 '샌드박스'에 의존합니다.

이 샌드박스 내에서 특정 도구와 기술을 갖춘 에이전트가 사용자가 요청한 작업을 실행합니다. 주요 차이점은 출력에 있습니다. 앱 빌더는 코드 기반 애플리케이션 미리 보기를 생성하는 반면, 비디오 편집기는 완성된 비디오 구성을 렌더링합니다.

Reelful의 주요 초점은 처음부터 AI 콘텐츠를 생성하는 것이 아니라 기존 푸티지를 편집하는 것입니다. 이는 고유한 과제를 제시합니다. 에이전트는 콘텐츠를 세심하게 선별하고, 어떤 순간이 최고인지, 무엇을 생략할지, 모든 것을 어떻게 일관성 있게 구성할지 결정해야 합니다.

또한, 실제 푸티지는 종종 지저분하거나 불완전하거나 품질이 다양할 수 있습니다. 이러한 불완전함에도 불구하고 에이전트는 이러한 원본 자료를 매우 세련되고 전문적으로 제작된 최종 비디오로 변환하는 작업을 수행합니다.

Reelful 워크플로는 사용자가 미디어를 제출하고 세련된 클립을 제작하기 위해 비디오를 어떻게 편집할지 지정하는 프롬프트 또는 지침을 제공하는 것으로 시작됩니다. 첫 번째 단계는 포괄적인 미디어 이해입니다. 여기서 시스템은 제출된 푸티지 내의 이벤트 및 주요 요소를 식별합니다.

미디어 이해 후, 카메라에 대고 말하는 푸티지의 경우 시스템은 전사를 수행합니다. 마지막으로, 실제 편집이 시작되기 전에 사용자 승인을 위해 창의적인 계획을 생성합니다.

Reelful 프로세스의 중요한 부분은 실제 편집이 시작되기 전에 상세한 계획을 생성하는 것입니다. 이 계획은 비디오의 제안된 구조와 요소를 간략하게 설명합니다.

사용자가 이 창의적인 계획을 승인하면 전용 '샌드박스' 환경, 즉 원격 머신이 실행됩니다. 이 격리된 환경은 에이전트가 계획된 모든 편집 작업을 실행하는 데 필요한 리소스와 도구를 제공합니다.

Reelful의 에이전트는 원본 푸티지에서 최고의 순간을 선택하는 데 도움이 되는 정의된 컷 규칙을 포함하여 비디오 편집에 필수적인 특수 기술을 갖추고 있습니다. 또한 특정 사용 사례에 적합한 글꼴과 그렇지 않은 글꼴을 식별하는 적절한 글꼴 페어링에 대한 지식도 갖추고 있습니다.

또한 에이전트는 미적 판단과 기술이 필수적인 B-롤 생성을 처리합니다. 추가 하위 프로세스에는 최종 비디오를 향상시키기 위한 음악, 보이스오버 및 동적 이미지 애니메이션 통합이 포함됩니다.

Reelful은 React 코드로 비디오를 생성할 수 있는 오픈 소스 프레임워크인 Remotion을 활용합니다. 이 접근 방식은 비디오를 코드 파일로 취급하여 자산, 트랙 및 진행 순서를 정의하여 매우 구조화되고 프로그래밍 가능하게 만듭니다.

AI 에이전트는 코드 작성에 매우 뛰어나므로 Remotion은 비디오 구성을 구축하고 관리하는 데 이상적인 도구입니다. 이러한 코드 기반 구성이 렌더링 전에 오류가 없는지 확인하기 위해 검증 계층이 통합되어 있습니다.

Reelful은 사용자가 운전 중, 걷는 중 또는 기타 일상 활동 중에 이동하면서 편리하게 비디오를 편집할 수 있도록 모바일 우선 전략을 채택했습니다. 많은 사용자에게 복잡한 비디오 프롬프팅이 어려울 수 있음을 인식하고 Reelful은 방향성 템플릿을 개발했습니다.

이러한 템플릿은 프로세스를 단순화하여 사용자가 복잡한 프롬프트 없이도 미디어를 쉽게 넣을 수 있도록 합니다. 내장된 편집기는 최종 조정 및 수정 작업을 위한 친숙한 인터페이스를 제공하여 사용자 경험을 더욱 향상시킵니다.

Reelful은 컨퍼런스 참가자들을 위해 새로운 베타 버전인 버전 2.0을 독점적으로 출시했으며, 이를 통해 사용해 보고 피드백을 제공하도록 권장하고 있습니다. 이 출시는 A16Z Speed Run의 상당한 자금 지원을 받아 회사의 개발 및 확장을 지원합니다.