아직 서툴은 우주로 떠난 고양이 시리즈..

소개

이번 작업은 "우주로 떠난 고양이"라는 콘셉트의 숏폼 영상을 제작하며, Antigravity(Gemini)에서 설계한 지침이 실제 영상 파이프라인으로 어떻게 연결되는지 검증해 본 기록입니다.

단순히 영상을 만드는 것을 넘어, 지난 스터디에서 배운 아래 3가지를 집중적으로 적용했습니다.

• Antigravity 기반 지침 최적화: Gemini를 활용해 시나리오와 프롬프트 지침서를 정교하게 설계하고, 수정 포인트를 학습

• Fal.ai API 연동 및 비용 효율화: Nano Banana(이미지)와 Grok(영상) 모델을 Fal.ai API로 연결해 가성비 높은 제작 환경 구축

• Remotion 자동화 파이프라인: 생성된 에셋들을 코드로 결합하여 최종 MP4로 렌더링하는 전 과정 경험

귀여운 고양이 우주비행사의 모험 뒤에는, API 키 매핑부터 프롬프트 구조화까지 치밀한 설계가 담겨 있습니다. 🚀

진행 방법

1) 제작 목표와 전체 구성 이번 '우주 모험' 에피소드는 총 3개 씬으로 구성했습니다.

• Scene 1: 우주복을 입은 고양이가 우주선 창밖 성운을 바라보는 모습

• Scene 2: 무중력 상태에서 둥둥 떠다니는 간식을 잡으려는 젤리 발바닥

• Scene 3: 새로운 행성에 착륙해 깃발을 꽂는 위풍당당한 뒷모습

2) 사용한 도구

• Antigravity (Gemini 1.5): 시나리오 설계, 프롬프트 지침서 작성 및 에이전트 연동

• Fal.ai (Nano Banana 2): 고품질 캐릭터 및 배경 이미지 생성

• Fal.ai (Grok): 생성된 이미지를 기반으로 자연스러운 영상(I2V) 변환

• Remotion: 씬 연결, 오디오 합성 및 최종 렌더링

3) 핵심 설계 포인트

A. 지시사항(Instructions)의 세밀한 교정 Antigravity에서 Gemini를 활용해 AI에게 어느 시점에 어떤 키워드를 수정해야 하는지 지침서를 작성했습니다.

• 캐릭터 고정: "Orange tabby cat, white spacesuit" 등 핵심 키워드를 지침서에 박아두어 씬마다 고양이 외형이 바뀌지 않도록 제어했습니다.

• 프롬프트 단순화: 복잡한 묘사보다는 Subject / Action / Environment 3요소 위주로 지침을 수정하여 영상 품질을 안정화했습니다.

B. Fal.ai API를 통한 가성비 구축 스터디에서 배운 '돈 적게 쓰는 법'을 적용해, Fal.ai에서 Nano Banana와 Grok 모델의 API 키를 얻어 연동했습니다. 무조건 비싼 툴보다 목적에 맞는 모델을 선별하여 제작 단가를 크게 낮췄습니다.

결과와 배운 점

❌ 시행착오와 수정 과정

• 문제: 처음에는 영상이 거의 움직이지 않거나 고양이 외형이 씬마다 불규칙하게 변함

• 해결: 스터디에서 배운 대로 프롬프트 지침서에서 '부정 프롬프트(Negative Prompt)'를 강화하고, Antigravity 내에서 지시사항의 우선순위를 재배치함

• 배운 점: 영상 생성에서는 "많이 설명하는 것"보다 "핵심 지침을 정확한 위치에서 수정하는 것"이 결과를 좌우한다는 것을 체감했습니다.