블로그

사용 가이드

Gemini Omni Flash 참조 이미지 기반 비디오 생성 프롬프트: 개발자를 위한 복사-붙여넣기 가능한 레시피

다중 참조 이미지 순서 지정, 주체 일관성, 카메라 움직임 표현, 길이와 해상도 등급, 그리고 부정 목록—실행 가능한 요청 포함

Nov 17, 2026
에디토리얼 커버 아트: 큰 프리즘이 짙은 소나무색 배경 위에서 평면적인 세이지색과 미스트 그린 색면으로 분할된, 선명한 기하학적 구성.
이 페이지에서

참조 이미지 기반 비디오 생성이 프롬프트 설계를 바꾸는 실제 방식

텍스트 기반 비디오 생성은 모델이 모든 것을 무에서 창조해야 합니다. 주체, 의상, 환경, 조명, 움직임 모두요. 참조 이미지 기반 비디오 생성은 이 계약을 뒤집습니다. 이미 대부분의 "무엇"에 답이 담긴 이미지를 모델에 넘기고, 프롬프트의 역할 범위는 "어떻게"로 좁혀집니다. 주체가 어떻게 움직이는지, 카메라가 어떻게 동작하는지, 샷이 얼마나 지속되는지, 그리고 무엇이 절대로 나타나서는 안 되는지입니다.

실질적인 결과는 다음과 같습니다. 텍스트 기반 비디오 생성의 프롬프트 습관은 여기서 오히려 역효과를 냅니다. 주체의 외형을 반복해서 다시 설명하는 긴 서술형 문단은 참조 이미지와 경쟁하여 모델이 이를 평균 내어 무난하고 일반적인 결과로 뭉개도록 만듭니다. 강조를 위해 쌓아 올린 형용사들—"시네마틱, 웅장한, 극적인, 스위핑한"—은 구체적인 지시 하나에 비해 거의 아무런 신호도 담지 못합니다. 또한 인물의 얼굴이나 제품의 정확한 기하학적 형태를 텍스트로 묘사하는 프롬프트는 드리프트를 유발합니다. 텍스트와 픽셀이 서로 모순되기 때문입니다.

유지해야 할 멘탈 모델

각 참조 이미지를 하나의 제약 조건으로, 프롬프트를 일정표로 생각하세요. 제약 조건은 누구와 무엇을 말합니다. 일정표는 언제, 어디서, 어떻게 움직이는지를 말합니다. 이미지가 이미 보여주는 내용을 다시 설명하는 문장을 쓰고 있다면 삭제하세요. 카메라와 움직임에 관한 문장을 하나도 쓰지 않았다면, 실제로 텍스트가 필요한 부분에 대한 설명이 부족하다는 뜻입니다.

API를 호출하기 전에 유용한 점검이 있습니다. 참조 이미지를 가리고 프롬프트를 읽어 보세요. 이 구체적인 입력에 대한 요청으로 여전히 말이 됩니까? 독립적인 텍스트 기반 비디오 생성 프롬프트처럼 읽힌다면, 너무 많이 쓰고 너무 적게 표시한 것입니다.

이 가이드는 이미지 순서 지정, 주체 일관성, 카메라 움직임 표현, 등급 선택, 부정 목록을 차례로 다루고, 마지막에 hiapi API의 gemini-omni-flash/reference-to-video에 대한 실행 가능한 요청을 제시합니다.

텍스트 기반 비디오 생성은 하나의 입력을 화면으로 보냅니다. 참조 이미지 기반 비디오 생성은 여러 이미지 참조와 하나의 프롬프트를 단일 출력으로 수렴시킵니다. 이것은 설계해야 할 또 다른 멘탈 모델입니다.

여러 참조 이미지 구성하기

참조 이미지를 한 장 이상 전달할 때는 순서와 레이블 지정이 프롬프트 길이보다 중요합니다. 모델은 어느 이미지가 출력의 어느 측면을 지배하는지 알아야 하며, 이를 전달하는 가장 경제적인 방법은 각 슬롯에 하나의 역할만 부여하는 것입니다.

슬롯마다 하나의 역할

신뢰할 수 있는 패턴은 다음과 같습니다. 주체가 먼저, 그다음 주체를 수식하는 것(의상, 제품 변형), 그다음 환경, 마지막으로 스타일입니다. 각 이미지는 하나의 작업만 담당해야 합니다. 한 이미지가 캐릭터의 얼굴과 캐릭터가 서 있는 방을 동시에 담당하도록 기대한다면, 둘이 충돌할 때 모델은 어느 쪽이 이길지 추측할 수밖에 없습니다.

프롬프트에 역할을 명시적으로 쓰고, 전달하는 이미지 순서대로 작성하세요:

Image 1: the character (face and hair).
Image 2: the jacket the character wears.
Image 3: the room the character stands in.
Image 4: the color and lighting style to apply overall.

프롬프트에 이미지 번호를 매기고 요청 페이로드의 순서와 일치시키는 것은 다중 참조 프롬프트에서 수익률이 가장 높은 습관입니다. 페이로드 순서를 바꿀 때는 같은 편집에서 프롬프트 텍스트 순서도 바꾸세요.

역할이 충돌할 때 우선순위 명시하기

충돌은 일어납니다. 두 이미지 모두 배경을 포함할 수 있습니다. 환경 이미지에 사람이 포함될 수 있습니다. 이럴 때 모델이 스스로 추론하기를 기대하지 말고 한 줄로 우선순위를 명시하세요:

Use the face from Image 1. Ignore any people in Image 3; Image 3 is the room only.

더 적고 깨끗한 참조 이미지가 더 많은 것보다 낫다

참조 이미지가 한 장 늘어날 때마다 모델이 동시에 충족해야 할 제약 조건이 하나 더 늘어납니다. 네 번째 이미지가 스타일만 추가하고 스타일이 한 구절로 표현될 수 있다면 구절을 쓰는 편이 낫습니다. 역할이 명확히 레이블된 네 장의 이미지는 서로 겹치는 여덟 장보다 대개 더 나으며, 실패를 더 쉽게 진단할 수 있게 해 줍니다.

각 참조 슬롯은 최종 화면의 한 역할에 매핑됩니다. 순서와 가중치가 모델이 무엇을 우선하는지를 결정합니다.

샷 전반에 걸쳐 주체 일관성 유지하기

여러 클립에 걸친 일관성은 동일한 참조 이미지 세트를 재사용하고 동일한 역할 레이블을 유지하며, 프롬프트에서 샷을 묘사하는 부분만 바꾸는 데서 나옵니다. 참조 이미지를 바꾸는 순간 모든 하위 프롬프트를 다시 조정해야 합니다. 참조를 고정하면 새 샷마다 작고 독립적인 실험이 됩니다.

안정적인 정체성 블록

특정 주체에 대한 모든 프롬프트에 그대로 복사할 짧은 머리말 블록을 작성하고, 그 아래에 샷별 지시를 덧붙이세요:

Subject: the character from Image 1, wearing the jacket from Image 2.
Keep face shape, hair length, and jacket color identical to the references.

이 블록은 절대 변하지 않습니다. 그 뒤의 모든 것—카메라 움직임, 동작, 길이—은 변수입니다. 이 구조는 또한 드리프트 문제가 참조 이미지에서 비롯된 것인지 표현에서 비롯된 것인지 한눈에 구분할 수 있게 해 줍니다. 표현이 일정하게 유지되기 때문입니다.

외형이 아니라 변화를 묘사하기

샷이 주체에게 어떤 행동을 요구할 때는 주체의 특징이 아니라 동작과 그로 인한 변화를 묘사하세요:

The character turns from facing the window to facing the camera; the jacket stays the same.

"stays the same"이나 "unchanged" 같은 구절은 저렴하고 효과적인 고정 장치입니다. 첫 샷 이후에는 얼굴이나 제품 윤곽을 텍스트로 다시 묘사하지 마세요. 참조 이미지가 이미 그 정보를 담고 있고, 추가 텍스트는 잡음만 더할 뿐입니다.

평균화 실패를 경계하기

주체가 다소 평범하게 나온다면—특징이 흐려지고 색이 뒤섞인다면—흔한 원인은 같은 역할을 두고 경쟁하는 겹치는 참조 이미지가 너무 많거나, 프롬프트가 이미지 위에 외형을 다시 상세히 묘사한 것입니다. 해결책은 형용사를 더하는 것이 아니라 참조 이미지를 제거하고 외형 묘사 문장을 삭제하는 것입니다.

모델이 따르는 카메라 움직임 표현

카메라 움직임은 프롬프트가 가장 자주 실패하는 지점이며, 실패 양상은 거의 항상 같습니다. 한 샷에 여러 움직임을 나열하면 모델이 하나를 고르거나, 섞거나, 어느 것도 충족하지 못하는 느린 드리프트를 만들어냅니다.

샷마다 하나의 명확한 움직임

프롬프트마다 카메라 동작을 하나만 쓰세요. 먼저 움직임을 명명하고, 이어서 대상이 무엇인지 밝히세요:

Camera: slow push in toward the character.
Camera: static, locked off. The character moves; the camera does not.
Camera: orbit clockwise around the product, roughly a quarter turn.
Camera: pan left, following the character as they walk.

고정 카메라도 움직이는 카메라만큼 명시적으로 쓸 가치가 있습니다. 카메라 관련 문구를 생략하면 모델이 요청하지 않은 드리프트를 추가할 수 있습니다. "static, locked off"는 낭비되는 텍스트가 아니라 제약 조건입니다.

중첩의 결과

"Slow push in while orbiting and slightly zooming"은 서로 부분적으로 상쇄되는 세 가지 제약 조건으로 읽힙니다. 샷의 의미를 담고 있는 움직임 하나를 고르세요. 두 번째 움직임이 필요하면 두 번째 클립에 넣고 편집할 때 이어 붙이세요. 한 번의 생성에 두 가지를 요구하는 것보다 경제적입니다.

속도는 움직임과 함께

속도에 수식어를 붙이는 것은 유용합니다. "slow", "steady", "fast"는 샷 길이 동안 얼마나 멀리 움직일지를 모델에 알려주기 때문입니다. 하나의 움직임 주변에 속도나 감정 형용사를 두 개 이상 붙이는 것은 정보를 전혀 더하지 않습니다. 움직임 언어는 한 문장 안에 유지하고, 프롬프트의 고정된 위치에 두세요. 보통 맨 끝에 두면 일련의 프롬프트를 훑어보며 각 샷이 무엇을 하는지 즉시 파악할 수 있습니다.

각 샷은 하나의 깔끔한 움직임—푸시, 오빗, 팬—만 얻으며, 고정된 주체를 둘러싼 중첩되지 않은 경로로 그려집니다.

쓰기 전에 길이와 해상도 등급을 먼저 선택하기

길이와 해상도는 완성된 프롬프트에 나중에 적용하는 설정이 아닙니다. 이 둘은 프롬프트가 표현해야 할 내용을 바꿉니다. 이 두 등급을 먼저 정하고 나서 쓰세요.

길이가 움직임 밀도를 바꾼다

짧은 샷은 한 박자만 담을 수 있습니다. 단일 움직임 또는 단일 동작입니다. 긴 샷은 한 번의 상태 변화—돌아서기, 드러내기, 입장—를 담을 수 있습니다. 긴 샷 프롬프트를 썼는데 짧은 샷으로 렌더링하면 동작이 알아보기 어려울 정도로 압축됩니다. 짧은 샷 프롬프트를 썼는데 긴 샷으로 렌더링하면 모델이 드리프트로 채웁니다.

경험 규칙은 다음과 같습니다. 짧은 샷은 한 박자, 긴 샷은 한 번의 상태 변화입니다. 한 레시피에 두 박자가 필요하면 단일 프롬프트를 늘리는 대신 두 번의 생성으로 나누세요.

해상도가 구도 허용 오차를 바꾼다

고해상도 등급은 주체가 선명하고 배경이 복잡하지 않은 깔끔하고 단순한 구도를 요구합니다. 미세한 디테일—보석, 제품의 작은 글자, 직물 질감—은 최고 등급에서만 선명하게 읽힙니다. 낮은 등급에서 이를 요구하면 뭉개진 결과만 얻습니다. 반대로 샷이 작은 주체가 있는 광각 와이드 샷이라면 낮은 등급에서는 주체가 완전히 사라집니다.

등급을 샷이 의존하는 디테일에 맞추세요. 제품 클로즈업과 정면 인물 샷은 높은 등급을, 광각 환경 플레이트는 더 낮은 등급을 사용할 수 있습니다. 참조 이미지 품질이 상한을 정하는 지점이기도 합니다. 출력 해상도는 참조 이미지를 넘지 못합니다.

등급을 프롬프트 파일에 기록하기

코드에서 길이와 해상도를 주석에 흩어 두지 말고 프롬프트 텍스트와 나란히 필드로 저장하세요. 아래 레시피에서는 요청 본문이 이들을 명시적으로 담아, 프롬프트 자체가 내용과 움직임에 집중할 수 있게 합니다.

프롬프트와 충돌하지 않으면서 결함을 고치는 부정 목록

부정 목록은 절대 나타나서는 안 되는 것들의 작은 집합입니다. 용도는 반복되는 결함을 억제하는 것이지, 비디오 생성에 대한 모든 불만을 나열하는 것이 아닙니다.

짧고 구체적으로

네 개에서 여섯 개가 유용한 범위입니다. 각 항목은 실제로 자기 출력에서 본 구체적이고 눈에 보이는 실패를 명명해야 합니다:

Negative: extra fingers, warped face, text overlays, watermark, flickering lighting, duplicate subject.

이 목록은 실제 실패 양상—손 결함, 정체성 드리프트, 원치 않는 자막, 시간적 불안정—을 겨냥하면서, 모델이 조화시켜야 할 새로운 개념을 도입하지 않습니다.

긴 목록이 역효과를 내는 이유

긴 부정 목록은 종종 긍정 프롬프트와 어휘를 공유하는 것들을 나열합니다. 긍정 프롬프트가 야경을 요구하는데 "no dark, moody lighting"이라고 쓰면, 모델이 예측 불가능한 방식으로 해소해야 하는 모순을 강제합니다. 마찬가지로 나타나지 말아야 할 물체를 많이 나열하면 그 물체들이 장면으로 새어 들어갑니다. 부정 항목 하나하나가 모델이 능동적으로 처리해야 하는 개념입니다. 스무 개짜리 목록은 일을 망칠 기회가 스무 번이라는 뜻입니다.

일련의 작업에서 안정적으로 유지하기

부정 목록이 특정 주체에 효과가 있다면 고정하세요. 같은 반복에서 긍정 프롬프트와 부정 목록을 동시에 바꾸면 어떤 수정이 효과를 냈는지, 어떤 회귀가 생겼는지 귀속시킬 수 없습니다. 한 번에 하나의 변수만, 긍정 프롬프트부터 반복하세요.

복사-붙여넣기 가능한 레시피와 실행 가능한 요청

각 레시피는 하나의 프롬프트와 gemini-omni-flash/reference-to-video에 대한 요청 본문입니다. 참조 파일 경로를 자신의 이미지로 바꾸세요. 길이와 해상도는 요청의 필드로 전달됩니다. 현재 제공되는 등급은 모델 페이지를 확인하세요.

레시피 1: 캐릭터, 안정적인 정체성, 단일 움직임

Image 1: the character (face and hair).
Image 2: the jacket the character wears.

Subject: the character from Image 1, wearing the jacket from Image 2.
Keep face shape, hair length, and jacket color identical to the references.
Action: stands still, looking slightly off-camera.
Camera: slow push in toward the character.
Negative: extra fingers, warped face, text overlays, flickering lighting.
curl -X POST https://api.hiapi.ai/v1/video/generations \
  -H "Authorization: Bearer $HIAPI_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{
    "model": "gemini-omni-flash/reference-to-video",
    "prompt": "Image 1: the character (face and hair).\nImage 2: the jacket the character wears.\n\nSubject: the character from Image 1, wearing the jacket from Image 2.\nKeep face shape, hair length, and jacket color identical to the references.\nAction: stands still, looking slightly off-camera.\nCamera: slow push in toward the character.\nNegative: extra fingers, warped face, text overlays, flickering lighting.",
    "references": ["character.png", "jacket.png"],
    "duration": "short",
    "resolution": "high"
  }'
import requests, os

prompt = """Image 1: the character (face and hair).
Image 2: the jacket the character wears.

Subject: the character from Image 1, wearing the jacket from Image 2.
Keep face shape, hair length, and jacket color identical to the references.
Action: stands still, looking slightly off-camera.
Camera: slow push in toward the character.
Negative: extra fingers, warped face, text overlays, flickering lighting."""

r = requests.post(
    "https://api.hiapi.ai/v1/video/generations",
    headers={"Authorization": f"Bearer {os.environ['HIAPI_API_KEY']}"},
    json={
        "model": "gemini-omni-flash/reference-to-video",
        "prompt": prompt,
        "references": ["character.png", "jacket.png"],
        "duration": "short",
        "resolution": "high",
    },
)
print(r.json())

레시피 2: 제품 오빗

Image 1: the product, front view. Image 2: the product, side view.
Image 3: the surface it sits on.

Subject: the product from Images 1 and 2, resting on the surface from Image 3.
Keep shape, color, and proportions identical to the references.
Action: the product is motionless.
Camera: orbit clockwise around the product, roughly a quarter turn.
Negative: duplicate product, warped edges, text overlays, flickering lighting.

레시피 1과 같은 요청 본문 구조를 보내되 references에 세 개의 항목을 넣고, 이 샷이 가장자리 디테일에 의존하므로 고해상도 등급을 사용하세요.

레시피 3: 환경, 고정 카메라

Image 1: the room.
Image 2: the lighting and color style.

Scene: the room from Image 1, lit and graded as in Image 2.
Camera: static, locked off. Nothing in frame moves except a faint drift of dust in the light.
Negative: people, text overlays, watermark, flickering lighting.

고정 환경 플레이트는 생성 비용이 가장 낮은 유용한 클립이며 검증하기도 가장 쉽습니다. 출력에서 주체 형태에 결함이 보인다면 부정 목록을 더 조여야 한다는 신호입니다.

레시피 조정하기

자신의 모든 프롬프트에서 이 섹션 레이블(Subject:, Action:, Camera:, Negative:)을 유지하세요. 이 레이블은 모델에게 마법 같은 단어가 아니지만, 당신이 지켜야 할 규율—참조 이미지마다 하나의 역할, 샷마다 하나의 움직임, 짧고 표적화된 부정 목록—을 강제합니다.

출력 검증 및 빠른 반복

생성된 각 클립을 정해진 순서로 두 가지 질문으로 검토하세요. 첫째, 주체가 참조 이미지와 일치합니까? 둘째, 움직임이 요청한 단일 움직임과 일치합니까? 이 두 점검이 대부분의 실패를 잡아내며, 순서가 중요합니다. 정체성 문제를 먼저 고쳐야 움직임 문제가 보이기 때문입니다.

무엇이든 바꾸기 전에 실패를 귀속시키기

주체가 드리프트할 때 원인은 거의 항상 참조 이미지나 역할 레이블입니다. 역할 겹침, 이미지가 한 장 더 있음, 또는 픽셀과 경쟁하는 외형 묘사 문장입니다. 움직임이 잘못될 때 원인은 거의 항상 프롬프트의 카메라 줄, 또는 길이 등급과 박자 수의 불일치입니다. 구도가 탁하지만 주체와 움직임이 맞다면 해상도 등급이 용의선상에 있습니다.

같은 반복에서 프롬프트, 참조 이미지, 등급을 동시에 바꾸면 귀속이 깨져 추측만 하게 됩니다. 하나씩 바꾸고, 다시 렌더링하고, 비교하세요.

모든 반복을 기록하기

레시피마다 간단한 기록을 남기세요. 순서대로의 참조 이미지 목록, 프롬프트 텍스트, 길이와 해상도 등급, 그리고 한 줄 결론입니다. 이렇게 하면 일주일 뒤에도 실패를 진단할 수 있고, 프롬프트 라이브러리가 일회성 실험 모음이 아니라 알려진 양호한 출발점 집합이 됩니다. 레시피가 안정되면 고정하고, 그 자리에서 편집하는 대신 새 샷을 분기시키세요.

요청 본문이 매개변수화되면 전체 루프—프롬프트 레시피, 요청, 렌더링된 클립, 결론, 단일 변수 수정—가 빠르게 돌아갑니다. 위의 레시피에서 시작해 자신의 참조 이미지로 바꾸고, 검증 루프가 조정을 마무리하게 하세요.

영구 AI 아티팩트로 빌드 시작하기

API 키를 받아 태스크 기반의 하나의 API로 이미지, 비디오, 오디오 모델을 호출하세요.

API 문서 보기