AI 비디오의 첫 번째 및 마지막 프레임 프롬프트: 전환 워크플로

AI 비디오의 첫 번째 프레임과 마지막 프레임 프롬프트는 단순히 이미지를 설명하는 것이 아니라 두 이미지 사이의 움직임을 설명해야 합니다. 첫 번째 프레임은 출발 제약 조건입니다. 마지막 프레임은 대상 제약 조건입니다. 프롬프트는 무엇이 움직이기 시작하는지, 중간을 통해 어떻게 변하는지, 카메라가 무엇을 하는지, 어떤 세부 사항이 표류할 수 없는지 등 누락된 경로를 제공합니다.

가장 신뢰할 수 있는 작업 흐름은 생성 전에 끝점을 호환되게 만들고, 하나의 연속 모션 경로를 작성하고, 작은 불변 세트를 잠그고, 가장 짧은 유용한 클립을 테스트하는 것입니다. 이는 오프닝 이미지를 거의 벗어나지 않는 비디오, 피사체를 잊어버리는 매력적인 중간, 또는 대상에 대한 왜곡된 근사치로 돌진하는 마지막 순간 등 익숙한 실패를 줄입니다.

C 댄스 AI을 사용하는 동안 워크플로를 따를 수 있습니다. 이미지 기반 테스트의 경우 Seedance 2.5가 선택된 작업공간을 열거나, 아이디어에 한 번의 연속 전환이 아닌 여러 번의 의도적인 컷이 필요한 경우 멀티샷 스토리보드 가이드를 읽어보세요.

현재 참조 및 생성 옵션을 간단히 확인하려면 테스트 전에 Seedance 2.5 모델 페이지를 검토하세요.

빠른 답변: 두 개의 캡션이 아닌 경로를 작성하세요

두 이미지를 짧은 방향의 고정 키프레임으로 처리합니다. 첫 번째 초안에는 다섯 부분만 필요합니다.

1. 주제 앵커: 알아볼 수 있어야 하는 사람, 제품, 차량 또는 물체.
2. 시작 동작: 오프닝 비트 내에서 시작되는 동작입니다.
3. 연속 경로: 끝점을 연결하는 물리적 또는 시각적 변화입니다.
4. 카메라 규칙: 한 번의 안정적인 움직임 또는 의도적으로 고정된 카메라.
5. 도착 규칙: 모션이 어떻게 느려지고 마지막 이미지로 해결되는지.

유용한 간략 프롬프트는 다음과 같습니다:

동일한 빨간색 통근용 자전거가 정확한 개방 위치에서 앞으로 굴러갑니다. 바퀴가 즉시 회전하기 시작하고 라이더는 젖은 광장을 가로질러 부드러운 곡선 경로를 따라갑니다. 한 번의 느린 오른쪽 추적 동작으로 프레임을 눈높이에 유지하십시오. 자전거 프레임, 라이더 의복, 저녁 조명 방향 및 현실적인 비율을 보존합니다. 마지막 순간에는 컷, 변형 또는 갑작스러운 카메라 변경 없이 속도를 줄이고 제공된 마지막 프레임 위치에 자연스럽게 고정됩니다.

프롬프트에는 동사, 경로, 카메라 규칙, 4개의 연속성 잠금 및 착륙 지침이 있습니다. 두 이미지에 보이는 모든 색상과 개체가 반복되지는 않습니다. 이러한 반복은 불확실한 부분인 전환을 해결하지 못한 채 주의를 소모합니다.

엔드포인트가 호환되는지 확인하는 것부터 시작하세요.

즉각적인 표현으로는 모순된 세계를 암시하는 한 쌍의 이미지를 완전히 복구할 수 없습니다. 생성하기 전에 편집에서 두 샷을 일치시키는 것처럼 프레임을 비교하십시오.

다음을 확인하세요.

프레임이 완벽하게 일치할 필요는 없습니다. 유용한 전환에는 의미 있는 차이가 필요합니다. 목표는 모델이 의도한 변경에 용량을 사용할 수 있도록 우발적인 차이를 제거하는 것입니다.

마지막 이미지의 구성은 더 좋지만 조명이 다른 경우 먼저 조명을 편집하세요. 피사체가 프레임의 반대쪽에 있는 경우 동작이 장면을 가로질러야 하는지 또는 카메라가 프레임을 다시 잡아야 하는지 결정하세요. 두 경로 모두 믿을 수 없는 경우 중간 끝점을 만들고 두 개의 클립을 생성합니다.

프롬프트를 작성하기 전에 작은 끝점 개요를 작성하세요.

즉흥적으로 긴 문단을 작성하는 대신 중요한 사실을 적어보세요. 이 개요는 모든 테스트에 대한 비교 시트가 됩니다.

제목: 좁은 검정색 뚜껑이 달린 무광택 은색 향수병 1개
시작: 어두운 돌 표면 중앙에 병이 있고, 뚜껑이 닫혀 있습니다.
끝: 같은 병의 1/3 왼쪽, 뚜껑이 열려 있고 오른쪽에 미세한 안개가 보입니다.
필수: 라벨 기하학, 유리 모양, 표면 질감, 따뜻한 테두리 조명
변경 허용: 캡 위치, 미스트, 카메라 거리를 가볍게 누르기만 하면 됩니다.
카메라: 낮은 제품 각도, 천천히 밀어넣기, 궤도 없음
도착: 마지막 비트를 위해 열린 병 구성을 유지합니다.

이것은 아직 공개 프롬프트가 아닙니다. 결정기록입니다. 갈등을 조기에 드러냅니다. 예를 들어, 궤도는 병의 다른 면을 표시하지만 마지막 프레임은 여전히 ​​전면 라벨을 표시합니다. 브리핑은 한 세대에 대한 비용을 지불하기 전에 그 불일치를 분명하게 만듭니다.

"반드시 남아 있어야 합니다"를 짧게 유지하세요. 모든 픽셀을 잠그면 요청된 모션에 맞서 싸우는 명령이 생성됩니다. 아이덴티티, 제품 기하학, 의복, 장면 레이아웃 및 조명 방향은 일반적으로 2차 반사나 느슨한 머리카락보다 더 중요합니다.

프롬프트를 판단하기 전에 올바른 모드를 선택하세요

텍스트-비디오 결과를 엔드포인트 제어 이미지-비디오 결과와 비교하여 문구가 실패했다고 결론을 내리지 마십시오. 입력 모드는 작업을 변경합니다.

• 오프닝 모양이 중요하지만 목적지가 자연스럽게 나타날 수 있는 경우 첫 프레임 이미지-비디오를 사용합니다.
• 특정 최종 구성이 필수적인 경우 첫 번째 및 마지막 프레임 생성을 사용하세요.
• 문자 그대로 끝점을 강요하지 않고 ID, 스타일, 카메라 모션 또는 성능을 빌려야 하는 경우 참조 주도 생성을 사용합니다.
• 아이디어에 컷, 새로운 각도 또는 별도의 스토리 비트가 필요한 경우 멀티샷 생성을 사용하세요.

깔끔한 실험을 위해 Seedance 2.5가 선택된 image-to-video 작업 공간을 열고 모델과 설정을 고정된 상태로 유지하며 실행당 하나의 프롬프트 변수를 변경하세요. Seedance 2.5 프롬프트 가이드은 참조 제어 및 긴 스토리텔링이 포함될 때 경쟁 지침을 줄이는 방법을 설명합니다.

단지 두 개의 매력적인 이미지가 있다는 이유만으로 어려운 아이디어를 엔드포인트 모드로 강요하지 마십시오. 연결에 하드 컷이 필요한 경우 샷 계획을 작성하세요. 물리적 경로 없이 변환이 필요한 경우 설명할 수 없는 "부드러운 전환"을 요구하는 대신 시각적 메커니즘(종이 접기, 잉크 퍼짐, 실용적인 닦아내기 또는 제어된 성냥 디졸브)을 지정하세요.

3비트로 하나의 모션 경로 작성

클립의 중간 부분은 대부분의 끝점 프롬프트가 모호해지는 부분입니다. 시작, 진행, 도착을 간단하게 설명하세요.

[오프닝 비트] 댄서는 첫 번째 스텝을 위해 두 발을 접지한 상태로 제공된 오프닝 포즈에서 즉시 밀어냅니다.

[중간 비트] 느슨한 빨간색 천이 지연되고 물리적으로 그럴듯한 움직임을 따라가는 동안 그녀는 시계 방향으로 한 번 회전합니다. 카메라는 허리 높이에서 하나의 느린 반원을 만듭니다. 얼굴, 의상, 신체 비율, 바닥 패턴, 백라이트를 그대로 유지합니다.

[도착 비트] 그녀는 회전을 완료하고 오른팔을 내린 후 제공된 최종 포즈로 감속합니다. 카메라 높이를 유지하고 마지막 순간에 마지막 프레임 구성을 유지합니다.

타임스탬프는 선택 사항입니다. 비트 레이블이면 충분할 때가 많습니다. 실제 속도 문제를 해결할 때만 정확한 타이밍을 사용하십시오. 타임코드가 너무 많으면 단순한 전환이 여러 개의 경쟁적인 마이크로 장면으로 바뀔 수 있습니다.

시작 모션은 초기에 표시되어야 합니다. “그녀는 서서 천천히 움직이는 것을 고려합니다”는 얼어붙은 오프닝을 장려합니다. "그녀는 즉시 밀어붙입니다"는 발전기에 첫 번째 동작을 제공합니다. 도착하면 정착할 시간도 있어야 합니다. 주요 작업이 전체 기간을 소모하는 경우 모델이 마지막 프레임을 서두르거나 놓칠 수 있습니다.

허용된 변경 사항과 불변성을 분리합니다.

첫 번째와 마지막 프레임 생성에서는 모델에 보존과 변환을 동시에 요청합니다. 해당 계약을 명시적으로 작성하세요.

불변성은 뷰어가 연속성 오류로 처리하는 세부 정보입니다.

• 얼굴 신원 및 나이
• 의류 실루엣과 주요 색상;
• 제품 모양, 라벨 배치 및 재질
• 과목 수와 역할
• 지속적인 장면 기하학;
• 종횡비 및 기본 카메라 높이
• 시간 변경이 의도되지 않은 경우 조명 방향.

허용되는 변경 사항은 클립이 존재하는 이유입니다.

• 위치, 포즈, 표현 또는 개체 상태
• 카메라 거리 또는 하나의 제어된 움직임;
• 전환이 주변에 설계되는 날씨 또는 시간
• 명명된 메커니즘을 사용한 재료 변환
• 동기 부여된 삭제로 사용되는 전경 요소입니다.

마지막 프레임에서 각도, 포즈, 조명이 명확하게 변경된 경우 "모든 것이 정확히 동일하게 유지됩니다"라고 쓰지 마십시오. 그것은 불가능한 지시를 만들어낸다. 인식을 보호하는 3~4개의 불변성을 명명한 다음 변경 사항을 솔직하게 설명하세요.

카피 준비 프롬프트: 제품 공개

제품 전환은 스펙타클보다 기하학이 더 중요할 때 작동합니다. 읽기 쉬운 동작과 보수적인 카메라 움직임을 사용하세요.

닫힌 무선 이어버드 케이스의 정확한 제공된 히어로 프레임부터 시작하세요. 케이스가 석재 받침대에 고정되어 있는 동안 뚜껑은 연속적인 경첩 동작으로 들어 올려집니다. 부드러운 빛의 띠가 왼쪽에서 오른쪽으로 이동하며 모양, 마감, 색상이 변하지 않은 채 이어버드를 드러냅니다. 한 번의 느린 카메라 푸시 기능을 사용하세요. 궤도도 없고 절단도 없습니다. 받침대, 제품 비율, 솔기 선, 배경 그라데이션, 라벨 없는 표면을 유지합니다. 마지막 순간에 뚜껑 열기를 마치고 제공된 마지막 프레임 구성에 정확히 들어맞습니다.

뚜껑이 녹으면 경첩과 재료를 잠그세요. 케이스가 미끄러지면 베이스가 고정된 상태로 유지된다고 명시하세요. 카메라가 극적인 궤도를 만들어낸다면 '동적'과 같은 형용사를 제거하고 한 번의 명시적인 푸시를 유지하세요.

복사 준비 프롬프트: 문자 재배치 및 표현

시청자는 신원 표류를 즉시 알아차리기 때문에 캐릭터 엔드포인트는 민감합니다. 일련의 몸짓보다는 하나의 신체 동작과 하나의 표정 변화를 요구하십시오.

같은 여성이 출입구에서 창문 쪽으로 직접적인 길을 따라 걸어가더니 즉시 첫 걸음을 내디뎠다. 차콜 코트와 짧은 검은 머리, 얼굴, 키, 자연스러운 신체 비율은 변함이 없다. 카메라는 안정적인 50mm 모양과 확대/축소 없이 가슴 높이에서 옆으로 추적합니다. 마지막 지점에 이르자 그녀는 빛을 향해 고개를 돌리고 중립적인 표정에서 절제된 미소로 변화한다. 마지막 비트 동안 움직임을 느리게 하고 컷 없이 제공된 마지막 프레임 포즈와 프레이밍을 일치시킵니다.

얼굴이 바뀌면 먼저 몸의 움직임을 단순화하세요. 옷이 떠다니는 경우 읽기 쉬운 실루엣이 포함된 깔끔한 참조 자료를 사용하세요. 끝점은 클로즈업이지만 개구부가 넓은 경우 동작을 두 개의 샷으로 분할하거나 중간 크기의 중간 이미지를 만듭니다.

복사 준비 프롬프트: 장면 드리프트 없이 시간 이동

낮에서 밤으로의 전환으로 인해 실수로 전체 위치가 재구축될 수 있습니다. 건축물을 고정시키고 빛의 변화 순서에 이름을 지정하세요.

옥상 카페, 가구 배치, 스카이라인 기하학, 식물, 고정 카메라 위치를 동일하게 유지하세요. 시간은 늦은 오후부터 블루아워까지 계속 진행됩니다. 햇빛이 부드러워지고, 창문에 반사되는 시원한 느낌이 들고, 실용적인 테이블 조명이 차례로 켜지고, 구름이 부자연스럽게 달리지 않고 하늘이 깊어집니다. 사람들은 앉아서 작은 움직임만을 합니다. 건물을 추가하거나 테이블을 이동하거나 렌즈를 바꾸지 마세요. 제공된 블루 아워 프레임에서 끝나고 마지막 비트에 대한 최종 조명 상태를 유지합니다.

이 프롬프트는 조명과 작은 인간 움직임을 허용하지만 세트를 불변으로 취급합니다. 스카이라인이 변형되는 경우 시간 변경을 줄이거나 지나가는 전경 개체로 전환을 가립니다.

복사 준비 프롬프트: 동기 부여된 매치 전환

서로 다른 장면의 두 끝점에는 시각적 연결이 필요합니다. 일치 전환은 변경 메커니즘을 제공합니다.

제공된 야경의 둥근 주황색 가로등에서 시작하세요. 빛나는 원이 프레임 대부분을 채울 때까지 카메라가 천천히 앞으로 이동합니다. 원형 모양과 중앙 위치를 유지합니다. 최대 규모에서는 밝은 원을 제공된 사막 프레임의 둥근 주황색 태양으로 전환하는 동기를 부여하는 매치 전환으로 사용하세요. 새로운 풍경이 보이면 동일한 전방 카메라 추진력을 계속 유지하십시오. 액체 변형, 관련 없는 개체, 추가 절단 또는 모션 방향 변경을 피하십시오. 마지막 프레임의 지평선에 자리를 잡고 잠시 기다리세요.

공유된 모양과 방향에 편집 내용이 전달됩니다. 그것들이 없으면 "도시에서 사막으로의 전환"은 중간을 제약 없이 남겨두고 임의적인 변형을 불러옵니다.

'좋아 보인다' 대신 4점 리뷰를 사용하세요.

오프닝, 얼리 모션, 미드포인트, 도착의 네 가지 위치에서 결과를 검토합니다. 인상이 아닌 관찰을 기록하십시오.

실험 로그를 사용하세요.

03을 실행
고정된 상태로 유지됨: 모델, 기간, 가로세로 비율, 이미지 2개, 사용 가능한 경우 시드
변경됨: "영화적 움직임"을 "가슴 높이에서 오른쪽으로 느린 트랙 하나"로 대체했습니다.
관찰됨: 신원 보유; 카메라가 개선되었습니다. 최종 손 위치는 아직 늦음
다음 변경 사항: 턴을 더 일찍 종료하고 마지막 순간을 손 위치로 예약합니다.

이렇게 하면 프롬프트 편집이 무작위로 진행되는 것을 방지할 수 있습니다. 모델, 지속 시간, 이미지, 카메라, 문구를 함께 변경하면 더 나은 결과라도 배우는 것이 거의 없습니다.

단어를 더 추가하기 전에 실패를 진단하세요

클립이 첫 번째 프레임에 멈춰 있습니다.

명확한 초기 동사를 사용하세요. 끝점이 거의 동일한 경우 끝점 간의 시각적 차이를 늘립니다. 카메라나 보조 개체가 동작을 제공하지 않는 한 "고요한", "차분한" 및 "정적인" 언어를 제거하세요.

중간점이 변형으로 변합니다.

물리적 메커니즘이나 경로의 이름을 지정하세요. 동시 변경을 줄입니다. 사람은 옷을 갈아입고, 방을 건너고, 카메라를 돌리고, 한 번의 짧은 전환으로 깔끔하게 새 계절에 들어갈 수 없습니다.

주체가 신분을 변경합니다

작은 ID 블록을 잠그고 동일한 소스에서 만들어진 엔드포인트를 사용하세요. 모순되는 얼굴 각도, 연령 단서, 머리 길이 또는 의상 세부 사항을 피하세요. 클로즈업이 꼭 필요한 경우에는 별도의 샷으로 생성하세요.

카메라가 최종 구도를 무시합니다.

경쟁 동작을 제거합니다. 단일 트랙, 푸시, 틸트 또는 고정 샷은 궤도 + 줌 + 크레인보다 고정된 끝점과 조정하기가 더 쉽습니다. 이동이 감속되는 상태입니다.

엔딩이 너무 늦게 왔네요

중심 동작을 줄이고 도착 비트를 작성합니다. "마지막 순간에는 제공된 마지막 프레임 구성을 확정하고 유지합니다"는 다른 스타일 형용사를 추가하는 것보다 더 유용합니다.

위의 예시 비디오는 계획 시연일 뿐 하나의 프롬프트가 모든 모델에서 동일한 결과를 재현한다는 증거는 아닙니다. 이를 사용하여 모션 순서, 샷 연속성 및 엔딩에 의도적인 목적지가 있는지 여부를 검사합니다.

전환을 두 개의 클립으로 분할할 시기를 알아보세요

엔드포인트에 두 개 이상의 주요 이벤트가 필요한 경우 두 개의 클립을 사용하십시오. 분할해야 하는 좋은 이유는 다음과 같습니다.

• 피사체가 다른 위치로 이동하고 모양이 변경됩니다.
• 카메라는 넓은 시야에서 극단적인 클로즈업까지 이동해야 합니다.
• 제품이 변형된 후 별도의 작업을 수행합니다.
• 전환에는 의도적인 절단이 필요합니다.
• 첫 번째 시도는 정체성을 유지하지만 최종 기하학에 도달할 수 없습니다.
• 경로와 도착을 읽을 수 없을 정도로 기간이 너무 짧습니다.

양쪽과 속성을 공유하는 중간 이미지를 만듭니다. A를 B로 생성한 다음 B를 C로 생성합니다. 추가 단계에는 또 다른 생성 비용이 들지만 각 클립에 해결 가능한 작업이 제공되고 제어할 수 있는 편집 지점이 생성됩니다.

비트가 여러 개인 시퀀스의 경우 Seedance 2.0 멀티샷 스토리보드 워크플로을 사용하세요. 모델별 참조 계획과 긴 클립의 경우 Seedance 2.5 프롬프트 가이드을 사용하세요. 엔드포인트 제어와 멀티샷 방향은 서로 관련되어 있지만 하나의 오버로드된 프롬프트로 축소되어서는 안 됩니다.

생성 전 실용적인 체크리스트

크레딧을 사용하기 전에 다음을 확인하세요.

• 두 이미지 모두 동일한 종횡비를 사용합니다.
• 주제가 인식할 수 있을 만큼 동일합니다.
• 의도한 변경이 해당 기간 내에 도달 가능합니다.
• 프롬프트는 눈에 보이는 동작으로 시작됩니다.
• 하나의 연속 경로가 이미지를 연결합니다.
• 기본 카메라 이동은 한 번만 요청됩니다.
• 3~5개의 불변성은 연속성을 보호합니다.
• 도착에는 속도를 늦추고 기다릴 시간이 있습니다.
• 선택한 모드는 실제로 테스트 중인 입력을 지원합니다.
• 다음 개정판에서는 의미 있는 변수 하나만 변경됩니다.

그런 다음 C 댄스 AI을 열고 Seedance 2.5가 선택된 image-to-video 작업 공간을 시작한 다음 가장 작은 버전의 전환을 실행하세요. 끝점 쌍, 설정, 프롬프트 및 관찰된 오류를 저장합니다. 좋은 첫 번째 프레임과 마지막 프레임 워크플로는 마법의 문장을 발견하는 것보다 각 테스트가 다음 문장을 설명하도록 하는 데 더 중점을 둡니다.