Vidu Q4 image to video: 사진 한 장을 소리와 대사까지 넣어 움직이기

이미지를 동영상으로 만드는 모델 대부분은 무음 클립을 주고 소리는 당신에게 맡깁니다. Vidu Q4 Preview image to video는 다릅니다. 이미지 한 장과 프롬프트 하나를 받아, 기본 설정 그대로 움직임과 함께 오디오도 씁니다. 모델 페이지의 예시 중 하나에서는 테니스 선수가 경기 후 카메라를 보며 한마디를 하고, 입 모양이 말과 맞아떨어집니다. 이것이 이 모델을 고르는 이유입니다. 풍경 위로 구름이 흘러가는 몇 초만 필요하다면 모델 페이지에 있는 더 저렴한 이웃 모델로도 충분합니다.

넣어 주는 것

• 이미지 한 장(필수). 이것이 첫 프레임이 되므로 구도, 빛, 얼굴은 여기서 정해집니다.
• 프롬프트(필수). 이미지에 이미 있는 것이 아니라 다음에 일어날 일을 쓰세요.
• 해상도. 가벼운 시험용 크기부터 큰 최종 크기까지 이어지는 목록이며, 기본값은 적당한 중간입니다.
• 길이. 초 단위 슬라이더입니다. 기본값은 짧고, 최댓값이면 한 문장의 대사와 반응까지 담깁니다.
• Generate audio. 기본적으로 켜져 있습니다. 클립에 직접 고른 음악을 깔 거라면 끄세요.
• Advanced: 프롬프트 확장(기본 꺼짐)과 시드.

빛나는 지점

말하는 인물 사진, 그리고 소리의 출처가 있는 작은 장면입니다. 한마디 하는 캐릭터, 울리기 시작하는 주전자, 들리는 창가의 빗소리. 소리와 영상이 같은 생성에서 나오기 때문에 타이밍이 잘 맞습니다. 문이 닫히는 소리가 날 때 문이 닫힙니다. 피사체가 크게 잡힌 깨끗하고 밝은 시작 프레임을 주면, 얼굴과 옷이 원본에서 벗어나지 않고 가깝게 유지됩니다.

시작용 프롬프트 세 개

어휘는 다른 이미지 투 비디오 모델과 같습니다. 카메라 움직임 하나, 피사체 동작 하나, 분위기 하나. 모션 프롬프트 용어집에 잘 버티는 단어와 그림을 녹여 버리는 단어가 정리되어 있습니다. 여기서 새로운 것은 소리 칸입니다. 원하는 소리를 이름으로 부르고, 한 번만 부르세요.

활용 팁

• 프롬프트를 공들여 썼다면 프롬프트 확장은 꺼 두세요. 짧은 프롬프트를 길게 고쳐 쓰는 기능이라 한 단어짜리 아이디어에는 도움이 되지만 정확한 프롬프트, 특히 글자 그대로 듣고 싶은 대사에는 해가 됩니다.
• 조정하는 동안 시드를 고정하세요. 프롬프트를 바꾸기 전에 직접 시드 값을 정해 두면 매번 바뀌는 것은 그 수정 하나뿐입니다. 시드 설명에서 이것이 생성 횟수를 아끼는 이유를 볼 수 있습니다.
• 길이는 동작에 맞추세요. 눈 깜빡임이나 한 모금에는 짧게, 대사에는 길게. 긴 클립에 작은 동작만 있으면 나머지를 요청하지 않은 움직임으로 채웁니다.

솔직한 한계

프리뷰 모델이고, 그것이 말에서 드러납니다. 또렷한 짧은 문장은 잘 나오지만, 긴 독백, 이름, 소리 내어 읽는 숫자에서는 입술과 말이 어긋나기 시작합니다. 대사는 클립당 한 문장으로 하고, 긴 말은 앞 클립의 마지막 프레임에서 시작하는 여러 클립으로 나누세요. 그리고 시작 프레임이 여전히 결정적입니다. 이미지 속 손과 작은 글씨는 움직인다고 나아지지 않으니 먼저 고쳐 두세요(프레임 준비는 사진을 동영상으로 만드는 단계별 가이드에 있습니다).