Kling 2.6 모션 컨트롤은 Kuaishou가 개발한 특수 다중모달 모델로, 참조 동영상에서 캐릭터 이미지로 정밀한 모션 전송이 가능합니다. 참조 이미지(귀하의 캐릭터)와 모션 참조 동영상(동작)을 결합하면 AI가 동영상의 움직임, 표정, 템포를 정적 캐릭터에 적용하면서도 캐릭터의 정체성을 유지합니다.
텍스트 프롬프트로부터 모션을 추측하는 일반적인 이미지-비디오 생성과 달리, 모션 컨트롤은 참조 동영상을 움직임의 청사진으로 사용합니다. 이 모델은 디지털 인형극장 역할을 하며, 참조 동영상에서 안무를 추출해 영화 수준의 정확성으로 캐릭터에 적용합니다.
제품 주요 특징
- 복잡한 모션 처리: 춤 동작, 무술, 운동 동작 등 복잡한 시퀀스를 실행해도 캐릭터의 일관성을 잃지 않습니다. 모델은 무게 이동과 관성을 이해해 현실적인 물리적 효과를 구현합니다.
- 정밀한 손과 손가락 표현: 전통적으로 AI 비디오는 손 부분이 취약했습니다. 이 기능은 특히 손가락의 움직임과 손의 표현력을 개선해 실제 영상을 모방하며, 발표 및 시연에 이상적입니다.
- 장면 및 환경 유연성: 텍스트 프롬프트를 사용해 캐릭터가 참조된 모션을 유지한 채 환경을 변경할 수 있습니다. 참조 동영상의 배경에 국한되지 않습니다.
- 고급 카메라 및 원근 모드: 카메라가 참조를 해석하는 방식을 세밀하게 조정할 수 있으며, 각기 다른 방향 모드를 제공합니다.
- 30초 원샷 지원: 단 한 번의 생성으로 최대 30초간 연속적인 동작을 생성해 서사적 장면에서 중단 없는 캐릭터 움직임을 구현합니다.
캐릭터 방향 모드
character_orientation 매개변수는 모델이 공간 정보를 해석하고 출력 지속시간을 제한하는 방식을 결정합니다:
| 모드 | 설명 | 최대 지속시간 |
|---|
video | 출력 캐릭터 방향이 참조 동영상과 일치합니다. 춤 시퀀스나 복잡한 안무 같은 전신 동작에 가장 적합합니다. | 30초 |
image | 출력 캐릭터 방향이 참조 이미지와 일치합니다. 패닝, 틸트, 트래킹 샷과 같은 카메라 움직임이 포함된 초상 애니메이션에 가장 적합합니다. | 10초 |
모델 레벨
| 레벨 | 해상도 | 적합한 용도 |
|---|
| Standard | 720p | 간단한 애니메이션, 소셜미디어 콘텐츠, 밈, 빠른 테스트. 더 빠르고 크레딧 효율적입니다. |
| Pro | 1080p | 복잡한 안무, 정교한 손 움직임, 전문 마케팅 자산, 방송급 콘텐츠. |
To use the Partner Nodes, you need to ensure that you are logged in properly and using a permitted network environment. Please refer to the Partner Nodes Overview section of the documentation to understand the specific requirements for using the Partner Nodes. Make sure your ComfyUI is updated.Workflows in this guide can be found in the Workflow Templates.
If you can’t find them in the template, your ComfyUI may be outdated. (Desktop version’s update will delay sometime)If nodes are missing when loading a workflow, possible reasons:
- You are not using the latest ComfyUI version (Nightly version)
- Some nodes failed to import at startup
- The Desktop is base on ComfyUI stable release, it will auto-update when there is a new Desktop stable release available.
- Cloud will update after ComfyUI stable release.
So, if you find any core node missing in this document, it might be because the new core nodes have not yet been released in the latest stable version. Please wait for the next stable release.Kling 2.6 모션 컨트롤 작업 흐름
워크플로우 파일을 JSON 형식으로 다운로드하세요
입력 요구사항
- 이미지 형식: JPG, PNG, WEBP, GIF, AVIF (최대 10MB)
- 비디오 형식: MP4, MOV, WEBM, M4V, GIF (최대 100MB)
- 비디오 지속시간: 방향 모드에 따라 3~30초
- 최소 해상도: 가로세로 720px
- 피사체 시야: 캐릭터의 머리, 어깨, 몸통이 명확히 보여야 합니다.
더 나은 결과를 위한 팁
- 종횡비 맞추기: 캐릭터 이미지와 참조 동영상의 종횡비가 비슷하도록 맞춰주세요(예: 둘 다 16:9 또는 둘 다 9:16). 어색한 늘림이나 잘림을 방지합니다.
- 깔끔한 배경: 참조 동영상은 단순하거나 고정된 배경을 사용해야 모션 추출이 더 잘됩니다. 배우의 실루엣이 뚜렷한 고대비 영상이 가장 좋습니다.
- 명확한 캐릭터 각도: 참조 동영상이 회전을 보인다면 3D 스타일 캐릭터나 회전을 더 잘 처리하는 사실적인 사진을 사용하세요. 평면 2D 만화는 뒷모습을 처리하기 어려울 수 있습니다.
- 팔다리가 보이도록: 캐릭터의 팔다리가 원본 이미지에서 보이도록 해주세요. 만약 캐릭터가 주머니에 손을 넣었지만 동작에서는 손을 흔들어야 한다면 AI가 손을 착각해 종종 아티팩트가 생길 수 있습니다.
- 여유 공간 남기기: 피사체 주변에 여백을 남겨주세요. 캐릭터가 춤을 추거나 팔을 크게 움직인다면 프레임 내부에 공간이 있어야 클리핑을 피할 수 있습니다.
- 프레이밍 정렬: 이미지와 참조 동영상의 프레이밍을 맞춰주세요. 얼굴 애니메이션에는 클로즈업 참조를, 걷기·춤 시퀀스에는 전신 참조를 사용하세요.
