젠주츠 인물 교체 사용법 | 모션 트랜스퍼, 오브젝트 스왑, 프롬프트까지

영상 속 움직임은 마음에 드는데 주인공만 바꾸고 싶을 때가 있어요. 젠주츠(Genjutsu)는 힉스필드가 제공하는 AI 영상 편집 기능으로, 원본 영상을 바탕으로 인물이나 사물, 장면을 바꾸는 데 쓰여요.

단순히 얼굴 사진을 붙이는 기능으로만 생각하면 모드를 잘못 고르기 쉬워요. 동작을 새 캐릭터에 옮기는 Motion Transfer와 특정 대상을 바꾸는 Object Swap을 구분하는 게 시작이에요. 이 글에서는 젠주츠 인물 교체 사용법, 준비할 영상과 사진, 프롬프트 예시와 결과 확인 방법을 정리했어요.

🎬 젠주츠란: 얼굴 합성을 넘어 영상 속 인물을 바꾸는 기능

젠주츠는 텍스트만 넣어 새 영상을 만드는 방식과 출발점이 달라요. 이미 있는 영상이 동작과 타이밍의 기준이 되고, 참조 이미지가 바꿀 대상의 외형을 알려줘요. 한국어로는 젠주츠, 겐주츠라는 표기가 함께 쓰이며 영문 이름은 Genjutsu예요.

힉스필드 공식 소개는 기존 영상의 인물, 의상, 장소, 사물을 바꾸는 활용을 보여줘요. 사람을 다른 캐릭터로 바꾸는 작업도 이 범위에 들어가요. 다만 모든 장면에서 원본의 모든 픽셀이 그대로 유지된다는 보장은 아니에요.

예를 들어 직접 촬영한 춤 영상의 동작을 가상의 캐릭터에게 옮기고 싶다면, 원하는 것은 얼굴 교체보다 넓은 변화예요. 얼굴뿐 아니라 체형과 옷차림까지 함께 정해야 해요. 반대로 완성된 광고 영상에서 손에 든 제품만 바꾸려면, 주변 인물과 배경을 최대한 남기는 편집이 필요해요.

이 글의 프롬프트와 체크리스트는 이런 작업을 준비하기 위한 작성 예시예요. 캐럿 에디터가 젠주츠로 생성해 성공률을 측정한 실험 결과는 아니에요. 설명용 도식도 실제 생성 전후 비교 이미지와 구분해서 봐주세요.

🔀 Motion Transfer와 Object Swap, 인물 교체에는 무엇을 고를까

모드 선택은 ‘사람을 바꾼다’는 말만으로 결정하기 어려워요. 원래 장면을 얼마나 남길지가 기준이에요. 힉스필드의 편집 가이드는 동작을 새 장면에 옮기는 작업과 특정 요소를 교체하는 작업을 나눠 설명해요.

① 모션 트랜스퍼: 원본의 동작으로 새 캐릭터를 움직여요

춤이나 연기를 새 주인공에게 옮기고, 필요하면 장면의 모습도 새로 구성하려는 경우에 살펴볼 모드예요. 원본을 동작 참고로 쓰되, 결과의 인물과 주변 모습은 참조 이미지와 지시에 맞춰 달라질 수 있어요. 원본 배경을 꼭 보존해야 하는 작업인지 먼저 판단해요.

② 오브젝트 스왑: 바꿀 대상을 좁혀서 지정해요

인물, 의상, 제품처럼 특정 대상을 교체하고 주변 장면을 남기려는 경우에 살펴볼 모드예요. ‘화면 왼쪽 인물의 재킷’처럼 대상과 범위를 구체적으로 적어두면 검수 기준도 분명해져요. 원하는 부분 외에 변화가 생기지 않았는지는 결과에서 따로 확인해야 해요.

③ 리스타일: 외형의 정체성보다 화풍을 바꾸는 작업이에요

리스타일 공식 문서는 프리셋으로 영상의 시각적 스타일을 선택하는 별도 작업을 안내해요. 인물을 특정 사진 속 사람으로 바꾸는 목적과 영상 전체를 애니메이션 풍으로 바꾸는 목적은 달라요. 인물 교체를 찾았다면 먼저 앞의 두 모드부터 비교해요.

한 사람이 춤추는 영상을 새로운 캐릭터의 공연으로 만들고 싶다면 모션 트랜스퍼를 검토해요. 같은 무대와 출연진을 남기면서 한 사람의 옷만 바꾸고 싶다면 오브젝트 스왑을 검토해요. 이름보다 ‘남길 요소’와 ‘바꿀 요소’를 먼저 써보면 선택하기 쉬워요.

🖼️ 시작 전에 준비할 원본 영상과 참조 사진

힉스필드 사용법 안내는 웹 작업 기준으로 영상 한 개, 4~30초 길이, 최대 30장의 참조 이미지, 최대 1080p 출력을 소개해요. 이 수치는 해당 안내의 기준이며, 실제 업로드 화면이나 다른 접속 경로에 같은 제한이 적용된다고 가정하면 안 돼요.

원본 영상은 ‘따라 할 동작’을 기준으로 골라요

첫 시도용으로는 한 사람이 화면에 분명하게 보이는 짧은 구간을 권해요. 팔을 들고 내리는 동작처럼 시작과 끝을 알아보기 쉬우면 원본과 결과를 비교하기도 편해요. 여러 컷이 빠르게 이어지는 영상은 어느 순간부터 문제가 생겼는지 찾아야 해서 검수할 일이 늘어나요.

얼굴이 가려지거나 몸이 프레임 밖으로 나가는 구간은 미리 표시해두세요. 이런 장면이 반드시 실패한다는 뜻은 아니에요. 나중에 얼굴과 팔다리, 가려진 뒤 다시 등장하는 모습을 집중해서 확인할 지점이라는 뜻이에요. 중요한 동작이 화면 밖에서 일어나면 결과만 보고 제대로 옮겨졌는지 판단하기도 어려워요.

참조 사진은 ‘어떤 모습으로 바꿀지’를 보여줘요

얼굴뿐 아니라 옷과 체형까지 바꿀 계획이면 그 모습이 드러난 이미지를 준비해요. 서로 다른 헤어스타일과 옷차림이 섞인 사진을 많이 넣기보다, 이번 영상에 사용할 외형을 먼저 정하는 편이 작업을 관리하기 좋아요. 허용된 최대 장수까지 채우는 것이 목표는 아니에요.

두 인물을 넣을 계획이라면 A와 B의 자료를 별도로 정리해요. 파일 이름이나 작업 메모에 ‘왼쪽 인물’, ‘오른쪽 인물’처럼 역할을 남겨두면 프롬프트를 수정할 때 혼동을 줄일 수 있어요. 이 명칭만으로 도구가 자동 매핑을 보장하는 것은 아니므로 화면의 참조 연결 방식도 확인해요.

게시할 수 있는 자료인지 먼저 확인해요

직접 만든 캐릭터와 촬영 영상, 사용 허락을 받은 자료로 시작하세요. 다른 사람의 얼굴을 넣는 경우에는 당사자의 동의를 확인하고, 완성본을 실제 촬영처럼 오해하게 만드는 설명을 피하는 것이 좋아요. 개인 테스트와 광고·공개 게시에 필요한 허락의 범위도 따로 확인해요.

🛠️ 젠주츠 사용법: 인물 교체 작업 순서

힉스필드에서의 기본 흐름은 모드 선택, 영상 업로드, 참조 설정, 생성, 결과 비교예요. 버튼 위치와 제공 옵션은 바뀔 수 있어요. 아래 순서는 특정 화면 배치를 외우기보다 각 단계에서 무엇을 결정할지에 초점을 맞췄어요.

1. 남길 요소와 바꿀 요소를 한 문장으로 적어요

‘춤 동작과 카메라 이동은 남기고 주인공을 가상의 성인 캐릭터로 바꾼다’처럼 적어요. ‘영상 전체를 멋지게 바꿔줘’보다 결과의 성공 여부를 판단하기 쉬워요. 표정이나 옷까지 바꾸려는지, 원래 모습으로 남기려는지도 함께 정해요.

2. 목적에 맞는 모드를 고르고 원본을 올려요

새 캐릭터의 장면을 구성할지, 기존 장면의 특정 요소만 교체할지에 따라 모드를 골라요. 준비한 원본을 올린 뒤 길이, 화면비, 시작·끝 지점이 의도한 구간인지 확인해요. 업로드한 영상의 앞뒤에 불필요한 장면이 있으면 먼저 편집한 사본을 사용하는 편이 좋아요.

3. 참조 이미지를 연결하고 짧은 지시를 넣어요

바꿔 넣을 인물이나 의상을 보여주는 이미지를 추가해요. 프리셋이 목적에 맞으면 활용할 수 있고, 더 구체적인 방향이 필요하면 짧은 설명을 덧붙여요. 이전 작업에서 남은 이미지나 인물 설명이 이번 자료와 충돌하지 않는지도 확인해요.

4. 해상도와 표시 비용을 확인하고 생성해요

최종 게시 해상도가 필요하지 않은 초안이라면, 제공되는 옵션 안에서 짧은 테스트를 먼저 해보는 방법이 있어요. 결과가 맞는지 보기 전에 긴 영상과 여러 변형을 한꺼번에 만들면 수정 비용을 예측하기 어려워져요. 생성 직전에 실제 화면에 표시되는 차감량을 확인해요.

5. 원본과 결과를 나란히 보고 내려받아요

첫 프레임의 얼굴만 보지 말고 원본과 같은 동작 구간을 비교해요. 고개를 돌리는 순간, 손이 얼굴 앞을 지나는 순간, 인물이 다른 대상과 겹치는 순간을 확인해요. 최종 파일에서는 재생 길이와 해상도, 소리 유무까지 점검한 뒤 편집이나 게시로 넘어가요.

✍️ 인물 교체 프롬프트 예시

아래 문장은 직접 수정해서 쓰는 작성 예시예요. 실제 젠주츠 생성으로 검증된 성공 프롬프트는 아니며, 참조 이미지 연결 방식과 선택한 모드에 맞춰 조정해야 해요. 예시의 핵심은 바꿀 대상과 남길 요소를 분리하는 것이에요.

춤 영상의 주인공을 가상 캐릭터로 바꾸는 예시

원본 영상의 중심 인물을 첨부한 가상의 성인 캐릭터로 바꿔줘. 원본의 춤 동작, 동작 순서, 타이밍과 카메라 이동을 따라가게 해줘. 캐릭터의 얼굴, 헤어스타일과 의상은 첨부 이미지의 설정을 유지해줘. 새로운 인물이나 자막은 추가하지 마.

참조 이미지의 옷까지 사용할지 원본 의상을 남길지 먼저 정해요. 두 조건을 동시에 적으면 요구가 충돌해요. 배경을 원본과 같게 남기는 것이 필수라면, 결과가 달라져도 괜찮은 모션 트랜스퍼 작업인지부터 다시 검토해요.

같은 장면에서 한 인물의 의상만 바꾸는 예시

화면 왼쪽에 있는 성인 인물의 재킷만 첨부한 파란색 재킷으로 교체해줘. 인물의 얼굴, 헤어스타일, 바지와 신발은 원본을 유지해줘. 주변 인물과 배경, 카메라 이동과 동작 타이밍은 바꾸지 마.

‘옷만 바꾼다’는 작업에서 얼굴까지 새 참조로 바꾸라고 적지 않아요. 같은 영상에서 얼굴 교체와 의상 교체를 각각 비교하려면 작업을 나눠 저장해두세요. 어느 요청 때문에 결과가 달라졌는지 확인하기 쉬워져요.

제품을 든 인물의 소품만 바꾸는 예시

중앙 인물이 손에 들고 있는 병만 첨부한 제품 병으로 교체해줘. 병을 잡은 손의 동작과 제품의 화면 속 위치를 따라가게 해줘. 인물의 얼굴과 의상, 배경은 유지해줘. 제품이 손과 겹치는 순간에도 형태가 이어지게 해줘.

병의 로고와 작은 글씨까지 정확해야 하는 광고라면, 생성된 영상에서 해당 부분을 확대해서 확인해요. 프롬프트에 ‘정확하게’라고 적은 사실이 정확성을 보증하지는 않아요. 읽어야 하는 제품명은 별도 자막이나 후편집으로 표현하는 방법도 함께 검토해요.

🔍 결과가 어색할 때 확인할 지점

아래 항목은 편집 결과를 비교하기 위한 체크리스트예요. 젠주츠에서 각 오류가 얼마나 자주 발생하는지 측정한 통계가 아니에요. 이상이 있는 지점을 시간으로 기록해두면 재시도할 때 같은 기준으로 비교할 수 있어요.

얼굴은 맞지만 몸이나 옷이 다른 경우

참조 자료가 얼굴만 보여주는지, 프롬프트에 체형과 의상 기준이 있는지 확인해요. 원본 의상을 남길지 새 의상을 입힐지도 다시 읽어봐요. 한 번에 여러 조건을 바꾸기보다 가장 중요한 외형부터 정하고, 수정 전후 파일을 다른 이름으로 저장해요.

다른 사람까지 바뀌거나 교체 대상이 섞이는 경우

인물이 여러 명이면 누구를 바꿀지 설명이 모호하지 않은지 확인해요. 화면 위치와 의상 등 식별할 수 있는 단서를 적고, 참조 이미지가 올바른 역할에 연결됐는지 살펴봐요. 여러 명을 한 번에 바꿔야 한다면 한 사람으로 만든 테스트와 비교할 수 있도록 재료를 따로 준비해요.

배경이나 원하지 않은 요소까지 달라진 경우

선택한 모드가 장면을 새로 구성하는 작업인지 확인해요. 배경 보존이 중요한데 전체 장면 변화까지 지시했다면 요청부터 좁혀야 해요. 수정할 요소와 유지할 요소를 별도 문장으로 적고, 원본의 어느 구간에서 차이가 생겼는지 나란히 재생해봐요.

동작 자체를 바꾸고 싶은 경우

원본과 다른 안무나 새로운 접촉 동작이 필요하면, 인물 교체만으로 해결하려고 하기보다 새 원본을 준비하는 편이 목적에 맞아요. 힉스필드도 부분 편집의 한계로 동작·장면 구조 변경과 원본에 없던 상호작용을 들어요. ‘같은 동작으로 다른 인물’을 만드는 작업과 구분해요.

💳 젠주츠 무료 사용과 가격을 확인하는 방법

젠주츠의 무료 제공 횟수를 모든 계정에 적용되는 상시 조건으로 보기는 어려워요. 가입 시점의 이벤트나 플랜 안내와 현재 이용 화면이 다를 수 있어요. 무료 이용을 목적으로 시작한다면 생성 전에 본인 계정에 적용되는 조건을 먼저 확인해요.

힉스필드 공식 소개에는 길이와 해상도에 따른 과거 가격 예시가 있지만, 그 수치를 현재 결제 금액으로 단정하면 안 돼요. 공식 요금제 페이지와 실제 생성 화면을 함께 보고, 선택한 모드와 길이, 해상도에 표시되는 비용을 기준으로 판단해요.

API 안내와 웹 구독 플랜도 나눠서 봐야 해요. API의 초당 가격을 웹 크레딧과 그대로 비교하거나, 웹에서 보이는 혜택이 다른 접속 경로에도 자동 적용된다고 생각하지 않는 편이 좋아요. 비교할 때는 같은 길이와 같은 해상도, 같은 접속 경로인지부터 맞춰요.

작업 예산을 잡을 때는 최종 영상 한 개만 계산하지 말고 초안과 수정 시도도 별도로 기록해요. 영상 길이, 모드, 해상도, 화면에 표시된 비용, 결과에서 고칠 점을 남겨두면 다음 시도의 범위를 정하기 편해요. 캐럿 젠주츠의 가격과 크레딧 조건은 아직 공개 안내 전이에요.

💎 캐럿 젠주츠는 출시 준비 중이에요

캐럿은 젠주츠를 곧 선보이기 위해 테스트하고 있어요. 2026년 10월 14일 기준 아직 사용할 수 있는 정식 기능은 아니에요. 힉스필드에서 공개한 기능과 캐럿에서 제공할 화면, 지원 범위, 이용 조건이 모두 같다고 가정하지 말아주세요.

출시 전에는 바꿀 인물의 참조 이미지와 사용할 원본 영상을 준비해둘 수 있어요. 어떤 동작을 남길지, 얼굴만 바꿀지 의상까지 바꿀지 미리 정해두면 실제 기능이 공개됐을 때 작업을 시작하기 편해요. 확정된 출시일이나 무료 제공 횟수는 이 글에서 약속하지 않아요.

캐럿의 공개 기능은 캐럿 공식 서비스에서 확인할 수 있어요. 현재 이 페이지의 만들기 버튼은 캐럿의 일반 제작 화면으로 연결되며, 젠주츠 인물 교체를 바로 실행하는 버튼은 아니에요. 출시 전에는 가상 캐릭터의 참조 이미지 준비 용도로 활용할 수 있어요.

❓ 젠주츠 사용법 자주 묻는 질문

젠주츠와 겐주츠는 같은 기능인가요?

이 글에서는 모두 힉스필드 Genjutsu를 가리켜요. 한국어 표기가 달라도 영문 이름과 제공 서비스를 함께 확인하면 혼동을 줄일 수 있어요. 캐럿 젠주츠는 별도로 출시를 준비 중인 이용 경로예요.

사진 한 장만 있으면 영상을 만들 수 있나요?

이 글에서 설명하는 인물 교체 작업에는 움직임의 기준이 될 원본 영상도 필요해요. 사진은 바꿀 외형을 알려주는 참조예요. 사진만 넣고 동작을 새로 만드는 일반적인 이미지 투 비디오 작업과 준비물이 달라요.

프롬프트를 길게 써야 잘 나오나요?

길이 자체가 목표는 아니에요. 공식 안내는 프리셋이나 짧은 설명으로 작업하는 방식을 소개해요. 먼저 교체할 대상과 유지할 요소를 분명히 쓰고, 결과에서 부족한 부분이 보이면 해당 조건을 보완해요.

캐럿에서 지금 젠주츠를 쓸 수 있나요?

아직은 아니에요. 2026년 10월 14일 기준 캐럿 젠주츠는 출시 전 테스트 중이에요. 현재 공개된 힉스필드 사용법과 캐럿의 출시 준비 소식을 구분해서 확인해 주세요.