AI로 영상 배경 지우는 법｜그린스크린 없이 인물만 남기고 배경 바꾸기
예전에는 영상 속 사람만 남기고 배경을 바꾸려면 촬영할 때부터 초록색 그린스크린을 설치하거나 편집 프로그램에서 인물 외곽을 직접 따야 했습니다. 하지만 최근에는 AI가 영상 속 사람·동물·제품 같은 주요 피사체를 자동으로 찾아 배경을 제거하는 방식을 사용할 수 있습니다...
AI 도구를 실제 업무와 일상에서 더 쉽게 활용할 수 있도록 핵심 방법과 예시를 중심으로 정리했습니다.
본문
예전에는 영상 속 사람만 남기고 배경을 바꾸려면 촬영할 때부터 초록색 그린스크린을 설치하거나 편집 프로그램에서 인물 외곽을 직접 따야 했습니다. 하지만 최근에는 AI가 영상 속 사람·동물·제품 같은 주요 피사체를 자동으로 찾아 배경을 제거하는 방식을 사용할 수 있습니다.
이를 활용하면 방에서 촬영한 영상을 스튜디오처럼 바꾸거나, AI 캐릭터 뒤에 새로운 풍경을 넣거나, 제품 영상의 배경만 교체해 광고 영상으로 다시 사용할 수도 있습니다. 이번 글에서는 AI 영상 배경 제거부터 자연스러운 새 배경 합성, 머리카락·손 가장자리 오류 줄이기, 16:9 영상을 9:16 쇼츠로 바꾸는 방법까지 단계별로 정리하겠습니다.
이 글에서 다루는 내용
✓ 그린스크린 없이 영상 배경을 지우는 원리
✓ AI가 인물을 잘 분리하도록 촬영하는 방법
✓ 머리카락·손·빠른 움직임 오류 줄이는 방법
✓ 제거한 배경에 새로운 공간을 자연스럽게 넣는 방법
✓ 가로 영상을 9:16 쇼츠로 자동 재구성하는 방법
✓ AI 배경 제거 결과를 확인할 때 주의할 부분
✓ 바로 활용할 수 있는 배경 교체 프롬프트
목차
1. AI 영상 배경 제거는 어떻게 작동할까?
2. 배경 제거가 잘되는 원본 영상 준비하기
3. 머리카락·손·움직임 오류 줄이는 방법
4. 새로운 배경을 자연스럽게 합성하는 방법
5. 가로 영상을 쇼츠용 9:16으로 바꾸기
6. AI 영상 배경 제거 시 주의할 점
7. 무료 배경 교체 프롬프트 모음
1. AI 영상 배경 제거는 어떻게 작동할까?
영상 배경 제거는 사진 배경 지우기와 비슷해 보이지만 조금 더 어렵습니다.
사진은 한 장만 분리하면 되지만 영상은 수많은 프레임에서 사람이 움직여도 계속 같은 대상을 찾아야 하기 때문입니다.
1단계 ― 영상에서 주요 인물·제품 찾기
2단계 ― 피사체 외곽과 배경 구분
3단계 ― 사람이 움직여도 계속 추적
4단계 ― 기존 배경 제거
5단계 ― 새로운 사진·영상·색상 배경과 합성
어떤 영상에 사용할 수 있을까?
✓ 방에서 촬영한 유튜브 진행자 영상
✓ 온라인 강의·설명 영상
✓ 쇼츠용 인물 영상
✓ AI 캐릭터 영상
✓ 제품 소개 영상
✓ 춤·퍼포먼스 영상
✓ 게임·뉴스형 진행자 영상
✓ 여러 장소를 오가는 가상 스튜디오 콘텐츠
그린스크린이 완전히 필요 없어질까?
간단한 쇼츠나 일반 콘텐츠에서는 AI 자동 제거만으로 충분한 경우가 많습니다.
다만 머리카락이 많이 날리거나 반투명한 옷, 빠른 춤, 모션 블러가 심한 전문 촬영에서는 그린스크린이나 정밀 마스킹이 더 안정적일 수 있습니다. AI 배경 제거는 촬영 환경이 좋을수록 결과도 좋아집니다.
2. 배경 제거가 잘되는 원본 영상 준비하기
AI 성능이 좋아도 원본 영상에서 사람과 배경의 구분이 어려우면 가장자리가 흔들릴 수 있습니다.
인물과 배경의 색을 다르게
좋은 예
밝은 벽 앞에서 어두운 옷을 입은 사람
어려운 예
검은 벽 앞에서 검은 옷을 입고 머리카락까지 어두운 사람
그린스크린까지 설치하지 않더라도 피사체와 배경 사이에 어느 정도 색상·밝기 차이가 있으면 분리하기 편합니다.
조명을 고르게 비추기
얼굴 한쪽이나 옷 일부가 지나치게 어두우면 AI가 그 부분을 배경과 섞어서 판단할 수 있습니다.
가능하면 얼굴과 몸의 윤곽이 모두 확인되도록 촬영하고 배경보다 인물이 조금 더 밝게 보이게 하는 것이 좋습니다.
카메라 흔들림을 줄이기
손으로 카메라를 빠르게 흔들면서 인물도 동시에 빠르게 움직이면 AI가 처리해야 할 변화가 많아집니다.
처음 테스트할 때는 카메라를 고정하고 사람이 자연스럽게 움직이는 영상부터 사용하는 편이 좋습니다.
첫 프레임도 중요합니다
일부 AI 배경 제거 도구는 클립의 첫 부분에서 주요 피사체를 확인하고 이후 프레임을 추적합니다.
따라서 시작부터 사람이 다른 물체에 가려져 있거나 프레임 밖에 있다가 갑자기 등장하는 영상보다 처음부터 피사체가 명확하게 보이는 클립이 좋습니다.
촬영 전 체크
인물 전체가 배경과 구분되는가?
얼굴과 머리카락이 충분히 밝은가?
팔과 손이 다른 물체에 가려지지 않는가?
촬영 시작부터 사람이 제대로 보이는가?
카메라 흔들림이 지나치게 크지 않은가?
빠른 동작 때문에 심한 잔상이 생기지 않는가?
3. 머리카락·손·움직임 오류 줄이는 방법
영상 배경 제거 결과를 보면 몸통은 잘 분리되는데 머리카락이나 손 주변이 흔들리는 경우가 많습니다.
머리카락 가장자리 확인하기
✓ 가는 머리카락이 중간에 사라지는지
✓ 배경 색이 머리 주변에 테두리처럼 남는지
✓ 고개를 돌릴 때 머리 모양이 순간적으로 잘리는지
✓ 밝은 머리카락과 밝은 배경이 서로 섞이지 않는지
손을 얼굴 앞으로 빠르게 움직이는 장면
손이 얼굴 앞을 지나가거나 손가락을 빠르게 움직이면 짧은 순간 배경이나 얼굴과 합쳐질 수 있습니다.
중요한 영상이라면 그 구간만 별도로 잘라 처리하거나 손동작이 조금 느린 다른 테이크를 사용하는 것도 방법입니다.
빠른 춤 영상은 짧은 구간부터
처음 테스트
5~10초 정도의 비교적 단순한 전신 동작
난도가 높은 영상
빠른 회전, 머리카락 날림, 점프, 팔·다리 교차가 계속되는 안무
클립을 먼저 자르고 필요한 부분만 처리하기
긴 영상 전체에 배경 제거를 적용하기 전에 실제로 사용할 구간을 먼저 정리하면 오류를 확인하기 편합니다.
특히 장면이 바뀌는 영상이라면 서로 다른 촬영 컷을 각각 처리한 뒤 마지막에 연결하는 방식이 좋습니다.
4. 새로운 배경을 자연스럽게 합성하는 방법
배경을 완벽하게 제거했더라도 새로운 공간과 인물의 조명·크기·카메라가 맞지 않으면 합성한 느낌이 강하게 납니다.
원본 영상의 카메라 높이와 맞추기
원본
사람을 눈높이에서 정면 촬영
새 배경
같은 눈높이의 정면 공간 이미지
사람은 정면인데 배경만 높은 곳에서 아래로 내려다보는 구도라면 실제 같은 공간에 있는 것처럼 보이기 어렵습니다.
빛의 방향도 맞추기
새 배경 생성 프롬프트
Create a realistic background for a person filmed at eye level.
Modern indoor studio.
Camera facing straight forward.
Natural human eye-level perspective.
Soft daylight enters from the left side of the scene.
The background lighting direction must match a subject illuminated from the left.
Leave a natural open space in the center for one standing person.
Do not place furniture directly behind the subject.
Realistic depth and perspective.
No people.
No text.
No logos.
바닥 그림자를 추가하기
사람 발 아래에 그림자가 전혀 없으면 배경 위에 떠 있는 스티커처럼 보일 수 있습니다.
전신 영상에서는 인물이 바닥과 만나는 지점에 자연스럽고 약한 접촉 그림자를 넣는 것이 중요합니다.
배경은 인물보다 조금 덜 선명하게
사람도 선명하고 멀리 있는 배경도 똑같이 날카로우면 합성처럼 느껴질 수 있습니다.
인물이 중심이라면 뒤쪽 공간에 적당한 거리감과 약한 아웃포커스를 넣어 시선을 인물에 집중시키는 방법도 좋습니다.
쇼츠용 가상 스튜디오 예시
9:16 정보 영상 배경
9:16 vertical modern creator studio background.
Clean realistic interior with subtle depth.
A simple desk and soft practical lights remain far behind the presenter.
Keep the central area clean and uncluttered for one upper-body presenter.
Camera at natural eye level.
Soft neutral lighting.
Slight background blur.
Professional but comfortable atmosphere.
No people.
No readable text.
No logos.
No distracting screens.
5. 가로 영상을 쇼츠용 9:16으로 바꾸기
배경을 지운 뒤에는 기존 16:9 영상을 유튜브 쇼츠·릴스·틱톡용 9:16으로 다시 활용할 수도 있습니다.
단순히 가운데만 잘라내지 않기
가로 영상을 세로 화면으로 자르면 좌우 영역이 많이 사라집니다. 사람이 계속 중앙에 있다면 문제가 적지만 화면 안을 이동하는 영상은 사람이 잘릴 수 있습니다.
일반 크롭
가로 화면의 중앙 부분만 고정해서 잘라냄
자동 리프레임
주요 인물이 움직이면 세로 프레임도 함께 따라가며 위치를 조정
움직임 속도에 맞춰 추적 강도 조절하기
거의 움직이지 않는 인터뷰와 빠르게 움직이는 춤 영상은 같은 추적 속도를 사용할 필요가 없습니다.
✓ 인터뷰·설명 영상 → 느린 추적
✓ 일반 브이로그 → 보통 추적
✓ 빠른 움직임·스포츠 → 빠른 추적
배경을 새로 만들면 세로형에 더 잘 맞출 수도 있습니다
인물만 분리해두면 원래 가로 배경을 억지로 자르지 않고 처음부터 9:16용 새로운 세로 배경 위에 인물을 배치할 수 있습니다.
이 방식은 진행자 영상이나 제품 소개처럼 피사체가 한 명 또는 하나인 영상에서 특히 활용하기 좋습니다.
가로 영상 → 쇼츠 구성 요청
이 16:9 가로 영상을
9:16 유튜브 쇼츠용으로 다시 구성하려고 해.
주요 인물은 항상 화면 안에 유지하고
얼굴과 손이 잘리지 않게 해줘.
인물이 움직이는 방향에 따라
세로 프레임도 자연스럽게 따라가게 해줘.
자막을 넣을 아래쪽 공간도 확보하고
화면이 계속 좌우로 흔들리지 않도록
필요한 경우에만 프레임 위치를 이동해줘.
6. AI 영상 배경 제거 시 주의할 점
배경 제거 후 전체 영상을 다시 보기
첫 장면이 잘 분리됐다고 끝이 아닙니다. 영상 중간에 사람이 몸을 돌리거나 다른 물체와 겹치는 순간 오류가 생길 수 있습니다.
✓ 머리카락이 깜빡거리지는 않는지
✓ 팔 일부가 순간적으로 사라지지 않는지
✓ 옷과 비슷한 색의 배경이 남아 있지 않은지
✓ 손가락 사이가 이상하게 뚫리지 않는지
✓ 사람이 화면 밖으로 나갔다 들어올 때 정상적으로 다시 잡히는지
반사와 투명한 물체는 더 어렵습니다
투명 우산, 유리잔, 반투명 천, 거울처럼 뒤쪽 배경이 비쳐 보이는 물체는 완벽하게 분리하기 어려울 수 있습니다.
이런 물체가 중요한 장면에서는 자동 배경 제거 결과를 반드시 확대해서 확인하세요.
새 배경이 실제 장소라고 오해하게 만들지 않기
주의. 뉴스·사건·여행·인터뷰처럼 촬영 장소 자체가 사실 판단에 중요한 콘텐츠에서 실제로 가지 않은 장소를 AI로 합성했다면 시청자가 실제 촬영으로 오해하지 않도록 표현에 주의하세요. 현실적인 AI 합성은 사용하는 플랫폼의 합성 콘텐츠 표시 기준도 확인하는 것이 좋습니다.
다른 사람 영상의 배경만 바꿔도 내 영상이 되는 것은 아닙니다
배경을 제거하고 새로운 배경을 넣었다고 원본 영상의 권리가 사라지는 것은 아닙니다.
자신이 촬영했거나 사용할 권리가 있는 영상을 중심으로 작업하고 다른 사람의 영상·음악·이미지를 사용하는 경우 각각의 이용 조건을 확인해야 합니다.
다운로드 형식도 확인하기
도구마다 배경 제거된 영상의 저장 형식과 투명 배경 처리 방식이 다를 수 있습니다.
다른 편집 프로그램으로 옮겨 합성할 계획이라면 사용 중인 도구가 어떤 형식으로 내보내는지 먼저 확인하는 것이 좋습니다.
7. 무료 배경 교체 프롬프트 모음
프롬프트 1 ― 유튜브 진행자 스튜디오
정보 영상
Replace only the background.
Keep the presenter completely unchanged.
Create a modern YouTube creator studio behind the presenter.
Clean realistic interior.
Soft neutral lighting.
Subtle practical lights in the distance.
Slight background depth of field.
Match the original camera height and perspective.
Match the original light direction on the presenter.
Do not modify the person's face, hair, body, clothing or movement.
No text.
No logos.
프롬프트 2 ― 회사 사무실 배경
업무·강의 영상
Place the isolated presenter inside a realistic modern office.
Natural daylight from large windows.
Minimal desks and shelves in the distant background.
Professional but not luxurious.
Keep enough empty space around the presenter.
Match the subject's original eye-level camera perspective.
Add a soft realistic contact shadow where appropriate.
Do not alter the presenter.
No readable signs.
No logos.
프롬프트 3 ― 뉴스형 가상 스튜디오
뉴스·정보 콘텐츠
Create an original virtual information studio background.
Clean blue-gray architectural panels.
Soft illuminated lines.
Large abstract display surfaces in the distance without readable text.
Professional broadcast atmosphere.
Realistic depth and lighting.
Eye-level camera.
Keep the presenter as the clear main subject.
No existing broadcaster logos.
No channel branding.
No text.
프롬프트 4 ― 카페 배경
브이로그
Place the isolated person inside a warm quiet cafe interior.
Soft afternoon window light.
Natural wood tables.
Warm neutral colors.
Distant background softly blurred.
Keep the center area visually simple so the person remains the main focus.
Match the lighting direction and camera perspective of the original footage.
No other prominent people.
No readable menus.
No logos.
프롬프트 5 ― AI 음악 무대
음악·댄스 영상
Replace the background with an original performance stage.
Deep dark stage environment.
Moving blue and violet light beams in the distance.
Subtle atmospheric haze.
Abstract LED patterns only, no readable text.
Keep the performer completely unchanged.
Preserve all body movements and dance timing.
Match the stage floor position to the performer's feet.
Add realistic contact shadow.
No famous concert design.
No logos.
프롬프트 6 ― 제품 광고 배경
상품 영상
Keep the exact reference product unchanged.
Replace only the surrounding background.
Create a minimal premium studio environment.
Dark neutral backdrop.
Soft side light.
Subtle reflective surface beneath the product.
Maintain the original product shape, color, packaging and proportions.
Do not create new labels or features.
The product remains the visual focus.
No text.
No additional products.
프롬프트 7 ― 가상 여행 배경
창작용 여행 배경
Place the isolated fictional character in an original coastal landscape.
Wide ocean in the distance.
Rocky shoreline.
Soft golden-hour sunlight.
Gentle wind moving distant grass and water.
Match the character's original light direction and camera perspective.
Create realistic scale and depth.
Clearly fictional scenic environment.
Do not imitate a specific real tourist attraction.
No text.
No logos.
프롬프트 8 ― 16:9 영상을 9:16로 재구성
쇼츠 변환용
Reframe this horizontal video into a 9:16 vertical composition.
Track the main person throughout the entire clip.
Keep the face, hands and important actions inside the frame.
Use smooth reframing only when the subject actually moves.
Avoid unnecessary side-to-side camera movement.
Leave safe space near the bottom for subtitles.
Keep important visual information away from the extreme top and bottom edges.
프롬프트 9 ― 배경 후보 10개 만들기
아이디어 생성용
아래 영상의 인물은 그대로 유지하고
배경만 바꿔 사용할 수 있는 콘셉트 10개를 만들어줘.
영상 내용 : [입력]
영상 비율 : [9:16 또는 16:9]
영상 분위기 : [입력]
각 배경마다
장소
카메라 높이
조명 방향
색감
뒤쪽 소품
인물 뒤에 확보해야 할 빈 공간
을 정리해줘.
10개가 서로 다른 분위기가 되게 하고
인물보다 배경이 더 눈에 띄지 않도록 만들어줘.
프롬프트 10 ― 합성 결과 최종 검사
업로드 전 검수
배경을 제거하고 새 배경을 합성한 영상을 검토해줘.
다음 부분을 중점적으로 확인해줘.
머리카락 가장자리
손과 손가락
옷 가장자리
빠르게 움직이는 팔과 다리
발과 바닥 접촉
피사체 주변의 배경색 테두리
인물과 배경의 조명 방향
카메라 높이와 원근감
그림자
합성 티가 많이 나는 부분이 있다면
어떤 요소를 수정해야 하는지 구체적으로 알려줘.
영상 배경 제거에서 자주 하는 실수
✓ 인물과 같은 색의 복잡한 배경에서 촬영하는 경우
✓ 원본 조명이 너무 어두운 경우
✓ 빠르게 움직이는 긴 영상을 한 번에 처리하는 경우
✓ 머리카락 가장자리를 확인하지 않는 경우
✓ 인물 조명과 새 배경의 빛 방향이 반대인 경우
✓ 전신 영상인데 발 아래 그림자가 없는 경우
✓ 카메라 높이가 전혀 다른 배경을 사용하는 경우
✓ 가로 영상을 단순 중앙 크롭만 해 얼굴이 잘리는 경우
✓ 다른 사람 영상을 배경만 바꿔 재사용하는 경우
✓ 자동 처리 결과를 끝까지 확인하지 않고 바로 업로드하는 경우
초보자는 이 순서대로 시작해보세요
1단계 ― 카메라가 고정된 5~10초 영상 준비
2단계 ― AI로 주요 인물 배경 제거
3단계 ― 머리카락·손·발 가장자리 확인
4단계 ― 원본 카메라·조명과 맞는 배경 준비
5단계 ― 새로운 배경과 합성
6단계 ― 그림자와 색감을 조정
7단계 ― 필요하면 9:16 쇼츠로 자동 재구성
8단계 ― 처음부터 끝까지 재생하며 오류 확인
자주 묻는 질문
Q. 그린스크린 없이 영상 배경을 지울 수 있나요?
가능합니다. AI 영상 편집 도구 중에는 영상 속 주요 인물이나 제품을 자동으로 인식해 클립 전체의 배경을 제거하는 기능을 제공하는 서비스가 있습니다.
Q. 머리카락도 자동으로 분리되나요?
가능하지만 원본 화질, 조명, 머리카락과 배경의 색상 차이, 움직임 속도에 따라 결과가 달라질 수 있습니다. 가는 머리카락은 마지막에 반드시 확인하는 것이 좋습니다.
Q. 춤 영상도 배경을 바꿀 수 있나요?
가능하지만 빠른 회전과 손·발 움직임, 날리는 머리카락 때문에 난도가 높아질 수 있습니다. 먼저 짧고 단순한 구간으로 테스트해보세요.
Q. 제품 영상의 배경도 지울 수 있나요?
제품 경계가 배경과 명확하다면 활용하기 좋습니다. 반사·투명 소재가 많은 제품은 가장자리 결과를 더 세심하게 확인해야 합니다.
Q. 가로 영상을 세로 쇼츠로 자동 변환할 수 있나요?
자동 리프레임 기능을 지원하는 편집 도구에서는 주요 피사체를 추적하면서 16:9 영상을 9:16 등 다른 비율로 재구성할 수 있습니다.
Q. 새 배경은 AI로 만들어도 되나요?
가능합니다. 다만 원본 영상의 카메라 높이, 조명 방향, 원근감을 맞춰야 합성 티가 줄어듭니다.
Q. 배경만 바꾸면 완전히 다른 영상으로 사용할 수 있나요?
자신이 촬영했거나 사용 권리가 있는 원본이라면 여러 배경으로 재편집할 수 있습니다. 타인의 영상이라면 배경을 바꿨다는 이유만으로 저작권이나 재사용 콘텐츠 문제가 해결되는 것은 아닙니다.
정리
AI 영상 배경 제거의 가장 큰 장점은 촬영할 때 완벽한 스튜디오를 준비하지 않아도 인물이나 제품만 남겨 새로운 공간으로 옮길 수 있다는 것입니다. 특히 정보 쇼츠, AI 캐릭터, 제품 광고, 강의, 음악 영상처럼 피사체가 명확한 콘텐츠에서 활용도가 높습니다.
다만 배경을 지우는 것보다 그다음 합성이 더 중요합니다. 카메라 높이, 빛의 방향, 원근감, 바닥 그림자, 색감을 맞춰야 실제 같은 공간에서 촬영한 듯한 결과를 만들 수 있습니다. 처음에는 5~10초짜리 고정 카메라 영상부터 테스트하고 익숙해진 뒤 춤이나 빠른 움직임으로 확장해보세요.
같이 보면 좋은 글
#영상배경제거 #AI영상편집 #영상배경지우기 #그린스크린없이 #배경바꾸기 #쇼츠편집 #영상누끼 #AI영상 #자동리프레임 #AI활용법
댓글목록
등록된 댓글이 없습니다.