AI로 3D화했을 때 얼굴이 다른 사람처럼 되는 것은, 대부분 그림을 입체용 이미지로 다시 그리는 단계에서 눈과 입 같은 세부가 바뀌는 것과 이미지 1장에서 형태를 추정하는 단계에서 평면의 얼굴 표현이 입체와 맞지 않는 것이 겹치기 때문입니다. 대책은 얼굴이 또렷하게 읽히는 그림을 넣고, 3D 모델로 만들기 전 이미지 단계에서 얼굴을 확인해, 다르면 그 단계에서 다시 만드는 것입니다.
Figmee에서는 업로드한 그림으로 먼저 피규어풍 이미지(화면 표기는 ‘3D 이미지’)를 만들고, 그 이미지로 3D 모델을 만듭니다. 이미지는 품질에 따라 1～3토큰, 3D 모델은 5토큰이므로, 얼굴 확인을 이미지 단계에서 끝낼수록 다시 만드는 부담이 줄어듭니다. 다만 어떤 그림이든 원래 얼굴 그대로 3D가 된다고는 말할 수 없습니다. 이 글에서는 얼굴의 어디가 왜 바뀌는지, 입력에서 할 수 있는 것, 확인 순서, 고치는 방법, 남기기 어려운 얼굴을 차례로 설명합니다.
※현재 Figmee가 제공하는 것은 그린 일러스트로 만드는 피규어풍 이미지, 3D 모델 데이터(GLB / 3MF), 3D 모델 회전 영상입니다. 실물 3D 프린트 주문은 준비 중(Coming Soon)입니다. 사진이나 사진처럼 보이는 이미지는 3D로 만들 수 없습니다.
AI로 3D화하면 왜 얼굴이 다른 사람처럼 될까?
얼굴이 다른 사람처럼 보이는 원인은 그림을 다시 그리는 단계와 형태를 추정하는 단계, 두 곳에 있습니다. 얼굴은 좁은 면적에 눈·눈썹·입·앞머리가 모여 있어서, 하나하나는 작은 변화라도 겹치면 다른 캐릭터처럼 보입니다.
첫 번째는 다시 그리는 단계입니다. 그림 1장으로 피규어풍 이미지를 만들 때, AI는 원래 그림을 단서로 삼으면서 입체감 있는 채색과 음영을 더해 그림을 새로 그립니다. 새로 그리는 것이기 때문에 눈의 모양과 크기, 하이라이트 위치, 입 선 같은 작은 부분이 원래 그림과 조금씩 달라질 수 있습니다. 같은 그림으로 만들어도 만들 때마다 결과가 달라집니다.
두 번째는 형태를 추정하는 단계입니다. 이미지 1장으로 입체를 만드는 문제는 이미지만으로는 형태가 하나로 정해지지 않는 ‘조건이 부족한 문제’여서, AI는 방대한 데이터에서 배운 형태 지식으로 빈 부분을 채웁니다. 이미지 1장에서 다른 각도의 모습을 만드는 연구 Zero-1-to-3도, 이 조건이 부족한 문제에 대규모 이미지 생성 모델이 배운 형태 지식을 활용해 접근한다고 설명합니다(출처: Zero-1-to-3: Zero-shot One Image to 3D Object(arXiv), 2023년 3월 공개).
일러스트의 얼굴은 이 추정이 특히 어려운 대상입니다. 애니메이션풍 캐릭터의 얼굴 그림으로 머리를 입체로 만드는 연구 PAniC-3D는, 실제 사람 얼굴 사진과 비교해 캐릭터 얼굴 그림은 머리카락과 소품의 형태가 더 복잡하고 다양하다는 점, 사실적이지 않은 윤곽선으로 음영이 표현된다는 점, 학습과 평가에 쓸 3D 모델과 일러스트 데이터가 부족하다는 점을 과제로 꼽습니다(출처: PAniC-3D: Stylized Single-view 3D Reconstruction from Portraits of Anime Characters(arXiv·CVPR 2023), 2023년 3월 공개). 평평하게 칠한 그림은 입체의 단서가 부족해, 이미지로 3D를 만드는 기존 대규모 모델이 어려워한다는 보고도 있습니다(출처: Art3D: Training-Free 3D Generation from Flat-Colored Illustration(arXiv), 2025년 4월 공개).
게다가 만화풍의 큰 눈처럼 정면에서 귀엽게 보이도록 설계된 얼굴은, 입체로 만들면 안구의 곡면과 맞지 않아 각도를 바꿨을 때 어색함이 생깁니다. 이는 원래 그림이 가진 평면 전제의 표현이 드러난 결과로, 자세한 내용은 일러스트는 3D로 만들 수 없다는 말이 나오는 이유에서 설명합니다. 얼굴처럼 그려져 있는 쪽이 아니라, 그리지 않은 뒤쪽이 어떻게 만들어지는지는 그림 1장을 3D로 만들면 뒷면은 어떻게 될까?에 정리했습니다.
어떤 요소가 잘 바뀔까?
잘 바뀌는 것은 눈, 입, 좌우가 다른 특징, 앞머리, 얼굴 윤곽의 다섯 가지입니다. 모두 그림에서는 선이나 작은 색 면으로 그려져 있어 형태의 단서가 적은 부분입니다. 반대로 머리카락과 옷의 큰 색 배치, 전체 실루엣처럼 면적이 큰 특징은 세부에 비해 남기 쉬운 것으로 보입니다.
| 잘 바뀌는 요소 | 일어나기 쉬운 일 | 입력에서 할 대책 | 확인할 단계 |
|---|---|---|---|
| 눈(모양·크기·하이라이트) | 흔한 모양의 눈에 가까워짐, 하이라이트 위치나 개수가 바뀜, 3D에서는 얼굴의 곡면을 따라 붙어 옆에서 보면 일그러짐 | 눈의 윤곽과 하이라이트를 또렷하게 그리기. 앞머리로 눈을 가리지 않기 | 피규어풍 이미지에서 모양과 색, 3D에서는 정면 |
| 입(점이나 짧은 선의 입) | 크게 다시 그려짐, 벌린 입이 됨, 3D에서는 너무 작아 흐려짐 | 입 선을 주변 피부색과 구별될 만큼 진하게 그리기 | 피규어풍 이미지와 3D 모두 |
| 좌우가 다른 특징(한쪽 눈의 흉터·점·한쪽 머리핀·좌우가 다른 눈 색·가르마) | 사라짐, 반대쪽으로 옮겨 감 | 특징을 너무 작게 그리지 말고, 어느 쪽인지 메모해 두기 | 피규어풍 이미지에서 좌우 비교 |
| 앞머리 | 머리카락 다발이 합쳐짐, 눈을 가리는 정도가 바뀜, 3D에서는 덩어리가 되어 이마와의 경계가 흐려짐 | 앞머리와 이마·눈의 경계를 선이나 색으로 나누기 | 피규어풍 이미지에서 다발, 3D에서 비스듬히 |
| 윤곽(턱·볼) | 뾰족한 턱이 둥글어짐, 볼에 볼륨이 생김 | 윤곽선을 또렷하게 그리고 머리카락이나 손으로 가리지 않기 | 3D에서 정측면 |
일반적으로 3D 모델의 눈과 입 묘사는 형태 표면에 붙인 이미지(텍스처)로 감겨 있습니다. 텍스처 전체에서 얼굴이 차지하는 면적은 일부이므로, 가는 선과 작은 하이라이트는 흐려질 수 있는 것으로 보입니다. 형태와 텍스처의 관계는 3D 모델이란?에서 설명합니다.
입력할 그림에서 얼굴을 지키려면?
얼굴을 지키려면 얼굴이 크고 또렷하게 읽히는 그림 1장을 고르고, 눈·입·눈썹을 선과 색으로 구분해 그려 두는 것이 핵심입니다. 완성작이 이 조건에 맞지 않으면, 3D화용 그림을 1장 따로 그리는 편이 지름길이 되기도 합니다.
- 얼굴이 정면이나 비스듬한 앞쪽을 향하고, 두 눈이 모두 보일 것: 옆얼굴, 고개 숙인 얼굴, 뒷모습 그림은 얼굴 정보 자체가 적어집니다.
- 얼굴 부분의 해상도가 충분할 것: 전신 그림에서는 얼굴이 작게 담깁니다. 얼굴 부분의 화소가 적으면 눈과 입 선의 정보도 줄어든다고 볼 수 있으므로, 넉넉한 크기로 내보냅니다(PNG·JPEG·WebP, 1장 20MB까지).
- 눈·입·눈썹 선이 주변과 구별될 만큼 진할 것: 연한 연필 선은 진하게 다듬은 뒤 업로드합니다. 눈의 하이라이트는 흰색으로 또렷하게 그립니다. 종이에 그린 그림은 촬영하거나 스캔한 이미지를 쓸 수 있습니다.
- 눈이나 입을 가리지 않을 것: 앞머리·손·소품이 눈이나 입에 걸려 있으면, 다시 그리는 과정에서 가려지는 방식이 바뀔 수 있습니다.
- 표정은 차분한 것부터 시험할 것: 감은 눈, 눈물, 땀이나 홍조 기호 같은 표현은 형태로 읽기 어려워 잘 바뀌는 것으로 보입니다. 개성 있는 표정을 살리고 싶다면, 먼저 차분한 표정의 그림으로 얼굴이 유지되는지 확인한 뒤 시도하면 원인을 가려내기 쉽습니다.
- 음영을 조금 넣을 것: 완전한 단색 채색보다 턱 아래나 앞머리 그림자가 들어간 그림이 입체의 단서가 더 많습니다.
2단계로 확인하는 순서는?
Figmee에서는 3D 모델을 만들기 전에 피규어풍 이미지로 얼굴을 확인하고, 다르면 그 단계에서 다시 만듭니다. 생성이 완료된 결과는 마음에 들지 않아도 토큰이 돌아오지 않으므로, 토큰을 적게 쓰는 이미지 단계에서 얼굴을 확인해 두는 편이 부담이 적습니다.
| 단계 | 사용하는 토큰 | 얼굴에서 확인할 것 |
|---|---|---|
| 피규어풍 이미지(3D 이미지) | ‘표준’ 1·‘Pro’ 2·‘Max’ 3 | 눈 모양과 색, 하이라이트, 입, 좌우 특징, 앞머리 |
| 3D 모델 | 5(계정당 첫 1개는 무료) | 정면에서 본 얼굴 인상, 옆에서 본 턱과 눈의 일그러짐 |
- 얼굴의 특징을 적어 두기(약 3분): 눈 모양과 색, 하이라이트 위치, 눈썹, 입, 점·흉터·머리핀이 어느 쪽인지, 앞머리 가르마 등 그 캐릭터다움을 결정하는 점을 3～5개 메모합니다.
- ‘표준’으로 피규어풍 이미지 만들기(수 분): 그림을 업로드하고 품질 ‘표준’(1토큰)으로 생성합니다. 가입 특전으로 무료 토큰 5개가 지급됩니다(가입일로부터 3개월 유효).
- 원래 그림과 나란히 놓고 얼굴 비교하기(약 2분): 메모한 항목을 하나씩 확인합니다. 좌우가 다른 특징은 반대쪽으로 옮겨 가지 않았는지 특히 살핍니다. 생성 직후 화면에서 결과를 평가할 수 있고, 다르다고 느끼면 어디가 다른지 한마디 보낼 수 있지만, 평가를 남겨도 이미지가 다시 만들어지지는 않습니다.
- 다르면 다시 만들기(1회 수 분): ‘재생성’으로 다시 만들거나, 세부에 더 공을 들이는 ‘Pro’(2토큰)·‘Max’(3토큰)를 시험합니다. 같은 곳이 계속 무너진다면 재생성을 반복하기보다 입력 그림을 고칩니다.
- 얼굴이 맞는 이미지로 3D 모델을 만들고 정면부터 확인하기(약 5분): 3D 모델은 5토큰이며 계정당 첫 1개는 무료입니다. 완성되면 뷰어에서 먼저 원래 그림과 같은 정면 방향으로 돌리고, 얼굴을 확대해서 봅니다. 밝기 슬라이더로 음영이 지는 모습을 바꿔 본 뒤, 비스듬한 각도와 정측면으로 돌립니다.
3D를 옆에서 봤을 때의 어색함 중 일부는 첫 번째 절에서 설명했듯 평면의 얼굴 표현이 입체에서 드러난 것이어서, 그림을 다시 올려 다시 만들어도 사라지지 않을 때가 있습니다. 정면에서 본 인상이 원래 그림에 가까운지를 기준으로 삼으면 다시 만들지(그림을 다시 올려 새 작품으로 만들지) 판단하기 쉬워집니다.
그래도 다를 때 고치는 방법은?
Figmee 안에서 고치는 방법은 고친 그림을 다시 올려 다시 만들기, 같은 그림을 다시 올려 다시 만들기, 완성된 3D 모델의 색을 다시 칠하기의 세 가지입니다. 작품 하나로 만들 수 있는 3D 모델은 1개이므로, 3D 모델을 만든 뒤에 다시 만들 때는 그림을 다시 업로드해 새 작품으로 만듭니다. 턱의 형태나 눈의 오목함처럼 형태 자체를 바꾸고 싶다면 Blender 같은 3D 소프트웨어에서 편집해야 합니다. Figmee 안에서 3D 모델의 형태를 바꿀 수는 없습니다.
| 방법 | 할 수 있는 것 | 필요한 것 | 맞는 경우 |
|---|---|---|---|
| 입력 그림 고치기 | 달라진 부분을 다시 그린 그림을 새 작품으로 업로드해 피규어풍 이미지부터 다시 만들기 | 이미지 1～3토큰＋3D 모델 5토큰 | 눈·입·앞머리 등 다시 그리는 과정에서 바뀐 부분 |
| 같은 그림을 다시 올려 다시 만들기 | 같은 그림을 다시 업로드해 새 작품으로 만들고 피규어풍 이미지부터 다시 만들기 | 이미지 1～3토큰＋3D 모델 5토큰 | 이미지는 맞았는데 3D에서 무너진 경우 |
| 3D 모델에 색 다시 칠하기(월정액 플랜 특전) | 작품 화면의 ‘색칠하기’에서 3D 모델에 색을 칠해 별도 버전으로 저장(원래 3D 모델은 남음) | 월정액 플랜 | 눈 색·하이라이트·입 선 등 색의 차이 |
| Blender로 편집하기 | GLB를 불러와 텍스처에 직접 그리거나 형태 수정 | Blender(무료) | 세밀한 묘사와 형태 수정 |
Blender에서는 GLB를 불러온 뒤 텍스처 페인트로 눈이나 입을 다시 그릴 수 있습니다. Blender 공식 매뉴얼은 텍스처 페인트가 이미지 에디터와 3D 뷰포트 어느 쪽에서도 동작하고, 3D 뷰포트에서는 메시에 직접 칠할 수 있으며, 그 전에 UV 펼치기가 되어 있어야 한다고 설명합니다(출처: Blender Manual 「Texture Paint」, Blender 5.2 LTS, 2026년 11월 기준). 순서는 Blender 리메시와 텍스처 편집의 기본에 정리했습니다.
AI로 만든 캐릭터를 같은 얼굴 그대로 다른 포즈로 만들고 싶다면 AI 일러스트 캐릭터를 같은 얼굴로 다른 포즈로 만드는 방법을 참고하세요.
‘개성 강한 얼굴’은 어디까지 남을까?
눈이나 입을 그리는 방식에 개성이 강한 얼굴일수록 다시 그리기와 형태 추정 양쪽에서 바뀌기 쉬워, 원래 얼굴 그대로 3D가 된다고 말할 수 없습니다. 개성이 선과 색으로 크고 또렷하게 그려져 있으면 남는 경우도 있지만 확실하지 않으므로, 남기고 싶은 개성은 반드시 이미지 단계에서 확인하세요.
다음과 같은 얼굴은 잘 바뀌는 것으로 보입니다.
- 선 한 줄로 그린 눈(감은 눈·가는 눈)이나 점만 찍은 눈
- 얼굴의 절반 가까이를 차지하는 큰 눈, 눈동자 속의 세밀한 무늬
- 입이 없는 얼굴, 기호 같은 모양의 입
- 눈물·땀·홍조 사선처럼 얼굴 위에 겹쳐 그린 기호
- 동물풍이나 마스코트풍으로, 눈과 입의 위치가 사람 얼굴과 크게 다른 얼굴
또 사실적으로 그려 넣은 얼굴 그림은 사진처럼 보이는 이미지로 판정되어 생성이 멈출 수 있습니다. 그 경우 사용한 토큰은 자동으로 돌아옵니다.
잘 맞는 사람: 얼굴의 특징이 선과 색으로 또렷한 캐릭터를 입체로 돌려 보고 싶은 사람, 그림 자료로 쓰고 싶은 사람, 회전 영상으로 보여 주고 싶은 사람.
잘 맞지 않는 사람: 얼굴의 세부까지 원래 그림과 일치하는 것이 꼭 필요한 용도에 쓰려는 사람. 이 경우에는 세부를 3D 소프트웨어에서 손으로 마무리한다는 전제로 생각하세요.
자주 묻는 질문
몇 번 다시 만들면 원래 얼굴이 되나요?
횟수로 정해지지 않습니다. 만들 때마다 결과가 달라지므로 다시 만들어서 가까워질 때도 있지만, 같은 곳이 계속 무너진다면 입력 그림(얼굴 크기·선의 진하기·가려진 부분)을 고치는 편이 빠릅니다. 다시 만들 때마다 선택한 품질만큼 토큰을 사용합니다.
‘Pro’나 ‘Max’를 고르면 얼굴이 무너지지 않나요?
‘Pro’와 ‘Max’는 세부에 더 공을 들인 이미지를 출력하는 품질이지만, 얼굴이 원래 그림대로 된다고 장담할 수는 없습니다. 먼저 ‘표준’으로 얼굴이 유지되는지 확인하고, 세부만 부족할 때 높은 품질을 시험하면 토큰을 낭비하기 어렵습니다.
3D 모델로 만든 뒤에 얼굴이 다르다는 걸 알았다면 토큰이 돌아오나요?
생성이 완료된 3D 모델은 결과가 마음에 들지 않아도 토큰이 돌아오지 않습니다. 생성에 실패했을 때만 자동으로 돌아옵니다. 그래서 얼굴은 피규어풍 이미지 단계에서 확인한 뒤 3D 모델을 만드는 것을 권합니다.
정리
AI로 3D화하면 얼굴이 다른 사람처럼 되는 것은, 그림을 다시 그리는 단계와 이미지 1장에서 형태를 추정하는 단계 양쪽에서 눈·입·좌우 특징·앞머리·윤곽 같은 세부가 바뀌기 때문입니다. 얼굴이 크고 또렷하게 읽히는 그림을 넣고, 피규어풍 이미지 단계에서 얼굴을 확인해, 맞는 이미지만 3D 모델로 만들면 다시 만드는 횟수를 줄일 수 있습니다. 그래도 남기 어려운 개성은 있으므로, 남기고 싶은 특징은 이미지 단계에서 확인하고, 색은 다시 칠하고, 형태는 3D 소프트웨어로 고친다고 생각해 두면 헤매지 않습니다.
그림에서 3D까지의 전체 흐름은 AI 피규어화 방법 가이드에서 소개합니다. 먼저 가입 특전 토큰으로 얼굴 특징이 또렷한 그림 1장을 피규어풍 이미지로 만들고, 원래 그림과 나란히 놓아 보세요.
