이미지로 3D 모델을 만드는 AI(image-to-3D)란 한 장에서 몇 장의 이미지로부터 입체의 형상(모양)과 표면의 색을 추정해 3D 데이터를 생성하는 기술입니다. 그림이나 사진은 평면(2D)이지만, 거기에 담기지 않은 '깊이'와 '뒷면'을 AI가 학습한 지식으로 보완해, 빙글빙글 돌려 볼 수 있는 3D 모델로 완성합니다. 이 글에서는 3D를 만드는 방법의 전체 그림, AI가 입체를 추정하는 원리, 잘하는 것과 못하는 것, 입력 요령까지 전문 지식이 없어도 이해할 수 있는 수준으로 정리합니다.
※현재 Figmee는 업로드한 그림이나 일러스트로 피규어풍 이미지와 3D 모델 데이터(GLB / 3MF)를 생성하고 다운로드할 수 있는 서비스입니다. 실물 3D 프린트 제품 판매는 준비 중(Coming Soon)입니다.
이미지로 3D를 만드는 방법은 크게 세 가지
'이미지나 그림으로 입체를 만든다'고 한마디로 말해도, 방법은 크게 세 갈래로 나뉩니다. 필요한 이미지 수와 장비, 수고, 어울리는 용도로 비교하면 차이를 알기 쉽습니다.
| 방법 | 필요한 이미지 수·장비 | 수고 | 어울리는 용도 |
|---|---|---|---|
| 수작업 모델링 | 참고 이미지(선택) + 3D 소프트웨어 | 큼(숙련 필요) | 완성도를 세밀하게 다듬고 싶을 때 |
| 포토그래메트리·3D 스캔 | 대상을 둘러싸고 찍은 많은 사진 / 스캐너 | 중~대(촬영과 처리) | 실재하는 입체물을 실측으로 재현하고 싶을 때 |
| AI 생성(image-to-3D) | 한 장으로도 가능 | 작음(업로드만 하면 됨) | 손으로 그린 그림이나 한 장의 이미지를 간편하게 입체화하고 싶을 때 |
가운데의 포토그래메트리는 대상을 조금씩 각도를 바꿔 가며 찍은 '겹치는 여러 장의 사진'으로 입체를 복원하는 기법입니다. 사진 측량이라고도 하며, '사진을 측정하고 해석해 신뢰할 수 있는 정보를 얻는 과학'으로 정의됩니다. 같은 장소를 다른 위치에서 찍은 스테레오 사진 쌍으로 깊이를 계산하는 원리가 기초입니다(출처: USGS 'Topographic Mapping', 2026년 7월 기준). 실재하는 물체를 정확하게 옮겨 담을 수 있는 반면, 대상물 자체와 많은 사진이 필요합니다.
이에 비해 AI 생성은 대상물이 곁에 없어도 한 장의 그림이나 사진만으로 입체를 추정할 수 있다는 점이 가장 큰 차이입니다. 손으로 그린 일러스트처럼 '현실에는 존재하지 않는 것'도 입체화할 수 있습니다. 일러스트로 입체를 만드는 과정은 일러스트를 3D화하는 방법에 정리해 두었습니다.
AI는 어떻게 한 장의 그림에서 입체를 추정할까
한 장의 평면 이미지에는 원래 '깊이'나 '뒷면'의 정보가 담겨 있지 않습니다. AI에 의한 image-to-3D는 대량의 이미지와 3D 데이터의 대응 관계를 학습한 모델이 부족한 정보를 추정으로 보완해 입체를 만듭니다. 대략 다음 3단계로 진행됩니다.
- 이미지 이해(무엇이 어디에 있는가): 입력 이미지를 분석해 윤곽, 파츠의 위치 관계, 앞뒤 관계 같은 '그림 속 구조'를 읽어 냅니다.
- 입체 형상 추정(보이지 않는 부분 보완): 읽어 낸 구조를 바탕으로 정면에서는 보이지 않는 뒷면과 옆면의 모양을 학습한 지식에 근거해 추정하고, 메시(입체의 면)를 조립합니다.
- 표면의 색·질감 생성(텍스처): 조립한 입체의 표면에 원본 이미지의 색과 무늬를 입혀 질감(텍스처)을 만듭니다.
참고로 한 장의 이미지에서 입체를 구하는 문제는 '같은 2D 이미지에 대응하는 입체가 무수히 존재할 수 있는' 불량 설정 문제(ill-posed problem)로, 정해진 정답이 하나로 결정되지 않습니다. 그래서 어떻게 보완할지에 대한 기법은 연구마다 여러 가지가 있고, 발전 속도가 빠른 기술 분야입니다(출처: Computers & Graphics 'Single-View 3D Reconstruction: A Survey of Deep Learning Methods'(ScienceDirect), 2026년 7월 기준). 어떤 AI 도구가 어떤 결과를 내는지는 이미지로 3D를 만드는 AI 도구 비교도 참고하세요.
잘하는 것·못하는 것
AI에 의한 3D화는 간편함이 강점이지만, 원리상 잘하는 것과 못하는 것이 있습니다.
- 잘하는 것: 정면이 뚜렷하게 찍힌 한 장으로 전체 실루엣과 분위기를 유지한 입체를 짧은 시간에 만들어 내는 것.
- 못하는 것(추정에 의존하는 부분): 정면에서 보이지 않는 뒷면, 가는 돌기(안테나, 손끝, 꼬리 등), 파츠끼리 겹치는 부분은 원본 이미지에 정보가 없어 추정으로 보완되므로 의도와 다른 결과가 나올 수 있습니다.
- 입력의 질이 결과를 좌우한다: 흐릿한 이미지, 배경과 피사체의 경계가 모호한 이미지, 지나치게 복잡한 구도는 AI가 구조를 읽어 내기 어려워 3D화의 정확도가 떨어지기 쉽습니다.
즉 '입력 이미지가 뚜렷할수록 추정에 의존하는 부분이 줄어 결과가 안정되기 쉽다'는 관계가 있습니다. 세부까지 생각대로 된다고는 할 수 없다는 전제로 사용하는 것이 안심입니다.
깔끔하게 3D화하기 위한 입력 요령
못하는 부분을 피하는 가장 빠른 길은 입력 이미지를 정돈하는 것입니다. 자세한 내용은 3D화에 알맞은 그림·사진 촬영법에서 설명하지만, 요점은 다음 세 가지입니다.
- 피사체를 크게, 정면에서: 만들고 싶은 대상을 중앙에 크게, 정면에 가까운 각도로 찍습니다. 전신이나 전체 모습이 한 장에 담겨 있으면 입체의 윤곽을 잡기 쉬워집니다.
- 배경은 단순하게: 배경과 피사체의 경계가 뚜렷할수록 AI가 윤곽을 읽어 내기 쉬워집니다. 무지에 가까운 배경이 다루기 쉽습니다.
- 밝고 선명하게: 균일한 밝기에 초점이 맞은 이미지로 준비합니다. 강한 그림자, 하얗게 날아간 부분, 흐림은 형태의 단서를 잃게 만듭니다.
직접 체험해 보기
Figmee라면 전용 소프트웨어나 3D 지식 없이도 브라우저만으로 이미지의 3D화를 시험해 볼 수 있습니다. 흐름은 다음과 같습니다.
- 그림·일러스트를 업로드한다(종이에 그린 그림은 촬영하거나 스캔한 이미지로 OK. 기준: 1분)
- AI가 피규어풍 이미지를 생성한다(생성 대기 시간은 내용에 따라 달라집니다)
- 그 이미지로 3D 모델을 생성한다(위와 같음)
- 브라우저에서 360° 회전시켜 확인한다(기준: 1분) — 뒷면이나 세부가 의도대로인지 돌려 가며 확인할 수 있습니다.
- GLB / 3MF 형식으로 다운로드한다(기준: 1분)
내보낸 3D 모델은 Blender 같은 3D 소프트웨어로 불러와 손볼 수 있습니다. 편집 과정은 AI로 만든 3D 모델을 편집하는 방법에 정리해 두었습니다.
자주 묻는 질문
사진과 일러스트 중 어느 쪽이 3D화하기 쉬운가요?
한마디로 말할 수는 없습니다. 3D화의 쉬움은 '사진이냐 일러스트냐'보다 입력의 명료함(피사체가 크고 정면에서 찍혀 있는지, 배경과 분리되어 있는지, 초점이 맞았는지)으로 정해집니다. 사진이라도 흐릿하면 어렵고, 일러스트라도 윤곽이 뚜렷하면 다루기 쉬운 식입니다.
생성한 3D 모델은 편집할 수 있나요?
네. Figmee는 GLB·3MF 형식으로 다운로드할 수 있고, GLB는 Blender 같은 무료 3D 소프트웨어로 불러와 형태나 색을 손볼 수 있습니다. 절차는 AI로 만든 3D 모델을 편집하는 방법을 참고하세요.
뒷면이나 세부가 생각대로 나오지 않는 이유는 무엇인가요?
한 장의 이미지에는 뒷면이나 가려진 부분의 정보가 담겨 있지 않아, AI가 학습에 근거해 추정으로 보완하기 때문입니다. 가는 돌기나 파츠의 겹침도 정보가 부족하기 쉬워 의도와 어긋날 수 있습니다. 신경 쓰인다면 배경을 단순하게 하거나 피사체를 더 크게 찍는 등 입력 이미지를 정돈하면 개선되기 쉽습니다.
3D 전문 용어를 몰라도 사용할 수 있나요?
네. Figmee는 브라우저만으로 완결되며, 3D 소프트웨어 조작이나 전문 지식이 필요 없습니다. 용어를 확인하고 싶을 때는 3D 모델이란 무엇인가나 3D 모델링 용어집이 도움이 됩니다.
정리
이미지로 3D 모델을 만드는 AI(image-to-3D)는 한 장에서 몇 장의 이미지로부터 입체의 형태와 표면의 색을 추정해 3D 데이터를 생성하는 기술입니다. 많은 사진으로 실측하는 포토그래메트리와 달리 한 장의 그림으로도 간편하게 입체화할 수 있는 반면, 뒷면과 세부는 추정으로 보완되므로 입력 이미지를 뚜렷하게 할수록 결과가 안정됩니다. 우선 정면이 선명하게 찍힌 한 장을 준비해 Figmee에서 피규어풍 이미지로 3D 모델을 만들고, 브라우저에서 360° 돌려 확인해 보세요.
