把一張畫轉成3D時,畫裡沒有畫出來的背面,是AI把從正面讀到的形狀和顏色,和從大量資料中學到的形狀知識結合起來推測生成的。它不是測量出來,而是推測出來的,所以即使重新上傳同一張畫再做,背面也可能不同,也不一定會是你設定中的背影。
Figmee 同樣只上傳一張畫,沒有放入多個角度畫作的功能。本文說明背面是怎麼生成的、頭髮・衣服・小物件容易出現偏差的地方、在瀏覽器裡確認背面的步驟、讓背面更接近設定的方法、和三視圖的關係,以及不想展示背面時的分享方式。至於臉這種畫出來的一側改變的問題,請看AI轉3D後臉像變了一個人?原因與對策。
※目前 Figmee 提供的是:依你畫的插畫生成的公仔風格圖像、3D模型資料(GLB / 3MF),以及3D模型的旋轉影片。實體3D列印訂購功能正在準備中(Coming Soon)。照片和看起來像照片的圖片無法做成3D。
用一張畫生成3D時,背面是怎麼做出來的?
背面是把從正面畫中讀到的輪廓、顏色、部件位置,和AI學到的「這種形狀的東西,背面通常長這樣」的知識結合起來推測出來的。AI不會把沒畫的部分留白,而是用推測補上,所以一張畫也能變成可以轉一整圈的3D。代價是,補上的部分不能保證和角色原本的設定一致。
從單張圖像生成其他視角畫面的研究 Zero-1-to-3,把這個問題視為光靠圖像無法唯一決定答案的「條件不足的問題」,並展示了借助大規模圖像生成模型從自然圖像中學到的形狀知識來補足的方法(來源:Zero-1-to-3: Zero-shot One Image to 3D Object(arXiv),2023年3月發表)。也就是說,正面畫中沒有的資訊,AI也只能根據「常見的形狀」來推斷。
在 Figmee 中,畫會先生成公仔風格圖像(畫面上稱為「3D 圖片」),再由這張圖像生成3D模型。公仔風格圖像也是一張圖像,所以背面是在生成3D模型時補上的。從圖像生成立體的整體原理,請看從圖片生成3D模型的AI原理。
背面容易出現哪些情況?
容易出現偏差的是從正面看不到的後面的頭髮、衣服背面的圖案或部件,以及背在身上的小物件。能從正面看到輪廓的部分(身體的厚度、袖口和下襬的展開),可以認為相對比較容易前後自然銜接。研究把動漫風角色頭像插畫重建為立體的 PAniC-3D 也指出,和真人頭部的照片相比,插畫角色的頭髮和飾品形狀更複雜多樣,這是立體化的難點之一(來源:PAniC-3D: Stylized Single-view 3D Reconstruction from Portraits of Anime Characters(arXiv・CVPR 2023),2023年3月發表)。
| 正面的資訊 | 背面要補上的內容 | 出現偏差的可能性 |
|---|---|---|
| 瀏海和兩側頭髮 | 後面頭髮的長度、綁法、髮結位置 | 高 |
| 從肩膀或腰側露出的髮梢 | 後面頭髮的長度和髮量 | 中 |
| 衣服正面的顏色 | 背面的顏色 | 中 |
| 只在背面的圖案・標誌・蝴蝶結・帽兜 | 正面沒有資訊,所以不出現或變成別的樣子 | 高 |
| 背在身上的東西(翅膀・背包・披風・尾巴) | 正面看得到部分的延續,以及背面的形狀 | 高 |
| 身體輪廓和肩寬 | 背部的厚度和弧度 | 低 |
| 鞋尖 | 鞋跟和鞋底 | 中 |
出現偏差的可能性,是依正面畫中線索多寡推斷的參考,並非測量得到的數值。可以認為,背面的顏色有時會接近延續正面顏色的單色,或出現像正面圖案繞到背後一樣的花紋。沒畫出來的面為什麼只能靠推測,為什麼有人說插畫無法轉3D中也有說明。
確認背面的步驟是什麼?
在 Figmee 中,把完成的3D模型在瀏覽器檢視器裡拖曳旋轉,就能確認背面。不只能左右轉,也能上下轉,所以可以停在正後方、俯視或仰視的角度,並放大檢查細節。
- 開啟作品(約1分鐘):從畫面上方選單的「畫廊」開啟「作品」,選擇已生成3D模型的作品。
- 轉到正後方看整體(約1分鐘):拖曳旋轉半圈。點檢視器右下角的按鈕開啟自動旋轉,不用手操作也能看完一整圈。
- 停在三個角度看細節(約3分鐘):停在斜後方、正側面、從上往下俯視的角度,用滑鼠滾輪或雙指放大,檢查後面頭髮的長度、髮結、衣服背面、尾巴或翅膀的根部。
- 調整亮度再看(約1分鐘):拖動亮度滑桿,比較容易看清陰影處的顏色和形狀。
- 寫下和設定不同的地方(約3分鐘):把不同之處寫成文字,例如「後面的頭髮應該到腰」「蝴蝶結在背部正中央」。這會成為下一節選擇修正方法的依據(想把正後方的樣子留成圖片的話,可以使用「儲存三視圖(4個方向)」)。
怎麼讓背面更接近設定?
讓背面更接近設定的方法有兩種:在正面畫裡加入背面的線索,以及重新上傳畫作重做。不過,輸入只有一張,所以沒有辦法確實傳達正面看不到的東西。
- 在正面看得到的範圍裡露出線索:後面的頭髮很長的話,讓髮梢從肩膀或腰側露出來;背上有大蝴蝶結或翅膀的話,把超出身體輪廓的部分畫出來。
- 畫成稍微轉向斜前方的角度:比起完全正面,身體稍微側轉的畫能帶來更多側面資訊。不過臉越側,臉部資訊越少,如果以臉為優先,就畫得更接近正面。
- 對只在背面的圖案不要期待太高:完全不出現在正面的圖案或標誌,要預設它們在背面不會出現,或會變成別的樣子。
- 重做:一個作品只能生成1個3D模型,所以重做時要把畫重新上傳,當成新作品,從公仔風格圖像(依品質消耗1~3個代幣)一路做到3D模型(5個代幣)。因為是推測,每次結果都會不同;但生成完成的結果即使不合心意,代幣也不會返還。
如果只是背面的顏色不對,可以使用月費方案權益中的上色功能。在作品畫面點「開始上色」,可以直接替3D模型上色,並另存為一個和原本3D模型分開的版本。想增加或削減形狀時,就把GLB匯入 Blender 等3D軟體編輯,步驟整理在Blender 重建網格與紋理編輯基礎中。
有了三視圖,背面就會準確嗎?
Figmee 只能放入一張畫,沒有分別放入正面、側面、背面畫作的入口。即使把三視圖合成一張放進去,也沒有把每個圖分別讀成正面、側面、背面資訊的機制。一張圖裡並排著好幾個姿態,可以認為有時會被合成一團,或是有一部分被省略。三視圖更適合當作比對完成的3D與設定的參考,或在用3D軟體修改時當作底稿。
三視圖不能當作輸入,但反過來,可以從完成的3D模型儲存三視圖形式的圖像。在作品畫面點「儲存三視圖(4個方向)」,就能把3D模型從正面、右側面、背面、左側面無透視變形地拍成1張PNG儲存下來,不消耗代幣。圖中的背部和側面是AI補上的形狀,所以請把它和你自己畫的設定三視圖並排放在一起,當作找出不同之處的材料。另外,原畫朝向斜前方時,兩側的2張可能不是標準的正側面。
事先定好背面的設定,在檢視器裡看的時候就能馬上判斷「哪裡不一樣」。三視圖的畫法,以及和3D對照的用法,整理在角色三視圖的畫法中。
不想展示背面時怎麼辦?
在分享連結頁面上,觀看的人可以自由旋轉3D模型,所以背面也會被看到。背面還和設定不符,或是不想展示時,就在檢視器裡選好角度停住,用裝置的螢幕截圖功能存下畫面,再分享這張圖片。
| 展示方式 | 能否看到背面 | 適合的情境 |
|---|---|---|
| 分享連結(公開作品) | 能(觀看的人可以旋轉) | 希望別人看到完整立體時 |
| 旋轉影片(約6秒轉2圈) | 能 | 想在社群平台上傳達立體形狀時 |
| 檢視器畫面的截圖 | 只有你選的角度 | 想傳達立體感又不展示背面時 |
| 公仔風格圖像 | 只有正面一張 | 想傳達畫作氛圍時 |
分享連結頁面上,除了3D模型,也會顯示你上傳的原始插畫,所以觀看的人也能明白:正面是你自己的畫,背面是AI補上的形狀。公開後別人看得到哪些內容、如何取消公開,請看如何在網路上公開3D模型。如果在貼文裡提到背面,附上一句「背面是AI補上的形狀」,可以減少誤會。
常見問題
另外畫一張背影,可以用在背面嗎?
Figmee 沒有把正面和背影兩張畫合成一個3D的功能。如果只放入背影畫,可以認為那張畫會被當成看得到的一側,而另一側的臉部會變成推測的部分。背影畫請當作對照完成的3D的參考來使用。背影本身的畫法,整理在角色背影的畫法中。
重做的話,背面每次都會變嗎?
有可能會變。背面是推測出來的,所以重新上傳同一張畫重做,結果也不一定相同。每次重做都會消耗代幣,而生成完成的結果即使不合心意,代幣也不會返還。
可以只重做背面的一部分嗎?
在 Figmee 裡面無法改變3D模型的形狀,也無法只重做其中一部分。顏色上的差異可以用月費方案的上色功能重新上色。想修改形狀時,請把GLB匯入 Blender 等3D軟體編輯。
總結
把一張畫轉成3D時,背面是AI根據正面的資訊和學到的形狀知識推測生成的。後面的頭髮、只在背面的圖案、背在身上的小物件容易出現偏差;身體輪廓這類在正面有線索的部分,可以認為比較容易自然銜接。完成的3D要在檢視器裡從正後方、斜後方和俯視角度確認,不對的地方可以在正面畫裡加入線索後重做,顏色重新上色,形狀交給3D軟體修改。不想展示背面時,不用分享連結,而是用選好角度的圖片。
從插畫到3D的完整流程,整理在插畫轉3D完全指南中。不妨先用一張能從正面看到一點後面髮梢或背上小物件的畫,試試背面會怎麼被補上。




