Community影像github.com

圖片轉雕塑

將任意主題的一張圖片(如 AI 生成圖、渲染圖、公仔或產品照片、手繪稿,或先將點子轉為圖片)轉換為防水 3D 雕塑,並在 Blender 中按步驟記錄比對。

圖片轉雕塑 是什麼?

此技能可將單張輸入圖片轉化為可驗證的防水 3D 雕塑。它首先從圖片中提取前端資訊(遮罩、度量深度、焦距、法線),再生成多個未見視角的影像,並強制它們彼此一致,進而建立視覺外殼。接著透過多輪記錄的擬合調整,比對所有法線貼圖、輪廓與照片深度,並支援對稱、焦點區域、間隙切割與平滑處理。該技能提供命令列介面 (`i2s.py`),可執行案例建立、fal API 呼叫(含預算控管)、視角註冊、雕刻、擬合、地圖檢查、Blender 重播、縮時攝影與旋轉台影片,以及多種格式匯出(GLB、OBJ、STL)與報告。適用於使用者想從圖片獲得 3D 模型或雕塑、將公仔或角色轉為網格、製作雕刻縮時影片,或比對 3D 模型與參考圖片。不適用於場景或房間、無圖片的文字轉 3D、骨架綁定等用途。支援多種輸入類型:渲染圖、AI 生成圖、照片、透明 PNG、多物件擁擠圖片、手繪稿、多張照片,甚至僅有想法。

相容平台~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/gokayfem/image-to-sculpt/tree/HEAD/skills/image-to-sculpt

Installed? Explore more 影像 skills: steipete/songsee, affaan-m/frontend-design, mattpocock/improve-codebase-architecture · View all 6 →

在你喜歡的 AI 中提問

開啟一個已預先載入此 Agent Skill 的新對話。

說明文件

圖片轉雕塑 是做什麼的?

一張圖片輸入,輸出一個可被驗證的雕塑:圖片所顯示的每個表面都與圖片自身的法線、輪廓和深度(在圖片自己的攝影機中)擬合,每個隱藏的表面都來自於需先彼此一致的生成視角,且建構的每一步都被記錄並可在 Blender 中重播。

輸入路由

任何輸入最終都會產生相同的案例佈局(透過 i2s.py new CASE --input ...)。詳細資訊:references/inputs.md。

輸入操作方式備註
角色/生物/物體渲染圖或 AI 生成圖new → run主要路徑
真實物體的照片(公仔、玩具、產品、雕像)new --kind photo → runMoGe 會提供真實焦距與深度
帶有透明背景的 PNG 切圖new → runAlpha 通道即遮罩;無需遮罩呼叫
包含多個物體的擁擠圖片prep --select "the red dragon"SAM-3 會選取主體
繪畫、草稿或平面插圖prep --restylenano banana 先將其轉為 3D 渲染,同時保留姿勢
同一物體的多張照片views --import DIR您的照片會取代生成的視角;透過註冊找到角度
僅有想法imagine OUT.png "idea" → new先產生一個清晰的全身渲染圖作為起點
無 API 金鑰一個透明 PNG(加上您自己的視角)僅正面也可行:輪廓會被膨脹,後方深度則是猜測

工作流程

在每個檢查點貼上標籤後的視覺圖(checks/sheet_*.png、視角表、旋轉台影格):圖像優先,數據其次。修正回合會增加步驟;記錄的內容絕不會被編輯。

  1. 建立骨架。 i2s.py new CASE --input IMG --subject "short noun phrase"。觀察圖片並自行撰寫主體短語(例如 "stocky cartoon troll"、"ceramic owl figurine"):它會被用於每個視角的提示詞中。輸入圖片會被複製、計算 sha256,並填充至最接近的生成器長寬比,使所有視角共用同一個鏡頭。
  2. 正面地圖。 i2s.py prep CASE(遮罩、MoGe-3 深度 + 焦距、Marigold 法線;單位以主體為準進行歸一化)。繼續前先檢查 ref/front_mask.png 和 ref/front_normals.png。主體選取錯誤 → --select。手繪稿 → --restyle。
  3. 視角。 i2s.py views CASE(9 個視角 + 1 個保留視角,預估約 $2;--set minimal 為 5 個)。觀察每個生成的影像:姿勢改變、多出肢體或主體被裁切都是不良視角。註冊會拒絕不一致的視角(IoU < 0.80 相對於其他視角的外殼),但請說出您看到的問題。沒有任何視角看到的區域需要以能觀察該區域的角度新增視角(--angles "-30:25"),而不是增加更多平滑處理(references/views.md)。
  4. 外殼。 i2s.py hull CASE:註冊每個視角(要求的角度僅為先驗:左右互換會被發現,前後方向則保留)、重新置中、篩選、記錄雕刻過程、對稱性檢測。在 case.json 中閱讀已註冊的角度;i2s.py symmetry CASE on|off 可覆寫檢測到的鏡像平面。
  5. 擬合。 i2s.py fit CASE --stage all(形狀 → 表面 → 細節,38 個記錄的調整次數),然後 cut(打開照片中顯示的手指間、腿間、手臂與身體間的間隙)、smooth(移除網狀物與斑點)、fit --stage polish。i2s.py run CASE 會按照此預設計畫依序執行步驟 2-8(references/fitting.md)。
  6. 檢查與迭代。 i2s.py check CASE 會為每個視角撰寫一張比對表:參考圖、參考法線、雕塑、法線誤差、輪廓差異。尋找腫塊、網狀物、缺失間隙、扁平特徵。針對這些問題進行操作:parts CASE --prompt "hands" 然後 fit --stage focus --region hands、cut --region hands、smooth --region box:...(references/checking.md)。未附上改善前後比對表之前,絕不宣稱已修正。
  7. 完成、Blender、影片。 finish(面平滑、OBJ/STL)、blender(從照片的攝影機重播每個步驟、360° 旋轉台、每個視角、sculpt.blend、GLB)、film(雙面板縮時攝影,以 360° 旋轉結束、旋轉台、視角表、英雄圖)(references/blender-and-delivery.md)。
  8. 報告與停止。 report 會寫入 out/REPORT.md、out/index.html 以及每個步驟的圖表。呈現縮時攝影、視角表與測量表格,說明哪些部分較弱,然後停止。由使用者決定下一步。

嚴格規則

  • 照片決定它自己看到的內容。 生成的視角僅填補照片看不到的部分;它們的深度絕不會被使用(不同視角間的深度差異可達數公分)。絕不要將生成視角的法線與照片的法線進行平均。
  • 註冊每個視角;絕不信任請求的角度。 生成的視角在 Troll 案例中偏差達 20–155°,大多是左右互換。搜尋允許這些偏差,但會將正面視角保留在前方、背面視角保留在後方(對稱主體的背面輪廓和正面相似)。請在 case.json 中閱讀已註冊的角度。
  • 在雕刻前先篩選。 與其他視角不一致的視角代表是不同的主體或姿勢:應拒絕它(並說明原因),而不是用它來切割雕塑。
  • 保留一個視角不參與擬合。 它永遠不會移動表面;其攝影機在擬合前就被凍結。報告它時應與用於擬合的視角分開。它也是生成的,因此衡量的是「一致性」,而非「真實性」。
  • 測量,不要僅靠目測。 IoU、輪廓距離、法線角度、粗糙度(相對於參考圖自身的粗糙度)、照片的深度。單一數字無法代表「品質」:應並列報告它們。
  • 距離場維持精確。 每個操作都會重新計算網格距離(帶狀區域內的精確三角形距離,之外使用 EDT)。使用不精確的場進行偏移、鏡像場本身、或模糊法線目標,會在本案例建構所依據的案例中產生階梯、波紋環和扁平鼻子(references/lessons.md)。
  • 記錄一切。 每次雕刻、調整、切割和光滑都是 build/steps/ 和 build/log.jsonl 中的一個步驟,可在 Blender 中重播並顯示在縮時影片中。絕不編輯已記錄的步驟;請新增一個新步驟。
  • 付費呼叫: 每次 fal 呼叫都通過案例預算(settings.budget_usd),其請求 ID 在等待前會儲存於 case.json 中,且不會盲目重新提交任何東西。FAL_KEY 永遠不會被列印或寫入。
  • 每個檢查點都有視覺回饋,且每部影片的第 0 影格都是一個完成的縮圖。
  • 說出哪些是憑空創造的。 僅從正面看到的主體背面,是生成器自身的猜測。

參考資料

檔案何時閱讀
references/inputs.md處理特殊輸入時;遮罩、重新風格、選取、匯入照片、僅有想法
references/views.md生成、判斷、註冊、篩選和新增視角時
references/fitting.md了解調整次數的用途、階段、參數、切割/平滑/聚焦、預設計畫
references/checking.md閱讀地圖表和指標、保留視角、下一步要修正什麼
references/blender-and-delivery.mdBlender 重播、影片、匯出、報告、審閱頁面
references/conventions.md世界座標系、攝影機、單位、檔案格式(用於編寫新工具)
references/lessons.md首批案例中出了什麼問題,以及為何有上述規則

模板:templates/CONTRACT.md(會複製到每個案例中)、templates/acceptance.json(目標值)。

相關技能