InstanceAssemble是一個輕量級的佈局到圖像生成框架,支持精準的空間控制,能夠在稀疏和密集佈局上實現最先進的性能。該模型在NeurIPS 2025 大會上進行了介紹,並引入了DenseLayout 和Layout Grounding Score (LGS) 用於嚴格評估。 InstanceAssemble旨在為圖像生成任務提供靈活且高效的解決方案。
需求人群:
"該產品適合研究人員和開發者,他們需要在圖像生成領域實現更高的靈活性和控制力。 InstanceAssemble的高效性和準確性使其成為新一代圖像生成任務的重要工具。"
使用場景示例:
在室內設計中,根據給定佈局生成高質量的室內場景。
使用該模型為電子商務平台生成產品展示圖。
為動畫製作提供快速的場景生成支持。
產品特色:
支持稀疏和密集佈局的圖像生成。
引入Layout Grounding Score 進行評估。
提供基於文本和視覺控制的模型變體。
支持快速推理和圖像生成。
兼容HuggingFace 平台,方便模型下載和使用。
使用教程:
克隆項目到本地:git clone https://github.com/FireRedTeam/InstanceAssemble
創建並激活環境:conda create -n InstanceAssemble python=3.10 -y && conda activate InstanceAssemble
安裝依賴項:pip install -r requirements.txt
下載模型權重到預訓練目錄:huggingface-cli download FireRedTeam/ InstanceAssemble --local-dir ./pretrained
運行推理腳本進行圖像生成:python inference.py --model_type sd3 --input_json ./demo/bigchair.json