近日,階躍星辰公司震撼發布了其傾力打造的最新3D大模型——Step1X-3D,并慷慨地宣布將此模型開源。這款模型擁有驚人的4.8B總參數量,其中,1.3B專注于幾何模塊的精細構建,而3.5B則致力于紋理模塊的生動呈現。Step1X-3D通過創新的3D原生兩階段架構設計,實現了幾何與紋理表征的巧妙解耦,從而確保了生成內容的結構穩固性和視覺逼真度。
Step1X-3D之所以能夠達到如此卓越的效果,離不開其堅實的數據支撐和先進的算法優化。階躍星辰團隊從超過500萬的原始數據中精挑細選,最終建立了包含200萬高質量、標準化樣本的訓練數據庫。該模型還引入了增強型網格-SDF轉換技術,極大地提升了學習的準確性和生成效率。在幾何生成層面,混合VAE-DiT架構確保了3D模型結構的完整性,而銳利邊緣采樣技術則捕捉到了精細入微的幾何細節。在紋理生成方面,Step1X-3D則基于SD-XL模型進行優化,并結合了幾何條件引導和多視圖同步技術,使得生成的紋理色彩豐富、細節生動。
令人矚目的是,Step1X-3D的架構設計與主流的2D生成模型,如Stable Diffusion,保持高度兼容,并融入了成熟的2D控制技術,如輕量化的LoRA微調。這一特性使得用戶能夠直觀地調控生成3D資產的對稱性、表面細節(如鋒利度、平滑度)等多種屬性,從而更精確地滿足創作需求。
階躍星辰不僅在模型研發上取得了顯著成果,還慷慨地分享了其數據清洗、預處理策略,以及800K高質量的3D資產。同時,公司還開源了3D VAE、3D geometry Diffusion以及texture Diffusion的全鏈路訓練代碼。這些舉措無疑將為3D生成技術的發展注入強勁動力,為開發者提供寶貴的資源和工具。