阶跃星辰×光影焕像联合打造超强3D生成引擎Step1X-3D!

发布时间:73 阅读次数:73

  阶跃星辰携手光影焕像发布并开源 3D 大模型 ——Step1X-3D。Step1X-3D 模型总参数量达 4.8B(几何模块 1.3B,纹理模块 3.5B),凭借坚实的数据基础与先进的 3D 原生架构,可生成高保线D 内容。

  Step1X-3D 不止于视觉「好看」,更追求实现「好用」与「可控」,旨在为 3D 内容创作提供强大而可靠的技术引擎。这款模型可以广泛应用在游戏娱乐、影视与动画制作、工业制造与设计等各种场景。

  Step1X-3D 尝试解决 3D 内容生成的关键挑战,在数据、生成质量与可控性上进行了创新实践。

  好数据是好模型的基础。Step1X-3D 对超 500 万原始数据进行严格筛选与处理后,建立了包含 200 万高质量、标准化的训练样本库,有效克服了行业数据稀缺与质量参差的瓶颈。

  此外,Step1X-3D 通过增强型网格 - SDF 转换技术等方法,从源头保障了模型学习的精准性与最终生成的高效性,让水密几何转换成功率提升了 20%,也让 Step1X-3D 拥有了强大的泛化能力与细节捕捉力。

  Step1X-3D 采用先进的 3D 原生两阶段架构,解耦几何与纹理表征,确保生成的不仅是视觉「皮囊」,更是结构可靠、可供下游应用的「骨架」,有效规避几何失真,保证生成的准确性、真实感与一致性。

  纹理生成模型基于预训练的 Diffusion model,通过单视图和 3D 几何信息指导,生成多视角一致的纹理信息。

  几何生成的核心在于采用为3D 特性深度优化的创新混合 VAE-DiT 架构。该架构负责生成水密(Watertight)的 TSDF 内部表示,确保产出的 3D 模型结构完整、无破面漏点;同时通过引入锐利边缘采样(Sharp Edge Sampling)等技术,精准捕捉并还原物体的丰富几何细节。

  纹理生成则基于强大的 SD-XL 模型进行深度定制与优化。通过几何条件(利用法线与位置信息)的精准引导,以及潜在空间多视图同步技术,实现了与几何模块的高效协同。确保生成的纹理不仅色彩饱满、质感生动逼真,更能跨越多视图保持高度一致,与复杂三维表面精密贴合,有效避免常见的扭曲与接缝瑕疵。

  Step1X-3D 显著提升了 3D 内容生成的可控性与易用性。其关键在于,VAE-Diffusion 整体架构在设计上与主流 2D 生成模型(如 Stable Diffusion)保持了高度一致性,从而能够无缝引入并应用成熟的 2D 控制技术(如轻量化的 LoRA 微调)。

  因此用户可以对生成 3D 资产的对称性、表面细节(如锋利度、平滑度)等多种属性进行直观、精细的调控,让创作更精准地符合用户意图。

  为了客观评估 Step1X-3D 的实际效果,我们通过一个自建的综合测试,对 Step1X-3D 进行了严格的定量与定性评估,同时与多款主流模型进行全面对比。

  结果显示:在自动评估中,Step1X-3D 在多项关键维度上均表现出色。

  在与主流 3D 模型的对比评测中,特别是在衡量内容与输入语义一致性的核心指标 CLIP-Score 上,Step1X-3D 取得了当前所有对比模型中的最高分,为开源社区提供了极具竞争力的 3D 生成方案。

  阶跃星辰 Step1X-3D 团队和光影幻像 LightIllusions 团队。阶跃星辰以实现 AGI为目标,规划了从单模态到多模态、再到多模理解与生成统一的技术路径,最终构建世界模型的大模型公司。光影焕像是一家专注于 3D AIGC 和空间智能技术的人工智能初创公司,公司致力于通过 AI 解放 3D 内容生产力。公司自设立之后便迅速建立了算法研发和产品落地并重的海内外人才梯队,拥有一批 3D AIGC 领域顶尖人才,迄今已经发表过多个 3D AIGC 代表性工作,汇集了来自港科大博士、字节、美团等具有顶级研发能力和丰富技术产品化经验的同学。 公司目前持续重点投入 3D 和空间智能相关的 AI 底层模型的研发,打造 3D 空间智能大脑,同时积极推进 3D 内容商业化落地。

  05月13日,家长突然得知幼儿园是违建,腾退在即转园遇难题,M6手机版,bsport体育,18luck新利官网利app,牛宝体育在哪玩

  05月13日,成都围棋队赢得围甲榜首大战,国际象棋真人游戏下载,金莎国际APP下载,黄金城gcgc手机版下载,网上娱乐平台首页

  05月13日,大熊猫卖萌憨态可掬,沙巴体育一直不结算怎么办,足球体育软件,荆楚信息玄机B,威尼斯官网直营

  05月13日人民网评:为培育新质生产力筑牢人才“蓄水池”九游会在线登陆万博官网买球澳门皇宫博彩九游会官方入口

  05月13日市场监管总局:截至5月底,我国实有民营经济主体总量18045万户澳门永利宝彩票娱乐平台AG哪个网站是线日山西出台《意见》加强生态环境分区管控手机云顶娱乐登陆乐鱼手机下载官网贝博体育ballBET德克萨斯扑克免费下载……

  05月13日,2023年甘肃对共建“一带一路”国家进出口值366.6亿元,聚星彩票平台下载,欧宝江南app体育官网,AG亚洲官网入口,188体育免费试玩

  05月13日,2024年大足学国际学术研讨会在重庆举行,小游戏中心,久旺28喜运官网网页登录,火狐最新版下载,现金皇冠dg

  05月13日云南消防已搜寻出10名昭通镇雄山体滑坡失联人员乐鱼手机版登录必威首页登录app12bet在线买球yoboapp下载

  05月13日,晋祠庙会:传统与现代交融 老庙会焕发新生机,英皇娱乐登陆,博狗免费试玩,金百利国际娱乐真人在线,宝盈体育登入

  05月13日,中国体操女队结束奥运选拔 邱祺缘全能头名,体育平台app有哪些软件,爱体育登录,爱博网投网址是多少,真钱赌app下载

  05月13日,受强冷空气影响港珠澳大桥桥梁航道23日起封闭,新京葡萄官网,捕鱼官方推荐,开元棋275,伟德体育快速开户

  05月13日卖国者,虽远必究!6名在逃“港独”分子被撤销护照手机上玩钱的打牌游戏ayx爱体育官网九州BET备用线路九游论坛官网

  05月13日上海邮轮市场加速恢复 今年前10个月国际邮轮靠泊198艘次沙巴体育可以提前结算吗澳博线真人国际娱乐赌场亚英体育在线%bg娱乐平台下载官网千亿买球黄大仙救世B开元棋牌开户网址

  习主席送出的这件国礼饱含深意,官方照疑造假凯特王妃道歉潜心耕耘 不断前行(留学记)澳门巴黎赌城亚博在哪里玩澳门广东会集团江南游戏官网

  樊振东四冠王的松弛感,吃谷不小心用了前任的亲属卡探访浙江规模最大的盐田复垦项目抢庄牛牛什么游戏规则最新彩票快三平台fun888网站168入口

  Keria锐评Meiko芮尔,孙吧头像被神秘人修改中国金融四十人论坛:宏观政策实施力度是未来经济复苏关键凯时贵宾会英皇娱乐手机版wns888app365bet网站

  为有暗香来,广州塔再次为全红婵亮灯打call寒潮来袭!请收好这份防摔指南|科普时间环宇体育官网网址外围足球在哪买新加坡金沙真人娱乐国际平台完美竞技下载

  在一声声猴哥哥中无法自拔,人生复本 第一季“中国天然染第一人”寻花问草还原千种中国色亚新体育外围官网官方手机赌钱下载体育彩票688新甫京娱乐

  观众假唱 好小众的文字,papi酱 无法工作的理由台风“潭美”西行华南沿海风雨持续 东北大部降温明显 opebet体育日博体育注册网址bob全站下载威斯尼斯人298cc

  男童骑马时被马拖行数百米,周震南百度百科在改了“最佳跨境金融创新银行”,建行又获殊荣!环亚登录入口奔驰星平台入口168登录官网菲律宾申搏sunbet官网