爱奇飞网

网站首页数码科技 >正文

StabilityAI推出AI3D模型和图像创建器StableZero123

开心的月饼 2023-12-25 08:54:08 数码科技

StabilityAI推出了新的AI3D模型和图像创建器,它将改变我们从简单2D图像生成3D内容的方式。这款新的3D图像AI模型创建器名为StableZero123,目前正处于研究预览阶段,并在创作者和开发者中掀起波澜,尤其是视频和游戏行业的创作者和开发者。

StabilityAI推出AI3D模型和图像创建器StableZero123

该模型能够从单张照片中解释和重建物体的深度和尺寸,这是一个重大飞跃,有可能增强虚拟现实体验并简化工程和建筑等各个领域的设计流程。

StableZero123采用一种称为分数蒸馏采样(SDS)的独特方法,这是其将平面图像转换为三维奇迹的能力的核心。这一突破可能对虚拟现实和建筑等行业来说是一个福音,在虚拟现实中,沉浸式环境至关重要,在建筑等行业中,3D可视化设计至关重要。

稳定的Zero123新AI3D图像创建器

AI3D模型制作器通过HuggingFace平台提供,该平台以促进机器学习模型共享而闻名。StabilityAI还建议将StableZero123与ThreeStudio软件配对,以有效管理3D内容。

除了StableZero123之外,StabilityAI还致力于开发其他旨在增强模型功能的工具。其中包括天空替换器和用于创建3D模型的工具,两者目前都处于私人预览状态。这些工具旨在提供与StableZero123协同工作的专门功能,进一步扩展其对用户的实用性。

尽管其功能令人印象深刻,但稳定版Zero123确实有一些要求,可能会给某些用户带来挑战。AI模型需要强大的计算能力,这意味着需要高端显卡或专业训练GPU才能充分发挥其潜力。此硬件要求可能会限制模型的可访问性,特别是对于可能无法访问此类资源的爱好者或小规模创作者而言。

稳定的Zero123:

生成对象的新颖视图,从各个角度展示3D理解。

与之前的型号(例如Zero1-to-3和Zero123-XL)相比,质量显着提高。

由于改进的训练数据集和海拔条件而得到增强。

技术细节:

基于稳定扩散1.5。

生成一个新视图时消耗与SD1.5相同数量的VRAM。

需要更多时间和内存(建议使用24GBVRAM)来生成3D对象。

模型的使用和可访问性:

发布用于非商业和研究用途。

提供可下载的权重。

创新和改进:

改进了Objaverse的训练数据集,重点关注高质量3D对象。

在训练和推理过程中提供海拔调节,以实现更高质量的预测。

预先计算的数据集和改进的数据加载器,使训练效率提高40倍。

可用性和应用:

在HuggingFace上发布,供研究人员和非商业用户使用。

改进了Threestudio的开源代码,以支持Zero123和稳定版Zero123。

使用分数蒸馏采样(SDS)来优化具有稳定Zero123的NeRF。

可适用于文本到3D生成。

限制和联系信息:

模型仅供研究,不得用于商业用途。

提供有关商业应用咨询的详细联系信息。

可通过时事通讯、社交媒体和Discord社区获取更新和更多信息。

目前稳定Zero123的限制

StableZero123目前的缺点之一是它无法生成具有透明背景的图像,而这一功能对于将视觉效果无缝集成到视频中至关重要。尽管如此,鉴于这些领域对高质量3D内容的需求不断增长,该模型在视频和游戏领域的前景是不可否认的。

稳定性AI并没有满足于现有的成就;该公司正在积极致力于改进StableZero123的应用程序并克服其当前的局限性。为了帮助用户充分利用像StableZero123这样的人工智能模型,StabilityAI还提供了有关机器学习和稳定扩散的综合课程。这项教育计划是公司致力于为创作者提供在创意项目中脱颖而出所需的知识和工具的一部分。

StabilityAI推出的StableZero123标志着AI驱动的3D图像领域的一个重要里程碑。尽管仍处于开发的早期阶段,但该模型影响内容创作的潜力是巨大的。随着StabilityAI不断完善和增强这项技术,为世界各地的创作者和开发者开发更复杂、更易于使用的工具的未来看起来充满希望。人们对StableZero123带来的期待很高,创意界正在密切关注StabilityAI为数字内容创作的新可能性铺平道路。


版权说明:本站所有作品图文均由用户自行上传分享,仅供网友学习交流。若您的权利被侵害,请联系我们


标签:

站长推荐
栏目推荐
阅读排行