Stability AI 推出了一个新的 AI 3D 模型和图像创建器，它将改变我们从简单的 2D 图像生成 3D 内容的方式。这款名为 Stable Zero123 的新 3D 图像 AI 模型创建器目前处于研究预览阶段，正在创作者和开发者中掀起波澜，尤其是那些参与视频游戏和游戏行业的创作者和开发者。
该模型能够从单张照片中解释和重建物体的深度和尺寸，这是一个重大的飞跃，有可能增强虚拟现实体验并简化各个领域的设计过程，包括工程和建筑。
Stable Zero123 采用了一种称为分数蒸馏采样 （SDS） 的独特方法，这是其将平面图像转换为三维奇迹的核心。这一突破对于虚拟现实来说可能是一个福音，在虚拟现实中，沉浸式环境至关重要，而在建筑等行业中，3D可视化设计至关重要。
Stable Zero123 新 AI 3D 图像创建器
AI 3D 模型制作器通过 Hugging Face 平台提供，该平台以促进机器学习模型的共享而闻名。Stability AI 还建议将 Stable Zero123 与 Three Studio 软件配对，以有效管理 3D 内容。
除了 Stable Zero123 之外，Stability AI 一直在开发其他旨在增强模型功能的工具。其中包括天空替换器和用于创建 3D 模型的工具，两者目前都处于个人预览阶段。这些工具旨在提供与 Stable Zero123 协同工作的专用功能，进一步扩展其对用户的实用性。
尽管其令人印象深刻的功能，但 Stable Zero123 确实带来了一些可能给某些用户带来挑战的要求。AI 模型需要强大的计算能力，这意味着需要高端显卡或专业训练 GPU 才能充分发挥其潜力。这种硬件要求可能会限制模型的可访问性，特别是对于可能无权访问此类资源的业余爱好者或小规模创作者。
- 稳定 Zero123：
- 生成对象的新视图，从各个角度显示 3D 理解。
- 与以前的型号（如 Zero1-to-3 和 Zero123-XL）相比，质量有了显着提高。
- 由于改进了训练数据集和海拔调节而增强了功能。
- 技术细节：
- 基于 Stable Diffusion 1.5。
- 使用与 SD1.5 相同数量的 VRAM，用于生成一个新视图。
- 需要更多时间和内存（建议使用 24GB VRAM）来生成 3D 对象。
- 模型使用和可访问性：
- 发布用于非商业和研究用途。
- 提供可下载的砝码。
- 创新和改进：
- 改进了 Objaverse 的训练数据集，专注于高质量的 3D 对象。
- 在训练和推理期间提供海拔调节，以实现更高质量的预测。
- 预先计算的数据集和改进的数据加载器，使训练效率提高了 40 倍。
- 可用性和应用：
- 在Hugging Face上发布，供研究人员和非商业用户使用。
- 改进了threestudio的开源代码，以支持Zero123和Stable Zero123。
- 使用分数蒸馏采样 （SDS） 优化具有稳定 Zero123 的 NeRF。
- 可适用于文本到 3D 生成。
- 限制和联系信息：
- 模型仅用于研究，而非商业用途。
- 提供联系方式，以便查询有关商业应用的信息。
- 通过时事通讯、社交媒体和 Discord 社区提供更新和更多信息。
Stable Zero123 的当前限制
Stable Zero123 目前的缺点之一是它无法生成具有透明背景的图像，这一功能对于将视觉效果无缝集成到视频中至关重要。尽管如此，鉴于这些领域对高质量 3D 内容的需求不断增长，该模型在视频游戏和游戏领域的前景是不可否认的。Stability AI 并没有固步自封;该公司正在积极努力改进 Stable Zero123 的应用程序并克服其当前的局限性。为了帮助用户充分利用 Stable Zero123 等 AI 模型，Stability AI 还提供有关机器学习和稳定扩散的综合课程。这项教育计划是公司致力于为创作者提供在创意项目中脱颖而出所需的知识和工具的一部分。
Stability AI 推出的 Stable Zero123 标志着 AI 驱动的 3D 图像领域的一个重要里程碑。尽管仍处于开发的早期阶段，但该模型对内容创作的影响潜力是巨大的。随着 Stability AI 不断完善和增强这项技术，未来看起来很有希望为世界各地的创作者和开发人员开发更复杂、更易于访问的工具。人们对 Stable Zero123 将带来什么寄予厚望，创意界正在密切关注 Stability AI 为数字内容创作的新可能性铺平道路。