Stability AI发布更新,进入3D内容生成方向
近日,据海外媒体报道,图像生成模型Stable Diffusion开发商Stability AI发布了最新的功能更新,尤其是对Stable 3D模型的3D内容生成的功能更新。
在此之前,Stable Diffusion主要是2D图像的生成,而Stable 3D模型将做出改变,它提供的功能可以支持任何类型的3D内容创作,包括图形设计甚至视频游戏开发。
除了涉足3D内容生成之外,Stability AI还推出了Sky Replacer工具,顾名思义,Sky Replacer工具的设计正是为了实现在2D图像中对天空的替换。此外,Stable Diffusion还提供了稳定微调(Stable Fine-Tuning)功能,旨在帮助企业加快特定用例的图像微调过程。
另外,Stability AI将在Stability AI API生成的图像中集成一个不可见的水印,用于内容生成认证。上述的这些更新都是为了帮助企业进行创造性的开发流程,生成式人工智能已经越来越多地成为企业工作流程的一部分。
Stability AI首席执行官Emad Mostaque表示,这是为了给有创意的故事讲述者提供他们需要的工具,让他们对图像有额外更多的控制。
在图像生成领域的竞争日益激烈。老牌公司Adobe已经瞄准了这个市场,推出了与公司设计软件紧密集成的Firefly工具。Midjourney也一直在为其技术添加越来越多的新功能,以帮助设计师生成图像。OpenAI最近也发布了DALL-E 3模型,改进了在图像中生成文本的功能。
Emad Mostaque非常清楚自己的竞争对手,他的目标是在几个方面帮助Stability AI脱颖而出。他特别强调,Stability AI现在正从仅仅关注模型转向关注创意领域。有了新的Sky Replacer和Stable Fine-Tuning功能,超越了生成图像的核心基础模型。
在图像中替换背景并不是一个新概念。在非生成式人工智能应用中,背景通常被绿屏和色度键等技术所取代。
Emad Mostaque表示,Stability AI是在这些经典技术的基础上建立起来的,并将工作流程自动化,为业务用户提供快速高效的流程。改变天空的背景颜色也不仅仅是添加某种形式的创造性天赋,它是一种具有非常具体和实际用例的功能。例如,Sky Replacer功能就非常适合房地产行业。
他指出,用户希望能够有不同的背景,不同的灯光效果。从根本上说,他强调这一切都是为了提供控制,因为组织机构有自己的工作流来生成图像和内容。Stability AI所做的是构建优化的工作流,以帮助实现不同用例所需的控制。Sky Replacer是我们在过去6到12个月的经验基础上推出的一系列产品中的第一个。
新的Stable 3D模型通过扩展Stable Diffusion中使用的扩散模型来包括额外的3D数据集和矢量化。
Emad Mostaque解释道,Stable 3D是由Stable Diffusion和Stability AI在Objaverse-XL上的工作建立起来的,Objaverse-XL是全球最大的开放3D数据集之一。长期以来,构建和渲染3D图像一直是一个资源密集型的过程,但他乐观地认为,Stable 3D将比传统的3D图像生成方法更有效。他强调,Stability AI仍处于早期阶段,但他乐观地认为,随着时间的推移,这项技术将稳步发展和扩展。与传统的3D模型创建相比,这是非常高效的。传统上需要很长时间才能创造的东西,现在很快就能获得。
延伸阅读:
- Stability AI发布开源图像生成模型平台StableStudio
- Stability AI发布文本到图像大模型DeepFloyd IF
- Stability AI发布开源大语言模型StableLM,目前参数在30亿到70亿之间
Powered by Froala Editor