机器之心报导

修改:小舟、蛋酱

开源是永远的必杀技。

自从文本到图画开源模型 Stable Diffusion 开始版别发布以来,DreamStudio 一直是 Stability AI 新模型和功用的主要界面。迄今,用户现已借助 DreamStudio 创建了数百万张图画。

最近,DreamStudio 还晋级到了 SDXL,完成了比其前身 Stable Diffusion 2.1 更详细的图画和构图,并能用较短的 prompt 来创建描述性图画。

就现在来说,DreamStudio 现已能够生成这样的图画,效果不输 Midjourney 5.1:

几行代码安装,免费做图无上限:Stability AI公布DreamStudio开源版本

尽管 DreamStudio 供给了几乎没有门槛的图画生成办法,但它也有一个条件:付费。SDXL 版别的定价甚至还要更高一些。

几行代码安装,免费做图无上限:Stability AI公布DreamStudio开源版本

而且,对一部分技能过关的开发者来说,他们也希望能够在 DreamStudio 的根底上进行一些运用扩展。

或许是听到了网友们的心声?刚刚,Stability AI 发布了 DreamStudio 的开源版别 ——StableStudio。

几行代码安装,免费做图无上限:Stability AI公布DreamStudio开源版本

开源地址:github.com/Stability-A…

「我们信任,扩展技能落地的最佳方式是经过开放、社区驱动的开发,而不是闭源产品的私有化迭代。」Stability AI 表明。

在该公司的规划中,StableStudio 的方针是进行更广泛的社区合作,为生成式 AI 打造一个世界级的用户界面,让用户能够充分控制。尽管 DreamStudio 仍将是 Stability 公司保管的 StableStudio 的完成,但最终方针是培育一个能够超越任何由单一公司开发的项目。

具体来说,StableStudio 和 DreamStudio 有什么区别?
Stability AI 做了一些调整,使得该项目对社区更加友爱。包含:

  • 删除了 DreamStudio 专属品牌;

  • 一切在线 API 调用都已被插件系统替代,用户能够轻松更换后端

  • 删除了专属于 Stability 的帐户功用,例如计费、API 密钥管理等。

扩展功用

DreamStudio 开始被设想为 Disco Diffusion 的动画 studio,2022 年 Stable Diffusion 发布之后,DreamStudio 的重点就转向了图画生成。

受今年爆火的对话模型启示,4 月 Stability AI 发布了开源 LLM StableVicuna。DreamStudio 的开源版别 StableStudio 将和 StableVicuna 结合,推出谈天界面。

几行代码安装,免费做图无上限:Stability AI公布DreamStudio开源版本

StableVicuna 对话示例。

几行代码安装,免费做图无上限:Stability AI公布DreamStudio开源版本

Stable Diffusion XL 生成的「Stable Vicuna」。

Stability AI 表明,StableStudio 未来可能会更新以下功用:

  • 经过 WebGPU 进行部分推理

  • 经过 stable-diffusion-webui 进行部分推理

  • 桌面装置

  • ControlNet 东西

装置与运用

StableStudio 项目已在 GitHub 上线,其中包含快速装置办法。

几行代码安装,免费做图无上限:Stability AI公布DreamStudio开源版本

项目地址:github.com/Stability-A…
要运用 StableStudio,用户需求先装置 Node.js 和 Yarn。然后依照如下指令克隆 StableStudio 存储库

git clone https://github.com/Stability-AI/StableStudio.gitcd StableStudio
yarn
yarn dev

默许情况下,StableStudio 在 localhost:3000 上运行。用户需求准备 API 密钥才干运用默许的 Stability API 插件;如果没有,则需求在 DreamStudio 上创建帐户并获取密钥。

图画生成干流模型

无论是 DreamStudio,仍是开源版别的 StableStudio,其背面的根底模型都是当时大火的图画生成模型 Stable Diffusion。Stable Diffusion 因其能在消费级 GPU 上快速生成高质量图画而得到广泛运用。

Stable Diffusion 模型的技能最早来源于发表在 CVPR 2022 中的一篇论文《High-Resolution Image Synthesis with Latent Diffusion Models》。为了训练出 Stable Diffusion,研究团队动用了 4000 个 A100 Ezra-1 AI 超大集群, Stability AI 公司供给了这些算力。

2022 年 8 月,Stability AI 宣布发布 Stable Diffusion 并开源,11 月,他们又发布了 Stable Diffusion 2.0 版别。现在,Stable Diffusion 已替代 GAN 成为图画生成范畴干流模型。

几行代码安装,免费做图无上限:Stability AI公布DreamStudio开源版本

作为产品渠道 DreamStudio 的开源版别,StableStudio 把一切在线 API 调用替换为插件系统,能让用户轻松更换后端,将进一步推动图画生成范畴的发展。

参阅链接:stability.ai/blog/stable…