Adobe 推出AI绘画工具 Firefly,会取代 Midjourney 和 Stable Diffusion 么? 原创 逗砂 AIGC研修社 2023-03-22 08:09 发表于浙江


Adobe 终于坐不住了,昨晚发布了对标 Midjourney、Dall-E 和 Stable Diffusion 的AI绘画生成器 Firefly,而这个名为Adobe Firefly的新型生成AI工具家族是否会像1990年发布的Photoshop 一样具有影响力呢?

官方链接:https://www.adobe.com/sensei/generative-ai/firefly.html?sdid=NYTLQVKP&mv=social&mv2=paid-influencer

作为 Photoshop 和 Illustrator 等一系列设计工具背后的巨头,Adobe 其实已经将 AI图像生成技术融入其软件多年,但 Adobe Firefly 将其提升到了一个全新的水平。其第一个 Firefly beta 版本将文本转图像生成引入了 Photoshop,并赋予了你在 Illustrator 中应用文本样式的能力,其中还包括其他功能。
与 现有的AI生成工具的关键区别在于,Adobe Firefly 会更加开放其AI模型训练所使用的数据。Adobe表示,它的第一个 beta 模型是基于 Adobe Stock 图像、公开许可的内容和版权已经到期的公共领域内容进行训练的。
Adobe正在谨慎地探索这个领域,现在开放了 Firefly beta 注册。然而,注册并不一定能够授予您使用新工具的许可。Adobe表示,beta过程将用于“与创意社区和客户接触,随着这种变革性技术的发展而进行互动”。
虽然可能需要一段时间才能看到 Adobe Firefly 的新AI模型在其全部 Creative Cloud 应用程序范围内推出,但早期演示显示,Firefly 可以通过能够简单地描述您正在寻找的图像、风格或文本效果的能力,将其应用程序的可用性和创意潜力提升到新的高度。
首批受益于 Firefly beta 的应用程序包括 Adobe Photoshop、Adobe Illustrator、Adobe Express 和 Adobe Experience Manager。Adobe表示,这个 Firefly beta 只是正在制定的一个系列中的第一个AI模型,所有这些模型都可能被集成到Creative Cloud和Express工作流程中。
那么,Adobe Firefly到底是什么,与顶级的AI绘画工具相比如何?接下来的内容会一一解答这些问题。

ADOBE FIREFLY: 如何注册?

测试申请:https://firefly.adobe.com/
您现在可以申请成为Adobe Firefly beta测试人员。目前还不清楚有多少人将获得beta访问权限,但Adobe将利用这个过程来调整其模型,然后再将其完全集成到应用程序中。
Adobe还没有透露beta过程将持续多长时间,但表示将利用这段时间“与创意社区和客户接触,随着这种变革性技术的发展而进行互动”。完全推出的速度可能取决于这个beta期间的成功程度。
其实这里想吐槽一下,之前 Adobe 在 UI设计领域慢了,完全没有打过 Figma,自己推出的UI设计工具并没有太大水花,后面虽然把 Figma收购了。但是这次AI绘画领域很不一样,例如 midjourney 目前的现金流非常健康,Adobe 对于 figma 的套路不一定能用在 AI绘画工具上面。

ADOBE FIREFLY:适用于哪些应用程序?

首批受益于Firefly集成的Adobe应用程序将是 Adobe Photoshop、Adobe Illustrator、Adobe Express 和 Adobe Experience Manager。这些应用程序将获得新功能,例如文本生成图像、AI生成文字效果等,您可以在下面的演示中看到它们的实际效果。
新的AI文本效果在 Illustrator 等软件中也会有类似的功能。例如,您可以键入一个特定的提示,如 “夜晚有许多萤火虫,散景光”,AI生成器将制作出符合该描述的字体。这对于营销、社交媒体等领域的人士尤其是没有数字艺术背景的人士来说,具有巨大的可能性。
展望未来,Illustrator 将能够将手绘的字体转化为数字现实,而 Adobe Express将允许您从简单的提示中生成社交媒体模板,例如“从情绪板创建模板”。

Adobe Firefly 跟 Midjourney和SD比效果如何?

关于Adobe Firefly、Midjourney 和 Dall-E 的比较,目前还为时过早。其中一个最大的区别在于AI模型的训练。
Adobe表示,这个第一个 Firefly 模型是基于“Adobe Stock图像、公开许可的内容以及版权已过期的公共领域内容”进行训练的,这意味着它将可以用于商业用途,而不会存在版权问题的潜在威胁。与此同时,其他AI艺术生成器卷入了可能的集体诉讼,因为创建者认为它们涉及 “非法使用版权作品”。
有趣的是,Adobe 还表示计划“让为训练提供内容的创作者从 Adobe Stock 数据集生成的图像收益 Firefly 产生的收入”。具体 Adobe 计划如何实现尚未确定,因此虽然这个意图值得称赞,但我们很想听到更多详细信息。该公司表示,“一旦 Firefly 脱离测试阶段,将分享有关如何补偿贡献者的详细信息”。
同样,Adobe 表示,其内容真实性倡议(该倡议包括 Getty 和 Microsoft 等成员)的一个更广泛的目标是为图像创建一个通用的“请勿训练”内容凭据标签,这将允许艺术家将其作品排除在 AI 图像生成器的训练之外。同样,虽然这是一个有希望的发展,但目前仅处于“目标”阶段。
下面是官方展示的几个重点功能:

无限快速的创意选择

其实就是图片的生成和编辑功能。这个功能其实之前已经有做成PS的插件了,大部分的SD的绘画工具也都集成了这个功能。

即时创意积木

这个功能很棒,我比较期待,可以直接生成可编辑的矢量文件,这个在目前的AI绘画工具里是看不到的,也是非常急需的一个功能。

惊人的视频编辑功能

探索文生视频这个领域,不过我不清楚他们的这个文本生成视频跟昨天GEN-2的文本生成视频是不是一样。GEN2发布:首个多模态视频工作流

文本生成设计海报

这个功能也比较棒,感觉是个升级版的海报生成器,根据提示和参考图。如果真的能实现,那么确实简化了大部分的平面设计工作了。不知道他们目前做到什么程度了。

面向未来的3D

探索人工智能在3D领域的工作,比如直接将简单的3D变成效果图等。这个其实在之前的 controlnet 的介绍里也有相关的工作流。
游戏要结束了:ControlNet正在补完AIGC工业化的最后一块拼图

ADOBE FIREFLY:它的前景?

Adobe Firefly 是 Adobe 的重大时刻。虽然许多人已经使用基于 AI 的 Adobe 工具(例如 Photoshop 的神经网络滤镜),但 Firefly 可能会为一个全新的受众群体打开大门 —— 你只需描述任何东西,从图像到插图和视频,软件 “ 联合驾驶员”(正如 Adobe 所称的其 AI)将给你提供帮助。
当然,这并不是新鲜事,Midjourney 和 Stable Diffusion 等公司已经在将 AI 绘画工具投入市场方面抢先于 Adobe。另外,目前还不清楚 Adobe 试图使 Firefly 符合伦理要求(通过限制其训练数据)会对其整体实用性和多功能性产生多大影响。
比较合理推测是,Firefly 只会为现有的 Adobe 客户提供一些非常有用的新工具,以便他们构想新的创意,而不是吸引大量从 Midjourney 等工具转移过来的客户。