Adobe 推出了名为Firefly的新 AI 模型系列，从而进入生成式 AI 游戏。

Firefly 专注于将 AI 引入 Adob​​e 的应用程序和服务套件，特别是用于生成媒体内容的 AI，Firefly 将由多个 AI 模型组成，“适用于各种不同的用例”，Adobe 生成 AI 副总裁 Alexandru Costin 在一次采访中说到。

它是 Adob​​e 在去年年度 Max 会议期间在 Photoshop、Express 和 Lightroom 中推出的生成人工智能工具的扩展，用户可以通过简单地描述来创建和编辑对象、合成和效果。随着人们对这项技术的热情高涨，Adobe 竞相跟上步伐，例如允许贡献者在其内容市场上销售 AI 生成的艺术品。

“Firefly 是我们人工智能之旅的下一步——将我们新的‘gentech’模型与数十年来在成像、排版、插图等方面的投资结合在一起，以生产资产”Costin 说。“我们将为客户的工作流程带来这种价值，在这些工作流程中，跨 Creative Cloud、Experience Cloud 和 Document Cloud 创建内容。”

目前的 Firefly 处于测试阶段并且没有确定的定价（Adobe 表示即将推出），它提供了一个单一模型，旨在根据描述生成图像和文本效果。该模型使用数亿张照片开发，很快就能在 Adob​​e 应用程序（包括 Express、Photoshop、Illustrator 和 Adob​​e Experience Manager）中根据文本提示创建内容。（目前，您必须访问一个网站才能使用它。） 

除了基本的文本到图像生成之外，Adobe 的第一个 Firefly 模型还可以像 la Prisma 一样将不同的样式“转移”到现有图像。根据用户提供的描述，它还可以将样式或纹理应用于字母和字体。

Adobe 表示，使用 Firefly 模型创建的艺术品将包含元数据，表明它部分或全部由 AI 生成。这是一个实际的考虑，也是一个法律的考虑；ArtStation 等平台上的艺术家们举行了抗议活动，表达他们对人工智能生成的新艺术洪流的不满，而中国最近成为第一个禁止人工智能生成的无水印媒体的国家。

“有了 Firefly，每个创作内容的人——无论他们的经验或天赋如何——都将能够使用他们自己的语言来按照他们梦想的方式生成内容，” Costin 说。 

为创作者而建

在技​​术层面上，第一个 Firefly 模型与 OpenAI 的DALL-E 2和Stable Diffusion等文本到图像 AI 没有什么不同。两者都可以将一幅图像的风格转移到另一幅图像，并从文本描述中生成新图像。

但 Adob​​e 声称 Firefly 将避免其许多竞争对手已成为受害者的道德和后勤陷阱。这是一项艰巨的任务。

AI 喜欢第一个 Firefly 模型，通过对现有图像进行“训练”，“学习”根据文本提示生成新图像，这些图像通常来自通过拖网公共图像托管网站拼凑而成的数据集。一些专家建议，使用公共图像（即使是受版权保护的图像）的训练模型将受到 美国 合理使用原则的保护，但这个问题不太可能很快得到解决——尤其是考虑到 海外提出的对比法律。

也就是说，流行的 AI 艺术工具背后的两家公司Midjourney 和Stability AI 正处于一起法律案件的十字路口， 该案件指控他们通过在网络抓取的图像上训练他们的工具侵犯了数百万艺术家的权利。图片供应商 Getty Images 已分别将 Stability AI 告上法庭，据报道，该公司未经许可使用其网站上的数百万张图片来训练艺术生成模型Stable Diffusion。

除了关于艺术家和平台补偿的未解决问题之外，生成式人工智能更紧迫的问题之一是它倾向于从用于训练它的数据中复制图像、文本等——包括受版权保护的内容。一些图像托管平台已经禁止人工智能生成的内容，因为担心法律反作用力，专家警告说，如果公司无意中将这些工具生成的受版权保护的内容整合到他们销售的任何产品中，那么生成人工智能工具可能会使公司面临风险。

Adobe 的解决方案可以说是专门针对来自公司免版税媒体库Adob​​e Stock 的内容以及版权已过期的公开许可和公共领域内容来训练 Firefly 模型。Adobe 表示，未来用户将能够使用自己的内容来训练和微调 Firefly 模型——将模型的输出导向特定的风格和设计语言。 

Adobe 还表示，它正在为 Stock 贡献者探索一种补偿模式，使他们能够“将自己的才能货币化”，并从 Firefly 产生的任何收入中受益。它可能看起来有点像 Shutterstock 最近推出的Contributors Fund，该基金为那些用于训练 AI 艺术模型的创作者提供补偿。 

但选择的内容创作者将能够选择退出培训，Adobe 表示，通过在他们的作品上附加“不培训”凭证标签。

Costin 说：“我们理解，对于生成式 AI 将对创作者从技能中获益、保持信誉和控制他们的工作的能力产生的影响，以及生成内容在商业环境中的可行性存在疑问，我们都存在疑问。” “我们正在设计生成式 AI，以支持创作者从他们的技能和创造力中获益。”

艺术家有他们的理由，比如他们认为人工智能生成的他们风格的艺术作品并没有恰当地归功于他们。他们还害怕与可用于生成令人反感的内容的模型相关联，例如极度暴力的图像、对性别、种族和性取向的偏见描述以及未经同意的深度伪造。

关于第二点，Costin 说 Firefly 模型是使用“精心策划”和“包容性”的图像数据集进行训练的，并且 Adob​​e 采用了一系列技术来检测和阻止有毒内容，包括自动和人工审核和过滤器。历史表明，这些措施是可以绕过的，但科斯汀建议，这将是一个经过仔细指导（如果不完美）的学习过程。

“我们在模型方面投入了大量资金，以帮助防止 Firefly 生成的内容出现偏见和伤害。这些模型分析提示和内容，以确保 Firefly 生成代表文化和种族平衡的各种图像，并确保 Firefly 不会生成有害图像，”Costin说。“我们将定期更新 Firefly 以提高其性能并减轻其输出中的危害和偏见。我们还为我们的用户提供反馈机制，以报告可能有偏见的输出或为我们的测试和开发过程提供建议。”

上述选择退出机制——在创意社区对 Adob​​e 的 AI 政策提出批评之后——将通过内容真实性倡议 (CAI) 和内容来源与真实性联盟来协调，这两个协会的成立是为了促进媒体的行业标准来源元数据. （Adobe 是两者的成员。）Adobe 表示，它正在推动行业采用“不训练”标签，以便在任何使用、发布或存储的地方跟踪内容，确保模型不会针对越界内容进行训练无论内容在哪里结束。

Adobe 只是让艺术家更好地控制他们的艺术在生成模型训练中的作用的几项努力之一。11 月，DeviantArt推出了一项新的保护措施，该保护措施依靠 HTML 标记来禁止抓取图像页面的软件机器人下载这些图像用于训练集。AI 初创公司 Spawning 与 ArtStation 和 Shutterstock 等平台建立了合作关系，它提供了一种工具，让艺术家可以从用于训练 AI 模型的数据集中删除他们的图像。

CAI 的规模——大约 900 名成员——使得 Adob​​e 的提案更有可能获得某种吸引力。但不能保证。艺术家可能会发现自己处于一种情况，他们被迫使用多种选择退出工具来防止他们的作品被训练。

版权挑战

Adobe 客户将面临不同的头痛问题：弄清楚他们是否真的拥有 Firefly 生成的艺术品的权利。

在美国，最新的联邦指南对于 AI 艺术的版权状况并不是特别明确。在最初拒绝为 Midjourney 创作的人工智能生成图像授予版权后，美国版权局表示版权保护将“视情况而定”——尤其是“人工智能工具如何运作以及如何使用它来创作最终作品。”

Costin 承认，关于AI 生成艺术的所有权的法律目前还悬而未决。但他说，Adobe 相信 使用其工具向生成的图像添加“创意输入”应该足以让创作者获得版权。 

“一如既往，创作者将需要自己寻找版权，并做必要或需要的事情来获得所有权，”科斯汀说——在某种程度上对冲了他的赌注。

除非在版权或许可方面出现重大挫折，否则 Adob​​e 计划继续推进 Firefly，最终推出不仅可以生成图像和文本，还可以生成插图、图形设计、3D 模型等的模型。Costin 坚持认为这是 Adob​​e 的一个主要投资领域，据报道，Adobe 最近一次豪赌——以 200 亿美元收购初创公司 Figma——正处于被司法部诉讼阻止的风口浪尖 。

借助生成式 AI，Adobe 将继续努力。如果不是野心勃勃的话，萤火虫什么都不是——如果晚会有点晚的话。当然，Adobe 拥有庞大的内置客户群。Creative Cloud 拥有 6 亿月活跃用户，而 Experience Cloud 拥有 12,000 名客户，其中包括 87% 的财富 100 强。

有很多潜在的 Firefly 许可证可以出售。如果预测正确，从每个客户的角度来看，这将是一个非常有利可图的新收入来源。Acumen Research and Consulting估计，到 2030 年，生成式人工智能的市场价值将超过 1100 亿美元。

但只有时间才能证明 Adob​​e 是否能够克服阻碍其发展的许多障碍（和竞争对手），其中最重要的是维持继续开发和运行新的 Firefly 模型所需的昂贵计算。撇开法律和道德障碍不谈，Adobe 必须弥补失去的时间和注意力，这在竞争激烈的领域从来都不是一件容易的事。

科斯汀非常乐观，他说公司已做好迎接挑战的准备。

“未来的 Firefly 模型将利用来自Adob​​e和其他公司的各种资产、技术和培训数据，”他补充道。“我们正在设计生成式人工智能，以支持创作者从他们的技能和创造力中获益。通过将 Firefly 直接构建到我们客户的工作流程中，我们可以帮助创意专业人士更高效地工作，并将他们的时间花在他们喜欢的更高价值的工作上。”