AI的iPhone时刻已来。
GTC大会上,老黄官宣,和Adobe公开人工智能生成图像工具Firefly(萤火虫)。
公告称,Firefly已经集成在Adobe的企业级创意工具Adobe Express中进行内测,仅开放了艺术字功能。
目前,还没有开放给用户使用,但可以申请候补。
未来,这一工具将加入到Adobe旗下的Photoshop、Illustrator以及Premiere等。
「有了萤火虫,每个人都能用他们自己的语言来创造他们梦想的内容。」
地址:https://firefly.adobe.com/
「萤火虫」飞入AIGC战局
当前,Firefly提供两个模式,一种是利用文字生成图像的功能,另一种是字体效果编辑。
在画图上,Firefly和目前流行的AI绘图工具类似,能够根据prompt生成图像,并提供数百种风格并对结果进行调整。
另外,Firefly还可根据周边内容生成图像,这使用户可以更有效地测试和完善图像效果。
在图形设计和插图工作中,自定义矢量、画笔和纹理可以从几个单词甚至草图生成,并能够编辑使用熟悉的工具创建的内容。
除了基本的文本到图像的生成,Firefly模型可以像 Prisma 一样将不同的风格「转移」到现有的图像上。根据用户提供的描述,它还可以将样式或纹理应用于字母和字体。
而创意文字工具上,人们可以创作看起来毛茸茸、鳞片等各种形态和效果的文字,类似Office中的「艺术字」功能。
Firefly还可以改变3D建模,比如快速生成模型风格、材质:
Firefly 目前能产生的最大分辨率的图片为 2000*2000 像素。
此外,Firefly目前仍在探索其他的功能,包括文字生成矢量/笔刷/模板、根据自己的风格生成图像、指定纵横比扩展图像、根据3D模型生成图像等等。
「无原罪」模型
在此,Adobe表示,Firefly模型创建的作品将包含元数据,以证明它是部分或全部由人工智能生成的。
这样做的原因主要是为了维护艺术家版权问题。
就技术来讲,Firefly与DALL-E2,以及Stable Diffusion之类的文本到图像的AI没有什么不同。
这些AI模型通过学习来训练现有的图像从文本提示生成新的图像,这些图像通常来自数据集,这些数据集是通过搜索公共图像托管网站拼凑在一起的
这些AI模型可以通过在现有图像上「训练」,从文本提示中「学习」生成新的图像。
这些现有图像通常来自于通过搜索公共图像托管网站所获取的数据集。
一些专家认为,在美国,使用公共图像(即使是受版权保护的)来训练模型将受到合理使用原则的保护。但是,这是一个不太可能在短时间内得到解决的问题。
此前,Midjourney和Stability AI,因将它们的工具用于网络抓取的图像而被指控侵犯了数百万艺术家的权利,面临法律诉讼。
据报道,库存图片供应商Getty Images已将Stability AI单独告上法庭,指控其未经许可使用其网站上数百万张图片来训练艺术生成模型Stable Diffusion。
除了有关艺术家和平台报酬的未解决问题之外,生成式人工智能面临的一个更加紧迫的问题:
它倾向于使用复制图像、文本等内容,包括版权内容,而这些内容都来自于用于训练模型的数据。
一些图像托管平台已经禁止使用AI生成的内容,因为他们担心会引起法律纠纷。
专家警告说,如果企业无意中将生成的AI工具所生成的受版权保护的内容纳入他们销售的任何产品中,这些企业可能会面临风险。
对此,Adobe的解决方案是,仅使用公司的免版税媒体库Adobe Stock,以及经过版权公开授权和公共领域内容,训练Firefly模型。
Adobe表示,未来用户将能够使用自己的内容训练和微调Firefly模型,使其输出具有特定的风格和设计语言。