10月11日消息,今天凌晨,全球最大设计软件龙头Adobe甩出Adobe Firefly创意生成式AI模型系列中的三个主要新模型:Adobe Firefly Image 2(萤火虫二代成像模型)、Firefly Vector Model(萤火虫矢量模型)和Firefly Design Model(萤火虫设计模型)。
▲Adobe Firefly Image 1和2生成图像效果对比
其中,Firefly矢量模型是世界上第一个专注于生成矢量图形的生成式AI模型,该模型通过文本到矢量图形的功能,将矢量图形和生成式AI专业知识直接引入到Adobe Illustrator工作流程中,即日起,Adobe Illustrators的网页Beta版开启全球公测。
Adobe还宣布了Creative Cloud(创意应用软件)的100多项重大AI创新和更新,其中矢量图形软件Adobe Illustrator、图像编辑软件Adobe Photoshop、在线照片编辑器Adobe Lightroom、视频编辑软件Adobe Premiere Pro、图形视频处理软件Adobe After Effects和图片处理软件Adobe Stock等都正在被Adobe Firefly模型以及其它AI驱动的功能所改变。
比如,用户在Photoshop想要智能填充图片,只需要选中扩展的图像大小,然后点击生成就可实现。
Adobe数字媒体业务总裁David Wadhwani谈道,3月Adobe推出了Firefly图像模型的测试版,至今,用户使用该工具已经生成超30亿张图像。并且Photoshop中由Firefly驱动的生成填充技术,相比于此前的版本,用户的采用率已经提升了10倍。可以看出,AI正在深入集成到创意工作流程的核心中。
Creative Cloud中统一使用所有App的定价为每个月54.99美元,Photoshop为每月20.99美元。
生成式AI的浪潮不仅让Midjourney、Stability AI等AI创企站在资本聚光灯下,也让Adobe等老牌软件企业对于技术、产品升级迭代的敏锐度再次复苏。过去一年,Adobe的股价上涨幅度达到近90%,截至当地时间今天收盘,Adobe市值达到2425亿美元(折合约17688亿人民币)。
01 自动匹配同一风格生成,版权有风险图片无法参考
Adobe Firefly Image 2模型是第二代成像模型,该工具可以通过改善图像中人体皮肤、头发、眼睛、手和其它身体结构,来增强图像的渲染质量,为用户生成更高质量图像。
Firefly Image 2模型有三大新功能:生成匹配(Generative Match)、照片设置(Photo Settings)、提示指导(Prompt Guidance)。
生成匹配指的是Firefly Image 2模型能根据用户提供的参考图像,生成风格类似的图像。用户可以选择工具中预选列表中的图像,或者自己上传参考图像,然后Firefly Image 2模型就可以满足相应的品牌准则,或者复制现有图像的风格,既节省了其从头开始设计的时间,还能保持图像的风格一致。
最后,Adobe会在其服务器上存储参考图像的缩略图,基于生成匹配功能将消息同步提示给用户,然后让用户确认有上传图像的使用权限以及其它使用条款。
当用户上传的图像具有版权风险时,或者这张图被标记为“受保护内容”,Firefly Image 2模型就无法复制其风格:
照片设置功能中,Firefly Image 2模型能为用户生成更保真度的细节,例如皮肤毛孔和树叶,以及为了让图像有更高质量,用户还可以控制景深、运动模糊、视野和生成等。
同时,用户能应用和调整照片设置,类似于手动相机镜头控制。其中,自动模式能自动选择“照片”或“艺术”作为图像生成样式,然后用户选择适当的照片设置应用。
提示指导功能上,Firefly Image 2模型改进了对文本提示的理解,能识别更多地标和文化符号。
在模型创作过程中,用户可以收到改进提示的建议,激发新的创作创意同时减少重新生成的次数。基于这一功能,用户能明确如何进行有效的提示,或者是否应该重写。
此外,用户可以选择关键术语、颜色、形状等特定元素,以避免生成一些他们并不需要的图像。
最后,在图像保存阶段,用户可以直接从Firefly共享和保存图像,并通过他们喜欢的提示进行图像微调。基于其共享功能,用户可以分享他们的作品,还能让其它用户了解如何创建特定图像,在共享库中的图片,其他人也可以打开和使用。
02 全球首个矢量图形生成模型,渐变、分层、平铺均可实现
Adobe宣称,Adobe Firefly矢量模型是世界上第一个矢量图形生成AI模型,也是第一个生成“人类质量”矢量和图案输出的生成AI模型。
Adobe矢量图形软件Illustrator现在已经推出文本转矢量图功能测试版,从事创意工作的研究人员可以基于此生成矢量图形,且这些图形是可编辑并组织成组。
矢量模型的新功能有五个,可以生成匹配图像、矢量渐变、分组分层输出、无缝平铺、输出精确几何形状。
其中,Firefly矢量模型的功能可确保添加到用户画板的矢量图形与现有样式完美匹配。这使得模型能针对场景、主题、图标和图案生成高质量的矢量输出。
Adobe官方称,一般来说,渐变是矢量化世界中的一个挑战。现在,Firefly矢量模型可以生成可编辑的矢量渐变,能简化几何形状,不需要使用多个实心填充路径来描绘相同的图像效果。
同时,生成矢量图形时,所有元素都能按逻辑分组和分层。例如,一棵树的矢量图中,其能自动对组成该树的所有相关路径进行分组,从而使用户更方便地调整、编辑和重复使用最终的矢量输出。
Firefly矢量模型生成的矢量化图案可无缝平铺,因此即便设计图案无限重复出现,中间也不会出现明显的间隙。
最后,该模型输出的高质量矢量曲线平滑且精确,能智能处理多条曲线相交的交点。
03 AI自动生成模板,一条龙提供文本、图像内容
Firefly设计模型通过Adobe Express中的文本到模板功能,结合Firefly图像模型、Adobe Stock和Adobe Fonts的专业布局技术,支持即时生成模板设计。
并且,Firefly设计模型支持大量主流比例模板,这些模板在Express中完全可编辑,并且针对于印刷、社交、在线广告等不同用途进行定制化设计。用户可以在Firefly中生成图像,然后继续在Express中完善提示,使用Firefly支持的文本效果来丰富标题。
该模型通过AI生成模板,然后利用其自动生成的文本和图像,能帮用户从数千个模版中进行快速选择,并识别中与其需求更为适配的布局。
在内容生成方面,用户可以根据简单的提示生成文本和图像,同时选择文本大小、颜色和位置,并根据需要裁剪、替换或旋转图像。
Firefly设计模型采用即时端到端设计,利用生成式AI来创建与用户提示相协调的图像、文本和色调。
04 多项生成式AI工具更新,图像编辑工作流程被革命
Adobe数字媒体首席技术官Ely Greenfield谈道:“我们快速、持续地推进Firefly创新,在成像、设计和矢量生成方面取得了进步,这三种新模型为输出质量和用户控制设定了新的行业标准。”
具有文本到矢量图形功能的Illustrator,除了能生成可编辑高质量矢量图形外,Adobe对Retype也进行了更新,该工具通过快速识别Adobe Fonts中的相似字体,将静态文本转换为可编辑文本,同时能快速将图像和图形转换为逼真的产品和品牌模型,并且为了让设计师之间的协作和交换反馈更便捷,Illustrator还增加了“共享以供审阅” 的功能。
使用范围更广的图像编辑软件Adobe Photoshop中,基于Firefly模型其可用性大大提升,Photoshop订阅者现在可以通过网页版体验Photoshop基于AI的强大能力。
在线照片编辑器Adobe Lightroom中,AI技术提升包括镜头模糊、HDR优化以及Lightroom移动版中被简化的编辑体验。
其中,HDR优化可以使任何拍摄照片的人都能编辑和导出照片,使其具有更亮的高光、更深的阴影和更鲜艳的色彩;Point Color功能可以帮助摄影师进行精准、准确、细致的色彩细化,同时为用户提供对新文件类型的内容凭证支持。
▲Lightroom的镜头模糊功能
Adobe还在Premiere Pro和After Effects中发布了新的基于AI的文本编辑和动作改进功能,用户可以从Express和Premiere Pro等工具中将视频内容无缝发布到TikTok、YouTube等社交平台上。
图片处理软件Adobe Stock的图像编辑过程也被简化,用户可通过简单的文本提示将概念转换为实际的视觉效果,并且单击就可以扩展图像背景和纵横比。
此外,为了让用户的设计流程更加简单,在线设计工具Express使用中,用户可以使用由Firefly提供支持的创意副驾驶Generative Fill。基于此,用户通过文本描述就能插入、删除或替换任何图像中的对象、人物等。
同时,基于Firefly设计模型,用户也可以使用文本描述来生成可编辑模板,并且该工具自带的翻译功能支持45种语言选择。
Adobe还推出了全新的端到端解决方案GenStudio,能为品牌方提供基于生成式AI的能力来加速内容构思、创作、制作和激活的一系列产品,具体流程包括,企业在数字资产管理系统Adobe Experience Manager Assets中,通过Express和Firefly对安全用于商业用途的数字内容进行即时编辑。
为了让企业的品牌标识更加突出,Adobe允许企业使用品牌自己的风格、角色和对象来定制和微调Firefly,并且能将定制的Firefly模型完全集成到企业的Creative Cloud工作流程中并自动化生产工作。
全球六大广告和传媒集团之一Havas宣布和Adobe扩大合作伙伴关系,将采用Adobe GenStudio。
05 结语:AI创造时代,老牌创意软件巨头商业路径清晰
借助Firefly全面上市和多项工具更新的势头,Adobe已经展示出其重新定义创意工作流程方面的创新性。Adobe数字媒体业务总裁David Wadhwani谈道:“自三月份发布我们的第一个Firefly图像模型以来,我们对社区的惊人反应感到惊讶,他们展示了Firefly对于增强实验和设计以及加快工作流程而不影响创意控制有多么有用。”
当下,生成式AI正在重塑人们生成、编辑图像与视频的方式,一句话就能轻松为图像设置特定的景深、扩展背景,生成各式各样想象力十足的图像,这都为老牌创意软件巨头敲响警钟。Adobe通过一系列的更新再次强化了其在图像编辑领域的深厚积累。相比于时下火热的Midjourney、Stable Diffusion,Adobe更强调对于图像的二次编辑能力,并一步步简化用户的使用流程。
Adobe首席执行官Shantanu Narayen在今年6月接受英国《金融时报》采访时,他比较了当下生成式AI与之前的技术平台转变,他预测,许多风投支持的AI公司如雨后春笋般涌现,但缺乏明显的商业模式,最终将面临洗牌。然而,在之前的平台转型中,最终赢家出现前,市场将会长期保持不确定性。