与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

2023-09-21 16:15:08 - AI科技大本营

出品|CSDN(ID:CSDNnews)

走在AI前沿的OpenAI于今天又一次刷新了自己,其最新发布了图像生成工具DALL-E第三个版本的预览版。不仅如此,DALL-E3与ChatGPT集成,允许用户使用ChatGPT创建提示并包含更多安全选项。

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

为此,OpenAICEOSamAltman也亲自为这款产品站台表示,「DALL-E3在我看来相当惊人“。

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

一夕之间,设计师不知是几家欢喜几家愁。

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

颠覆AI绘画,DALL-E3来了!

与其前身一样,DALLE-3也是一款文本生成图像工具,可以通过自然语言提示让系统创建新奇的图像。

“DALL-E3能够理解的细微差别和细节明显多于我们以前的系统,让你可以轻松地将想法转换为非常精确的图像”,OpenAI在介绍DALL-E3时在官网上写道。

在官方示例中,OpenAI分享了使用相同的提示词,DALL-E3与DALL-E2带来的不同效果:

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

看完之后,不少网友调侃,DALL-E 2 是抽象派,而 DALL-E3则是印象派,更加基于现实的基础上,能够更有效地完善细节内容,使得生成的图片更加真实与吸引人。

如果说这是DALL-E3的第一个改进,那么第二个则是最新的DALL-E3在图像合成模型方面的能力要远远强于现有的任何其他模型,可以更好地理解上下文,前提还是无须让使用者专门去学习Prompt工程。

在官方发布的示例中,使用者只需要随意想象,给出一些简单的词语,如满月、行人享受夜生活、年轻女子、红头发、脾气暴躁的老头讨价还价、高大与老道的人....

就能通过DALL-E3得到下面这样一幅画,没有什么提示词门槛限制:

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

那要问它是怎么实现的?

这就正如文章伊始所述,DALL-E 3是在ChatGPT上"原生构建"的,并将作为ChatGPTPlus的集成功能推出,允许以AI助手作为头脑风暴伙伴的方式对图像进行对话式改进。

这也意味着ChatGPT将能根据当前对话的上下文生成图像,这可能会带来新颖的功能。

举个例子,当打开ChatGPT对话窗口,

问:“我五岁的儿子一直在说"超级无敌向日葵刺猬",它长什么样子?”

ChatGPT能在你说话的时间给出答案:

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

问:“我女儿说它叫Larry。可以给我展示一下更像的吗?”

ChatGPT:

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

问:她会喜欢这些的!你能带我看看Larry的房子吗?

ChatGPT展示:

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

问:你能告诉我Larry是“友好”的吗?

ChatGPT:

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

这一点,DALL-E3的竞品 Midjourney虽然能很好地渲染逼真的细节,但仍需要对提示词不断修改优化,才能获得自己想要的图像。

而对于OpenAI的用户而言,ChatGPT帮助设计师完善想法、阐明设计思想,DALL-3则帮助设计师解放双手,二者的搭配使用也将带来巨大潜力。

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

阻挡各种潜在风险的OpenAI

不过,也需要注意的是,自 DALL-E于2021年1月问世,以及 OpenAI于2022年4月推出DALL-E2以来,后者主要采用了潜在扩散模型(ldm)技术,需要通过对数据集的训练和提示信息,将GAN(生成对抗网络)的感知能力、扩散模型的细节保存能力和Transformer的语义能力三者结合,创造出更优质的画像。

行业中,也不乏有使用这种技术的开发商,如 StableDiffusion。

然而,这种方式通过在训练中抓取大量人类制作的艺术品数据集来让 DALL-E学习图像概念等,自然也就带来了一系列关于版权、道德的争议,甚至在去年不少艺术家在很多平台开始抗议AI生成的艺术品,批评这些AI艺术品会没有道德地复制其创作风格等等。

针对这些争议,OpenAI在官方博客上表示,DALL-E3在设计上拒绝了要求使用在世艺术家风格图像的请求。OpenAI还提供了一个表格(https://share.hsforms.com/1_OuT5tfFSpic89PqN6r1CQ4sk30),创作者可以选择不将自己的图像用于训练未来的模型。

除此之外,不久之前,OpenAI发布公告,宣布启动全球招募“红队”网络成员,旨在引入外部力量,提前挖掘出AI系统存在的缺陷和风险。

在 DALL-E3 开发维度,OpenAI表示已经和“红队”成员合作,让 DALL-E3 系统设定为拒绝生成带有公众人物名字的图像的请求,并实施了关键词和图像检测过滤器,限制使用者制作暴力、性或仇恨内容的能力,以识别和降低潜在风险,提高了风险领域的安全等级。

另外,OpenAI还透露其正在尝试使用一种"出处分类器"工具,以帮助识别图像是否由 DALL-E3 生成。不过,对于这一点,很多已经使用过AI检测工具的用户认为,想要真实地检测出AI图像,近乎天方夜谭。

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

DALL-E 3vsMidjourney

事实上,因为时下关于AIGC工具与内容的监管政策、法律法规、道德规范等标准的缺失,各种工具的落地自然利弊兼存。

不过,从技术维度来看,DALL-E3是否能够代表AIGC工具再一次向前跃进的标志?有一位名为MattGarcia.eth的用户通过使用OpenAI官网上 DALL-E 3 相同的提示词, 又用Midjourney生成了一版,我们不妨来直观地感受一下二者的较量:

"一幅牛油果的插图,牛油果坐在治疗师的椅子上,说着'我觉得内心很空虚',中间有一个坑大小的洞。治疗师是一把勺子,正在潦草地记录着"。

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

”这幅插画描绘了一颗由半透明玻璃制成的人心,矗立在惊涛骇浪中的基座上。一缕缕阳光穿透云层,照亮了这颗心,揭示了其中的微小宇宙。地平线上镌刻着一行醒目的大字‘寻找你心中的宇宙’。“

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

「舒适的客厅里摆放着一张充满活力的黄色香蕉形沙发,它的曲线支撑着一堆色彩缤纷的垫子。木地板上的图案地毯增添了一丝不拘一格的魅力,一盆盆栽坐落在角落里,伸向窗外。阳光透过窗户。」

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

「一幅细致的油画,描绘了一位老船长驾驶他的船穿过暴风雨。盐水溅在他饱经风霜的脸上,他的眼睛里充满了决心。头顶上看到旋转的云,汹涌的波浪威胁着要被淹没……」

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

「一幅古老的植物插图,用细线和一丝水彩奇思妙想绘制,描绘了一朵奇怪的百合与维纳斯捕蝇草交叉,它的花瓣准备好捕捉任何毫无戒心的昆虫。」

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

「一幅完全由各种肉类组成的广阔景观展现在观众面前。温柔多汁的烤牛肉山、鸡腿树、培根河和火腿巨石创造了一个超现实而又令人垂涎的场景。天空装饰着意大利辣香肠太阳和萨拉米香肠云。」

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

「一张以荔枝为灵感的球形椅子的照片,具有凹凸不平的白色外观和豪华的内部,衬托着热带壁纸。」

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

「一幅篮球运动员扣篮的富有表现力的油画,被描绘成星云的爆炸。」

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

「寄居蟹坐落在湿沙中的特写照片,附近有海泡沫,其外壳的细节和沙子的纹理得到了增强。」

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

「一部由拟人化的秋叶组成的民间乐队的2D动画,每个人都演奏传统的蓝草音乐,在乡村森林环境中,点缀着满月的柔和光线。」

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

你觉得两种工具,谁更胜一筹?

最后,DALL-E3目前并没有对外开放,OpenAI表示,“目前DALL-E处于预览阶段,未来将于10月初向ChatGPTPlus和企业客户提供。”

更多详情见官方公告:https://openai.com/dall-e-3

与 ChatGPT 联手,OpenAI 打造最强 AI 绘画工具 DALL·E 3!

今日热搜