真假难辨！谷歌发布最强文生图大模型Imagen2

文章转载来源：Kyle

谷歌刚刚发布了其最强大的文生图大模型Imagen2，可提供与用户提示词紧密结合且一致的高质量、逼真的图像输出。它可以通过使用训练数据的自然分布来生成更逼真的图像，而不是采用预先编程的风格。

谷歌的增强模型Imagen2是利用谷歌旗舰人工智能实验室GoogleDeepMind的技术开发的，该模型在5月份的科技巨头I/O大会上悄悄推出了预览版。谷歌声称，与第一代Imagen相比，它在图像质量方面“显着”提高，并引入了新功能，包括渲染文本和Logo的能力。

谷歌云首席执行官托马斯·库里安(ThomasKurian)在周二的新闻发布会上表示，“如果你想创建带有文本叠加的图像——例如广告——你可以做到。”

谷歌生成媒体产品主管VishyTirumalasetty表示，

“Imagen2可以生成……徽章、字母标记和抽象徽标……[并且]能够将这些徽标覆盖到产品、服装、名片和其他表面上。”

得益于“新颖的训练和建模技术”，Imagen2还可以理解更具描述性的长格式提示，并对有关图像中元素的问题提供“详细答案”。谷歌表示，这些技术还增强了Imagen2的多语言理解能力——允许模型将一种语言的提示翻译成另一种语言的输出（例如Logo）。

Imagen2利用SynthID（DeepMind开发的一种方法）将隐形水印应用到其创建的图像上。当然，检测这些水印（谷歌声称这些水印能够适应图像编辑，包括压缩、滤镜和颜色调整）需要谷歌提供的工具，而第三方无法使用该工具。

目前开发人员和谷歌云客户已经可以体验Imagen2的强大：

https://cloud.google.com/blog/products/ai-machine-learning/imagen-2-on-vertex-ai-is-now-generally-available

图像逼真程度达到新高度

看下图，你能一眼猜到是AI生成的吗？

提示词：一张32岁女性在丛林中的照片，她是一位崭露头角的自然资源保护主义者；运动型短卷发，笑容温暖

提示词：深蓝色背景上的水母

提示词：一幅小画布油画，显示案板上的橘子。光线穿过橙色部分，在切菜板的一部分上投射出橙色光。背景中有一块蓝色和白色的布。焦散、反射光、富有表现力的笔触

对图像提示词的理解达到新的高度

文生图模型学习根据训练数据集的图像和文字说明中的详细信息生成与用户提示相匹配的图像。但对于每个图像和蚊子说明，这些配对的细节质量和准确性可能会有很大差异。

为了帮助创建更高质量、更准确的图像，更好地符合用户的提示，谷歌在Imagen2训练数据集中的图像说明文字中添加了进一步的描述，帮助Imagen2学习不同的文字说明样式并进行概括，以更好地理解广泛的用户提示。

这些增强的图像-文字说明配对有助于Imagen2更好地理解图像和文字之间的关系，从而增强对上下文和细微差别的理解。

以下是Imagen2快速理解的示例：

1.AI生成油画图像：

提示词：“溪水轻柔地流淌，鸟儿重新唱出它们的音符，它们混合的音乐在空中飘荡。”（菲利斯·惠特利的《晚间赞美诗》）

2.人工智能生成水下场景彩绘图像

提示词：“考虑大海的微妙；其中最可怕的生物如何在水下滑行，大部分时间是不可见的，并且危险地隐藏在最美丽的蔚蓝色调下。”（赫尔曼·梅尔维尔的《白鲸》）

3.人工智能生成逼真的歌唱知更鸟图像

提示词：“知更鸟从摇曳的常春藤丛中飞到了墙顶上，张开喙，唱起了响亮、可爱的颤音，只是为了炫耀。世界上没有什么比知更鸟炫耀时更可爱了——而且它们几乎总是这样做。”（弗朗西斯·霍奇森·伯内特的《秘密花园》）

更真实的图像生成

Imagen2的数据集和模型进步在文本转图像工具经常难以解决的许多领域提供了改进，包括渲染逼真的手和人脸以及保持图像免受分散注意力的视觉伪影。

Imagen2生成逼真的手和人脸的示例

谷歌根据人类对良好照明、取景、曝光、清晰度等品质的偏好，训练了专门的图像美学模型。每张图像都会获得一个美观评分，这有助于调节Imagen2，使其训练数据集中的图像具有更多权重，以符合人类喜欢的品质。该技术提高了Imagen2生成更高质量图像的能力。

AI使用提示“花”生成的图像，美学分数较低（左）到较高分数（右）

流体式调理

Imagen2基于扩散的技术提供了高度的灵活性，使得控制和调整图像的风格变得更加容易。通过提供参考风格图像与文本提示相结合，我们可以调节Imagen2以生成遵循相同风格的新图像。

可视化显示Imagen2如何通过在文本提示旁边使用参考图像来更轻松地控制输出样式。

高级修图功能

Imagen2还支持“inpainting”和“outpainting”等图像编辑功能。通过提供参考图像和图像蒙版，用户可以使用称为修复的技术直接在原始图像中生成新内容，或者通过修复将原始图像扩展到其边界之外。这项技术计划在新的一年用于谷歌云的VertexAI。

Imagen2可以通过inpainting扩图功能直接在原始图像中生成新内容。

Imagen2可以通过outpainting将原始图像扩展到其边界之外。

参考资料：

https://deepmind.google/technologies/imagen-2/

https://techcrunch.com/2023/12/13/google-debuts-imagen-2-with-text-and-logo-generation/