实时AI，最难躺平的战场

有人预测2024将是视频之年，其实今年已经看出端倪。

年终将至，图像、视频生成战场仍然高潮迭起。

前阵子上线的 Pika Labs1.0炸了一波，Meta 又推出一个免费的 AI 图像生成器，口碑不错。

谷歌 DeepMind 最新文生图模型 Imagen2毫无悬念地登上了今天的头条 。如果有内测资格，你会发现谷歌搜索居然可以直接生图。

进入谷歌实验室，测试中的谷歌搜索可以直接生图了。

与此同时，之前热度不减、但一直处在内测阶段的 AI 设计工具 Krea AI Beta 版也终于开放，现在可以免费体验（部分功能）。

与一般文生图工具稍有不同的是，Krea AI 主打一个实时性。它是一个创意工具包，除了当红的实时生成工具（Real-time Generation ）、增强工具( upscale&enhance )，还有几个特定功能的小工具。

背靠2，500多个 AI 模型，Krea AI可以应对不同艺术风格品味的需求。尤其是实时生成工具，凭借惊人的生成速度和对画面效果的精准控制，备受瞩目。

实时生成工具提供四种生成方式（界面左边）:文本到图片、图生图、屏幕(比如截屏、壁纸)生图、直接拍摄生图。

还可以选择几种图片效果（界面右边），比如没有指定风格、插图、电影、流光等。

Krea AI的网页产品界面

中间是一个看板，也是体验何谓「实时」的地方—— 输入文本提示时，每敲一个单词、或者删除一个单词，图片内容都会立刻随之变化。

比如，当我们输入「一个叫尼尔斯的男孩」时，画面是这样的:

输完 「一个叫尼尔斯的男孩儿，骑着一只飞翔的大鹅」时，画面变成了这样:

当我们继续添加「带条围巾」时，画面又变了:

与「文生图」不同，「图生图」对作品效果控制力更好。因为除了文本，你还可以借助一些简单的线条、色块工具，涂鸦几笔，勾勒作品的大致轮廓，供机器加强「理解」。

我们先用工具画了个非常简单的猪头:

然后，输入文本提示「一头微笑的猪」，结果就出来了:

这是网友的作品，是不是很漂亮:

一位网友仅用四分钟，就将自己孩子一样的涂鸦变成了一幅逼真的 AI 肖像:

来自x平台网友titus

这是官方给到的展示:

正如前文所述，除了文本、涂鸦，你还可以通过捕获设备屏幕的内容（比如网页、视频）或者用摄像头获取图片来源，然后输入文本提示，生成新的图像作品。

实时生成图片，难免模糊、分辨率低，你还想让作品细节更完美，这时，Upscale & Enhance 就派上用场了—— AI 能以更高分辨率、甚至想象力重新创建视觉内容。因为是付费服务，我们选用了一些官方和网友的体验案例:

你可以调节 AI 发挥自己创造力的程度，如果很高的话，原图被修改的幅度也会很大。比如，这个作品里，美女的脸都被换了。

来自x平台Dona Mara

这也是 AI 生成工具和传统数学算法类润色工具的主要区别，前者会用自己的想象力替换像素内容，而不是刻板遵守。

除了速度和效果，任何新设计工具要想具有生命力，还必须具有良好的兼容性——能与常见的设计工具无缝对接，比如Photoshop、Illustrator、Figma、Blender、Sketchfab 等。Krea 也是如此。

另外，Krea AI 还有一个引人注目的功能——能与 iPad 无缝连接。看，这个孩子寥寥数笔就创造了蜘蛛侠:

另外，Krea AI 还有两个特定功能的小工具，但都不提供实时生图体验。输入要求后，需要等一定时间才能看到结果。

一个是 AI pattern ，输入文本提示，再选择你要的图案，即可以生成带有该图案的图像。

图片来自 https://ratemyaitools.com/author/rakeshai/

图片来自https://ratemyaitools.com/author/rakeshai/

另一个是 Logo Illustration 。和 pattern 功能类似，只不过图案变成了这里的 Logo，专门生成 Logo 形状相关图像。

图片来自https://ratemyaitools.com/author/rakeshai/

图片来自https://ratemyaitools.com/author/rakeshai/

写到这里，还没卷完。

其实，在 Krea AI 推出增强工具之前，他的竞争对手Magnific AI 已经发布了类似功能:

x平台网友Dave Villalva，用Magnific AI重制《星球大战》预告片

除了图片，AI 的增强能力还被扩展到视频上。

Upscale-A-Vide是南洋理工大学S-Lab 实验室开发的一个用于视频超分辨率的时间一致性扩散模型，结合低分辨率视频和文本提示，能将低分辨率视频转换为高分辨率。

是啊，谁不想看到童年最爱卡通片的4k 版本?

实时生图方面，不想 Krea AI 专美于前， Leonardo AI 前几天也宣布推出实时绘图工具「实时画布」。

Freepik 的实时草图到图像生成器「Pikaso」也上线了，让涂鸦立刻变成画作:

更疯狂的，Decohere AI 也预告了他们新的实时 AI 视频生成平台。

有兴趣尝试的网友，这里是一些传送门

文中视频：https://mp.weixin.qq.com/s/lBKXNnC5If4hYgTvH78wmw

https://www.krea.ai/home

https://www.freepik.com/pikaso

https://leonardo.ai/

https://magnific.ai/