实时AI,最难躺平的战场
有人预测2024将是视频之年,其实今年已经看出端倪。
年终将至,图像、视频生成战场仍然高潮迭起。
前阵子上线的 Pika Labs1.0炸了一波,Meta 又推出一个免费的 AI 图像生成器,口碑不错。
谷歌 DeepMind 最新文生图模型 Imagen2毫无悬念地登上了今天的头条 。如果有内测资格,你会发现谷歌搜索居然可以直接生图。
进入谷歌实验室,测试中的谷歌搜索可以直接生图了。
与此同时,之前热度不减、但一直处在内测阶段的 AI 设计工具 Krea AI Beta 版也终于开放,现在可以免费体验(部分功能)。
与一般文生图工具稍有不同的是,Krea AI 主打一个实时性。它是一个创意工具包,除了当红的实时生成工具(Real-time Generation )、增强工具( upscale&enhance ),还有几个特定功能的小工具。
背靠2,500多个 AI 模型,Krea AI可以应对不同艺术风格品味的需求。尤其是实时生成工具,凭借惊人的生成速度和对画面效果的精准控制,备受瞩目。
实时生成工具提供四种生成方式(界面左边):文本到图片、图生图、屏幕(比如截屏、壁纸)生图、直接拍摄生图。
还可以选择几种图片效果(界面右边),比如没有指定风格、插图、电影、流光等。
Krea AI的网页产品界面
中间是一个看板,也是体验何谓「实时」的地方—— 输入文本提示时,每敲一个单词、或者删除一个单词,图片内容都会立刻随之变化。
比如,当我们输入「一个叫尼尔斯的男孩」时,画面是这样的:
输完 「一个叫尼尔斯的男孩儿,骑着一只飞翔的大鹅」时,画面变成了这样:
当我们继续添加「带条围巾」时,画面又变了:
与「文生图」不同,「图生图」对作品效果控制力更好。因为除了文本,你还可以借助一些简单的线条、色块工具,涂鸦几笔,勾勒作品的大致轮廓,供机器加强「理解」。
我们先用工具画了个非常简单的猪头:
然后,输入文本提示「一头微笑的猪」,结果就出来了:
这是网友的作品,是不是很漂亮:
一位网友仅用四分钟,就将自己孩子一样的涂鸦变成了一幅逼真的 AI 肖像:
来自x平台网友titus
这是官方给到的展示:
正如前文所述,除了文本、涂鸦,你还可以通过捕获设备屏幕的内容(比如网页、视频)或者用摄像头获取图片来源,然后输入文本提示,生成新的图像作品。
实时生成图片,难免模糊、分辨率低,你还想让作品细节更完美,这时,Upscale & Enhance 就派上用场了—— AI 能以更高分辨率、甚至想象力重新创建视觉内容。因为是付费服务,我们选用了一些官方和网友的体验案例:
你可以调节 AI 发挥自己创造力的程度,如果很高的话,原图被修改的幅度也会很大。比如,这个作品里,美女的脸都被换了。
来自x平台Dona Mara
这也是 AI 生成工具和传统数学算法类润色工具的主要区别,前者会用自己的想象力替换像素内容,而不是刻板遵守。
除了速度和效果,任何新设计工具要想具有生命力,还必须具有良好的兼容性——能与常见的设计工具无缝对接,比如Photoshop、Illustrator、Figma、Blender、Sketchfab 等。Krea 也是如此。
另外,Krea AI 还有一个引人注目的功能——能与 iPad 无缝连接。看,这个孩子寥寥数笔就创造了蜘蛛侠:
另外,Krea AI 还有两个特定功能的小工具,但都不提供实时生图体验。输入要求后,需要等一定时间才能看到结果。
一个是 AI pattern ,输入文本提示,再选择你要的图案,即可以生成带有该图案的图像。
图片来自 https://ratemyaitools.com/author/rakeshai/
图片来自https://ratemyaitools.com/author/rakeshai/
另一个是 Logo Illustration 。和 pattern 功能类似,只不过图案变成了这里的 Logo,专门生成 Logo 形状相关图像。
图片来自https://ratemyaitools.com/author/rakeshai/
图片来自https://ratemyaitools.com/author/rakeshai/
写到这里,还没卷完。
其实,在 Krea AI 推出增强工具之前,他的竞争对手Magnific AI 已经发布了类似功能:
x平台网友Dave Villalva,用Magnific AI重制《星球大战》预告片
除了图片,AI 的增强能力还被扩展到视频上。
Upscale-A-Vide是南洋理工大学S-Lab 实验室开发的一个用于视频超分辨率的时间一致性扩散模型,结合低分辨率视频和文本提示,能将低分辨率视频转换为高分辨率。
是啊,谁不想看到童年最爱卡通片的4k 版本?
实时生图方面,不想 Krea AI 专美于前, Leonardo AI 前几天也宣布推出实时绘图工具「实时画布」。
Freepik 的实时草图到图像生成器「Pikaso」也上线了,让涂鸦立刻变成画作:
更疯狂的,Decohere AI 也预告了他们新的实时 AI 视频生成平台。
有兴趣尝试的网友,这里是一些传送门
文中视频:https://mp.weixin.qq.com/s/lBKXNnC5If4hYgTvH78wmw
https://www.krea.ai/home
https://www.freepik.com/pikaso
https://leonardo.ai/
https://magnific.ai/
上海大模型发展11条:支持大模型人才落户
上海市经信委发布了《上海市推动人工智能大模型创新发展若干措施(2023-2025年)》,旨在推动大规模预训练模型(大模型)的创新发展。措施提出了以下主要内容:支持大模型创新能力,包括实施大模型创新扶持计划和建立大模型测试评估中心;提升创新要素供给能级,包括实施大模型智能算力加速计划和构建智能芯片软硬协同生态;站长网2023-11-08 16:17:050000人工智能版权诉讼热潮的背后:发明者正试图证明机器是有感知能力的
「ARECENTENTRANCEtoParadise」是一幅像素化的田园风光,火车轨道在一座长满苔藓的桥下穿过。它是由一种名为DABUS(统一感知自主引导设备)的人工智能在2012年绘制和命名的,据其创造者称。但本月初,美国一名联邦法官判定DABUS的发明者StephenThaler不能为这件作品主张版权。Thaler正在对此提出上诉。站长网2023-09-02 09:42:310000抖音测试付费短视频 客服回应:内测范围将逐步开放
近日,抖音测试付费短视频的话题登上热搜,此次测试的范围不再局限于短剧类目,而是涵盖了日常、知识、娱乐等视频内容。据报道,抖音客服表示,如果遇到付费视频,用户可以选择划走。目前,付费视频功能的开通针对的是10万粉丝以上、账号状态正常、无违规情况、原创度高的部分个人用户进行内测,后续会逐步开放内测范围。在观看付费视频时,App将不支持手机录屏,以保护创作者权益。站长网2023-11-16 14:11:090000哥伦比亚广播公司推出事实核查新闻部门,调查AI深度伪造和虚假信息
划重点:📺CBS的新闻和电视台部门将成立一个新的单位,以调查虚假信息和所谓的“深度伪造”,即经常通过人工智能生成的虚假视频。🌐新单位名为“CBS新闻确认”,由CBS新闻和电视台高级副总裁兼标准与实践主管克劳迪娅·米尔恩以及CBS新闻和电视台执行副总裁兼新闻运营与转型主管罗斯·达根领导。🔍希望新单位将制作关于其调查结果的片段,并向观众解释所涉信息为何被确定为虚假或不准确。站长网2023-11-07 22:10:3200002023云计算十大关键词发布 “中小企业上云”入选
凤凰网科技讯7月26日消息,7月25日,由中国信息通信研究院(以下简称“中国信通院”)和中国通信标准化协会联合主办的2023年可信云大会在北京召开,大会发布了“2023云计算十大关键词”。站长网2023-07-26 21:38:540000