画一笔AI画整张图!AI实时作画方式被打开,颜色细节自动补全,一个脚本即可实现
现在用AI画画,完整草图都不需要了。
每一笔落下,AI都会实时交上“新作业”
细节、颜色、画布空白,它都自动补全。
还能通过提示词来控制生成图像的内容和风格。
比如加一句“一个穿长外套的男人站在海边“,AI立马调整了作画方向:
最后成稿的作品如下,效果很奈斯。
怪不得网友表示,自己惊掉的下巴已经找不到了。
这就是最新火起来的AI实时作画项目,Reddit上的热度有1.8万。
有人还表示,这回似乎说明了,相较于取代人类,AI可能更大程度上会帮助人类艺术家创作。
一个脚本搞定
如上效果是靠一个Python脚本实现。
通过构建一个画布和一个图像生成框,然后把每次落笔后的草图发送给Automatic1111的API接口,这样就能基于Stable Diffusion和ControlNet的能力作画了。
其中,Automatic1111是一个基于Stable Diffusion的可便携部署的离线框架,封装了UI和一些功能,能通过可视化界面使用Stable Diffusion。
此外生成图像方面还使用了ControlNet的scribble模细化效果。
作者提醒说,想要让这个脚本能正常运行,一定要确保能调用Automatic1111webui的API,并且已经安装激活了ControlNet扩展。
可以通过修改payload.json文件来获取不同的prompt、seed和ControlNet模型。
在实时生成的速度上,作者表示现在看到的demo是他加速4倍后的结果,具体情况如何,恐怕还要看大家的显卡水平了。
所以不少网友看后的反应是:
实时?我的显卡说,你在做梦。
1080要再次哭晕了……
也大佬推算了各个型号显卡可能带来的效果:
我上次使用Automatic1111时,用3080能实现每秒12次迭代;对于预览图片来说,或许不需要这么多迭代。
所以如果用3080的话,大概可以每1-2秒得到一张图片预览(3060可能是3-4秒);如果用4080、4090,不到1秒就能出一张预览。
尽管硬件上还是有制约的……但这还是没影响大家的脑洞。
有人表示,这或许是未来很多艺术家搞创作的方式了。
还有人说,未来已来了。
你觉得呢?
GitHub地址:
https://github.com/houseofsecrets/SdPaint
参考链接:
[1]https://twitter.com/thekitze/status/1648627002822254593?s=20
[2]https://www.reddit.com/r/StableDiffusion/comments/12pcbne/i_mad_a_python_script_the_lets_you_scribble_with/
—完—
斯坦福大学:大模型“卷”错方向了?上下文窗口越长,模型越笨
在语言模型中,上下文窗口对于理解和生成与特定上下文相关的文本至关重要。一般而言较大的上下文窗口可以提供更丰富的语义信息、消除歧义。由于硬件和算法的最新进步,大模型的上下文窗口的长度也越来越“卷”。其中的卷王当属Anthropic公司,其五月份就将Claude的上下文窗口从9ktoken扩展到了100k。最近更新的Claude2更是让其100K的上下文能力“常驻”模型。站长网2023-07-28 14:05:130000仿劲舞团直播32.1万人在线 团播会是下一个风口?
几个月前,直观曾给大家分享过“非主流”席卷午夜娱播的案例。本来以为这股怀旧风只限于唱歌的直播间,没想到现在团播也被席卷。最近在抖音的团播中,很多团队主播开始以一身“非主流”的妆造出现在屏幕前,并以80/90曾经最流行的音游作为背景,将整场直播打造成一个怀旧的游戏场景。站长网2023-11-20 20:37:380000知乎周源:我们拥抱AI,社区仍将以人为先
7月14日至7月16日,知乎年度嘉年华活动2023年新知青年大会在北京751园区举行,在“盐Club”上,知乎创始人、董事长兼CEO周源发表了“我们都在乎”的主题演讲,表明知乎作为一家技术驱动的公司,面对人工智能的浪潮,将以所有新技术服务于人。周源表明知乎作为一家技术驱动的公司,面对人工智能的浪潮,将以所有新技术服务于人。“我们拥抱AI,社区仍将以人为先。”站长网2023-07-16 18:48:550000小物件,利润百万!(狗哥)
前几天端午假期,趁着休息,我也出去逛了一逛,去了灵隐寺。说来也是奇怪,我呆在杭州这么多年,竟然一次都没有去过灵隐寺,平时自己呀只专注赚钱和成长,人生少了许多趣味。你说逛就逛吧,还能被我发现一些赚钱的机会,这不赶紧来了大家分享分享。站长网2023-06-26 23:42:340000瑞幸咖啡门店数量已超过星巴克三成,成为国内门店最多的咖啡连锁品牌
根据瑞幸咖啡Q1财报,门店数量已达9351家,超过星巴克中国的6200家,并开始拓展国际市场。这意味着,瑞幸咖啡的门店数量已经超过了星巴克三成,成为全国门店数量最多的咖啡连锁品牌。在营收方面,瑞幸咖啡营收达6.4亿美元,与星巴克中国的差距进一步缩小。然而,瑞幸也面临着新的竞争挑战,曾经的核心人物陆正耀陆正耀创立的库迪咖啡正在与其展开关于价格、店面和营收的竞争。站长网2023-05-08 11:23:330000