对“使用AI绘画对神里绫华拓展”的分析

AI百科4个月前发布 快创云
49 0

AI绘画的这种随机性就决定了它不可能替代画师进行创作,在现实生活里,需要画师进行创作的场景往往都伴随着限定的主题,如一个游戏的cg,人物立绘,商业活动,或者送给某人的礼物。。。。。。

“AI绘画”这个词最近权重飙升,但是大部分人对这个概念并不了解,只是道听途说。这篇文章将对此做出简单的解释,并包含我个人的一些看法。

现在大部分的ai绘画指的是由NovelAI的【图像生成功能】生成的平面化视觉图像。

下面引用NovelAI官方的说法

What's image generation?

The NovelAI Diffusion Anime image generation experience is unique and tailored to give you a creative tool to visualize your visions without limitations, allowing you to paint the stories of your imagination.

Use tags to define the visual characteristics of your character or composition (or you can let AI interpret your words if you prefer!

NovelAI Diffusion is a tool designed for visual storytelling without any limitations.

Image Generation on NovelAI with our own custom NovelAI Diffusion Models, based on Stable Diffusion

NovelAI Diffusion Anime (Curated) Good baseline quality and predictable subject matter.

NovelAI Diffusion Anime (Full) The expanded training set allows for a wider variety of generations.

NovelAI Diffusion Furry (Beta) Beta model to easily create Furry and Anthropomorphic Animal themed content. This model is not a complete work, and will be expanded upon!

什么是图像生成?

NovelAI扩散动漫图像生成体验是独一无二的,旨在为您提供一个创造性的工具,可以不受限制地可视化您的愿景,让您描绘出想象中的故事。

使用标签来定义你的角色或构图的视觉特征(或者如果你愿意,你可以让AI解释你的单词!

NovelAI扩散是一种专为视觉叙事而设计的工具,没有任何限制。

使用我们自己定制的基于稳定扩散的新型AI扩散模型在 NovelAI 上生成图像:

NovelAI扩散动漫人物(发行版)良好的基线质量和可预测的主题。

NovelAI扩散漫画人物(完整版)扩展的训练集允许更广泛的家族代。

NovelAI扩散兽形人物(测试版)Beta模型可轻松创建拟人化的动物主题内容。这个模型可以不是一个完整的工作,NovelAI可以根据你的想法扩展这个工作!

它是如何运作的

稳定扩散的工作原理是根据文本提示生成图像,从仅从噪点开始,然后逐渐增强图像,直到完全没有噪点为止。

AI将您的文本连接到图像,每次提示时都会生成新的构图。

NovelAI扩散图像生成体验是独一无二的,旨在为您提供一个创造性的工具,可以不受限制地可视化您的愿景,让您描绘出想象中的故事。用标签轻松定义你的角色和构图的特征,并在你的脑海中更接近那个愿景(或者不,但现在完全取决于你的选择!)

NovelAI其实并不局限于“绘画”,他的诞生最初是为了帮助作家形成统一的语言风格,把作家作品中的角色,场景可视化,为作家提供更多的灵感。

NovelAI也因此具备了极强的文本和图像处理能力。

What even is NovelAI?

NovelAI is a monthly subscription service for AI-assisted authorship, storytelling, virtual companionship, or simply a GPT powered sandbox for your imagination.

Our Artificial Intelligence algorithms create human-like writing based on your own, enabling anyone, regardless of ability, to produce quality literature. We offer unprecedented levels of with our Natural Language Processing playground by using our own AI models, trained on real literature. The AI seamlessly adapts to your input, maintaining your perspective and style.

Visualize your f**orite characters with Image Generation.

Use powerful image models to depict characters and moment from your stories.

什么是 NovelAI?

NovelAI是一项每月订阅服务,用于作者的AI辅助的身份,讲故事,虚拟陪伴,或者只是一个GPT驱动的沙盒,供您想象。

我们的人工智能算法根据您自己的书写创建类似人类的写作,使任何人,无论能力如何,都能制作出高质量的文学作品。我们通过使用我们自己的AI模型,在真实文献中训练,通过我们的自然语言处理提供前所未有的度。AI无缝适应您的输入,保持您的观点和风格。

使用图像生成可视化您最喜欢的角色。

使用强大的图像模型来描绘故事中的人物和时刻。

下面我使用NovelAI的扩展功能为“神里绫华壁纸”做出扩展。

NovelAI扩展二维动漫图像有两个关键性参数,指数与发挥指数。

指数:指数越低ai生成的图像越接近原始图像,指数越高ai对原图的更改越大。

发挥指数:指数越低ai对原图扩展的细节越少,指数越高,细节越多。

指数过高会导致至伪像,发挥指数应始终低于指数。

先发原图

下面展示NovelAI对上图的扩展:

指数0.2

发挥指数0.1

明显看到ai把背景的御守改为了梅花,并更改了部分发饰。对桌面上的图标识别不出,依然保留了色块形状,从这里开始绫华的齐刘海开始变了。

指数0.3

发挥指数0.1

对背景的更改程度跟大了,神里绫华的头发飘丝也有改变,服饰和表情有轻微的变化,近景的梅花枝被改为了飘带,对桌面上的图标依然识别不出,同样保留了色块形状。

从整体上看和原图还是很相似的。

封面

指数0.4

发挥指数0.2

这一张刚出来的时候真的让我眼前一亮

ai对于原图的构图依然没有改变,但却对背景进行了符化处理,右上角能明显看出是game字样

指数0.5

发挥指数0.4

构图依然没有改变但是出现了伪像,这是因为发挥指数距指数过近。

指数0.5

发挥指数0.6

伪像,发挥指数大于指数的产物

初步得出结论:指数与发挥指数的比值接近2时,图像质量最好。

(需要更多实验数据支持)

指数0.5

发挥指数0.3

人物的发色,瞳孔色,脸型,腰带依然与原图有较大关联,但绫华的齐刘海依然被忽略了。

初步得到以下结论:

NovelAI对于人物的发型并不能很好的识别,使用的都是日式通用发型。

指数0.66

发挥指数0.42

从这里开始ai扩展图像就与原图关系不大了。

人物由右朝向改为了左朝向。

人物的发色,瞳孔色,脸型依然依然与原图有较大关联,但绫华的齐刘海依然被忽略了。

难道发挥指数越高,人物就穿的越少?(bushi)

(这张图因为过暴,被米游社屏蔽)

指数0.7

发挥指数0.4

人物的发色,瞳孔色,脸型依然依然与原图有较大关联,其他地方都没有。

到这里基本可以看出指数超过0.6时ai扩展对原图的参考就开始加速减弱,但依然会保留人物的可识别的基本特征。

指数0.8

发挥指数0.4

脸部朝向终于开始变化,半侧脸变为全侧脸,构图调整更大,对原图的借鉴更少,对ai的数据库的借鉴更多。

指数0.99

发挥指数0.6

跟原图完全没有关系了属于是。。。。。

简单的总结一下,

NovelAI并不是简单的把其他画师画的图进行肢解重组,它确实会根据输入的不同反馈不同的结果

有智能但不多,

随着指数的增加,ai扩展画面越来越不可控,虽然可以通过输入指定的限定词进行限制,但依然不能改变它不可控的事实。

ai绘画的这种随机性就决定了它不可能替代画师进行创作,在现实生活里,需要画师进行创作的场景往往都伴随着限定的主题,如一个游戏的cg,人物立绘,商业活动,或者送给某人的礼物。这些,ai绘画现在都做不了,我相信以后也不可能做得了。

从另一方面讲,这种随机性确实可以创作出极多的富有美感的,让人眼前一亮(黑)的画作,可以大大提高人们的审美水平,并且为创作者提供更多的灵感。

ai绘画它最大的作用还是 “可视化您的愿景,让您描绘出想象中的故事”。我相信ai技术的发展一定是大势所趋,不仅仅局限于绘画领域。ai技术的发展可以极大地解放劳动力,发展生产力,把人从低附加值的工作中转移到高附加值的工作里。技术是为人服务的,ai技术的前途不可。

附加一下我使用的终端

cpu:AMD Ryzen 7 5800H   3.20 GHz    内存32GB

gpu:RTX3060 **显存6GB

扩展图像大小 832*512,耗时100秒左右/张

扩展图像期间显存利用率最高95%(为硬件保留5%),gpu利用率最高100%

最后,希望我们的社会发展的越来越好

© 版权声明

相关文章