首页 每日干货分享 V7.1版本更新:安卓iOS电脑小程序网站游戏教程新功能介绍

V7.1版本更新:安卓iOS电脑小程序网站游戏教程新功能介绍

发布时间: 浏览量:31 0

[]

[]

本月,V7.1带来了一些颇有意思的功能,主要是,ID不用训练就能生成不同人物风格的图,SVD视频制作更新到了1.1版本,支持1步成图的XL Turbo大模型等 。

V7.1版本:(V7.1版本仅支持win10、win11)

支持SVD动画一点一版本,效果较为好些,在SD作画里,图生图时选择参考图,于动画设置当中选择,当前宽高设置,队列选择多个参考图,种子,步数,总帧数,显存占用模式这几个参数能够设置 。

第二点,就是SD能够使得SD XL TURBO进行作画,将描述相关度调整为零,只需一步数。这样便能够在瞬间得出图像 。

3、文字转视频现在支持lora加载啦,同时也支持LCM采样器哟,只需5步就能完成了哟,这意味着速度提升了4至5倍哟。

4、给CN作画增添作画内容,给出一张人脸控制图,对SD模型设置进行选择,选SD XL大模型,借此就能依据这张人脸绘制不同风格的图,这和lora训练相类似,不过省去了训练时间直接输出图形。

01

软件概览

有一款软件名为,AI作画离线版V7.1,它是基于开源项目Disco,以及除此之外的诸多开源项目所诞生的 工具 。

如下,软件主界面,还是以操作简单为主:

02

软件安装

软件规模颇为庞大,缘由在于存有诸多离线模型,这些模型是依据功能予以划分的,能够依照需求去下载,待下载达成之后,依据网盘当中的pdf教程便可展开体验。

软件界面如下所示:

03

软件功能介绍

功能一:SD( )作画

开源作画框架之中当下最为流行的是SD作画,SD作画模式之下,当前支持文生图(SD一代、SD XL予以支持),支持图生图,支持文字生成视频,支持SD动画,支持队列模式,支持局部修改,支持图片描述解析等功能 。

设定描述词时,其包含正描述与负描述,负描述在默认情况下可不写,一旦写上负描述,那就意味着是不想让绘画最终呈现结果出现的具有特定性质的元素。

在队列模式之中,存在着关于描述词的设定情况,当把队列模式勾选之后,借助固定句式,能够生成诸多配置文件,如此一来,便可以达成生成多套参数之图的目的了,句号。

譬如我的文字描述这般表述:一个女孩借助{400|1|艺术家},在点击保存设定之后就会产生400个艺术家的各异配置文件。

留意这个格式,{400|1|艺术家}里的{}、|这些是必须有的,要完全依照固定格式来,400的意思是生成400个配置文件,1表示by一个艺术家名字(要是设置成2那就表示by两个艺术家名字混搭),艺术家指的是软件目录下【描述风格库】文件夹中的艺术家.csv文件,而艺术家.csv文件呈现如下,有两列数据:

大家能够借助软件自建这般的语料库,诸位可以去复制csv从而打造副本,然后于副本之中进行修改,要留意同样是依照两列的格式来做,其中的第一列是用作描述的,第二列是用于解释的。就好比下面我所构建的颜色.csv文件,只是简略书写了一番,同样是务必严格按照两列的规格来的哈,并且都放置于软件目录下的【描述风格库】文件夹之中。

一、二,支持先写个开头,接着跟如下步骤,要点此下AI生成描述,以此往后续写描述。然后,目前已然存在两种自动写描述引擎了 。

绘图参数方面,绘制图片轮数所代表的是每次绘制图片的数量,描述相关度的默认数值是可行的,当然也能够尝试10以上的数值,随机种子的默认值为0,其代表每次种子随机,若设置大于零的固定值,在其他参数一致的情况下,SD出图将会完全相同。

当采样器选定LCM这个选项时,下面这些步数能够被设定为5,对于描述相关度给出的推荐数值是0,如此一来便能够达成加速生成图片的目的,情况如下:

3、显存占用模式选择:软件提供不同显存占用模式。

4、图生图:参数挺简单的,基本上呢,就是先把原图给导入进去,接着去修改描述,然后设置图片差异度参数就行啦,要注意差异度参数范围是0到1哦,这里面1代表和参考图差异是最大的哈。另外呀,自适应尺寸算是很人性化的,比如说参考图尺寸的宽和高是这样的,绘图参数尺寸设置成512×512,默认状况下是无,这代表着不自适应,最终出来的图尺寸就是512×512,固定宽所代表的意思是,是以绘图参数尺寸设置的宽512为准,比如说参考图宽高比是2比1,那么高就会自动修改为256,也就呈现出最终要输出的图。

底下这样,去尝试一下SD参考图,达成或是弄出真人二次元的那种效果,或者还有其他的某些效果:

5、动画,若选择SD动画里的2D,就能开启动画模式,动画还能够设置参考图,它支持动画进行变化角度,支持动画缩放大小,支持动画在xyz轴移位等。

这样的要求表述得很特别呢,不过我不太明确具体要改写什么样的句子呀,请你提供一下原句,以便我按照格式进行改写 。

10:::a

20:::b

40:::c

如下SD动画演示视频:

6、动画,选择SD动画,便可开启文字生成动画模式,正常进行输入描述,就能生成像下面这样的短动画:

7、用于图片生成视频的SVD,在SD动画方面可选用SVD或者SVD 1.1,在图生图当中导入参考图,便能依据图片生成视频,设置如下:

如下为效果演示视频:

8、关于SD、LORA、VAE模型的选择:能够支持对第三方ckpt格式的SD模型进行选择,也能支持对第三方ckpt格式的VAE模型进行选择,还能支持对第三方ckpt格式的LORA模型进行选择(并且连类的LORA模型也支持),情况如下所示:

选SD XL之际,会自动换至SD XL模式去作画,SD XL的效果跟一代比好出许多,就是如下测试里XL所做出的图:

Stable Diffusion中文教程_AI作画离线版V7.1教程_ai绘画安卓版

9. 对于AI图片描述解析,点击如下按钮,挑选图片,稍微等待一小会儿,就能够显示出描述,当然啦,这个描述存在一定差异,不过当作描述用来画的图确实挺好的。

下面演示几张图,解析出来的描述:

邻近彼此处于海洋中的一组钢铁侠形象,由保罗创作的一幅漫画书面板,借助光与魔法呈现,IMAX格式的 。 。 。 这里存在分隔开来的 。 。 形式上难以连贯顺畅理解的表述 。 。 。 。 其创作通过光与魔法 与媒介表现形式相关 。 海洋里有邻近彼此的一组钢铁侠形象 。 由保罗所创作的一幅漫画书面板 。 借助光与魔法呈现。

请你明确一下具体需求呀,可以翻译这段话,或者对其进行润色之类的,目前不太清楚你想要怎样改写它呢。你提供的这些内容像是一堆单词和短语的组合,没有完整语义,不太能确定具体改写方向。你可以给我讲讲完整句子要表达的大概意思,这样我就能完成改写啦。可按你说的。

10、二次元TAG解析:如下进行点击按钮的操作,此操作支持二次元图片的TAG解析,像等模型之类是比较有需求的:

功能二:CN作画

当下声名远扬,备受瞩目的那个CN,如今软件已同步更新至CN 1.1版本,在整体使用方法上,与SD相比,并无太大差异。

CN的精髓在于下图,不同的这些模型:

1、各模型作简单演示:这些模型所为,乃针对各异参考图展开创作,像是有的模型就针对线稿参考图,进而达成线稿上色亦或二次创作之目的,如下予以演示,选取此二次元线稿的CN模型并搭配二次元SD模型以及描述:

进行这样一个选取某个身体姿态的CN类型的模型,左边的那张图是原始的图像,处于中间位置的是识别该原始图像所得到的骨骼图形,而右边的那张图是生成出来的图形 。

如下SEG语义分割的CN模型效果:

如下MLSD这种识别建筑线稿的CN模型效果:

如下为超分辨率的Tile的CN模型,真的是模糊图重绘神器:

如下为二维码模型的CN模型,可以做图片二维码:

如下为tile模型的妙用,实现文字光影效果:

2、CN视频重绘:鉴于,我们借助挑选恰当的CN模型,接着于控制图之中引入需要重绘的视频就行,软件的操作极为简洁,如下为视频重绘的效果演示视频:

3、关于CN的ID进行创作,能够在不借助训练的情况下,生成那由CN所给定的人脸控制图,接着依据描述或者不同风格的模型,绘制出来具备不同风格的此人的图片,需要注意的是SD模型要选用XL大模型,就像如下的测试图(第一张是原图,其他的图是生成图):

功能三:DD(Disco )作画

1、描述词设定:如下为默认的描述,每一段,这里回车换行算作一段,都是同一描述的不同权重关键词 。

是这样的,关于图生图,参考图变得更具人性化了呢,你只需直接去点击按钮从而选择图片就行啦,要留意看一下参数旁边的问号哦,通常在加入参考图的时候呀,这个参数是需要设置得大一些的。

4、关于AI作画模型的选择,在参数设置当中,存在着两种绘图模型引擎可供选择,分别是原版DD,像素版DD,以及其他自定义的PT格式模型,其设置如下所示:

如下演示的是国画模型:

功能四:图片/视频AI高清放大

设置各异的放大模型,设定不同的图片放大倍数,其高清放大的图片,输出目录为软件目录\\,当所输入的图片尺寸颇大时,会轻易导致超显存情况发生,此时我们将拼图大小这个参数予以修改便可,比如说设置为拼图大小512的时候,6G显存选择模型针对1920*1080的图片进行4倍放大测试不会出现超显存现象。该软件支持2至10倍的放大。

AI高清放大属于一项独立功能,软件主界面当中,在图片处理菜单里面要进行选择,需选择图片/视频高清放大选项之一,针对图片或者视频来做出选择,这里是支持批量操作情形的喔,当完成上述选择之后,便能够对图片或者视频实施高清放大操作啦。

如下,小图经过高清放大的对比效果,二次元和三次元都能胜任。

功能五:老照片修复

在软件主界面,通过处理菜单中的图片操作,选择老照片修复选项,再选择图片(此选择支持批量),这样就能对老照片进行高清修复,可这种修复是仅仅针对人像来做高清修复的,。

如下,经过高清人脸修复对比效果动图演示:

功能六:图片/视频上色

从软件主界面图片处理菜单当中,挑选图片或者视频上色这项操作,选择黑白的视频或者图片,进而能够实现上色,并且支持批量处理。

在这里的参数相关设置当中,能够去挑选相异的上色模型,其中二次元模型着重点在于二次元线稿的上色 。

如下动图演示,上色前后的效果:

功能七:图片说话

ai绘画安卓版_Stable Diffusion中文教程_AI作画离线版V7.1教程

那种具备图片说话功能的,能够达成将导入的图片转化成呈现为说话人视频样式的效果,它对音频以及视频驱动加以支持,并且会默认以音频驱动来实现说话 。

往软件的主界面那儿点一下,找到图片处理菜单,从中选图片说话这一项,再挑图片(批量是支持的),接着把图片转成如下这般的视频形态时。

功能八:AI图片转3D

AI图片转向3D输出视频的目录为:软件目录这儿的\video;AI图片转向3D它还是一项独立免费的功能:在如下参数内设置能够设置生成视频的时长以及摄像头位置(位置通常不做改变),。

在软件主界面,于图片处理菜单里,选择图片转3D,接着选择图片(此支持批量),随后将图片转换为视频形式,不过这个转换速度比较慢,一张图需要5到30分钟。

大体上便是原作项目介绍所呈现的这般效果,一张精致的图片转变为3D形式的那种效果,然而相较于原作而言,我进行了改进,能够支持与原图尺寸大小等同的视频 。

功能九:抠图

在软件主界面之中,于图片处理菜单那里选择抠图,接着选择图片(此支持批量),随后就能够进行背景以及人物的分割,就像下面所展示的这样:

功能十:二次元生成

在软件的主界面之中,找到图片处理的菜单选项,从中进行二次元生成类别的选择,然后便能够绘制出数量达到上百张的二次元图片 。

在参数设置处,能够设置各类参数,进而生成不一样类型的二次元小姐姐,像这样 。

功能十一:三次元生成

对于软件主界面,当在图片处理菜单之中进行选择,且选择的是三次元生成时,便是能够绘制出上百张三次元图片的哟。

可进行如下操作,在参数设置之处,对各类参数予以设置,借此生成不同种类的三次元图片,此为可行之事:

功能十二:AI写小说

软件的主界面之中,存在小说聊天菜单,于该菜单里进行选择,可进入AI写小说方面的聊天界面,接下来,就这般点击AI写小说按钮后,对开头予以设置,如此一来,便能够续写不同轮数的文字了:

点选训练小说,像下面这样能够挑选自行的小说语料txt而去训练自身的模型,。

还对清华大学予以支持,留意这个起码得有6G显存,并且加载模型的速度较为迟缓,请耐心等候,能够达成类似的形式:

功能十三:伴奏人声分离

在软件的主界面之中,针对音视频处理这一操作,去选择伴奏人声分离这一选项,然后选择歌曲,此选择支持批量操作,做完这些后,便能够自动实现人声、伴奏、鼓点以及低音的分离,其呈现出来的效果是相当厉害的。

若显存4G及以下,可以如下参数设置勾选低显存占用模式即可:

功能十四:音视频转文字

在软件的主界面里,存在着音视频处理这一选项。当选择音视频转文字时,能够挑选音频,也能够选择视频,随后就能够开展语音识别操作,进而输出字幕以及文字版的txt文件。

音视频转文字这项功能,具备支持100多个国家语言的特性,要是选择汉语的话,无论何种语言的音视频,最终都会自动被翻译成中文字幕以及txt文件,既方便又快捷,然而翻译出来的效果存在着局限性,因而最好选择处于原始视频初始状态下与视频原来相符的语言来进行识别。

7.1版本的大模型,处于int8模式时,仅仅只需4至5G的显存,其速度比之前快上4倍,而且所呈现的效果也是相当不错的。

下述情况中,被挑选取出的日文视频演讲所具备的识别字幕成效,红色框架呈现的是软件依据识别自行翻译成的字幕 。

功能十五:视频补帧

此些软件具备支持视频二至十六倍补帧之功能,这般效果亦是颇为不错的,按如下参数设置来开展设置参数便可:

点击那个被称作音视频处理菜单里的视频补帧选项,从中挑选出打算要用来补帧的视频就行,而补帧所呈现出来的效果便是如下图所示的这般效果,其内在原理乃是借助AI去计算相邻的两帧画面,随后凭借此算出中间大量的帧画面来:

功能十六:AI文字生成音乐

将文字转化成图画的是AI作画,而音乐同样能如此转化,像下面这样的参数设定可是支持把文字转化成音频的设置的,它还支持作批量的输入,也就是换行输入咯,它也支持参考音频,之后呢把设置保存好,在主界面的音视频处理菜单那里有着文字生成功能,通过这个文字生成音乐的功能就能生成音乐啦。

04

显卡要求

要有至少2GB的显存才行,且必定得是英伟达的显卡,AMD以及intel等是不支持的。

各种显存测试参数可参考:。

05

小结

此项目着实颇具趣味,仅有的问题在于对显卡要求颇高,起码得要有英伟达2G及以上的显存,AMD等别的显卡并不支持,感兴趣之人能够去体验一番7.1版本了,更为详尽的作图参数、教程多去刷刷B站相关视频便行。

06

本期内容获取

方式一:百度网盘

  提取码:6thr

方式二:123网盘(速度挺快)

  提取码:NHJF

欢迎 发表评论:

请填写验证码

评论列表

暂无评论,快抢沙发吧~