当前位置: 首页 > news >正文

stable diffusion实践操作-hypernetworks

系列文章目录

本文专门开一节写hypernetworks的内容,在看之前,可以同步关注:
stable diffusion实践操作


提示:写完文章后,目录可以自动生成,如何生成可参考右边的帮助文档

文章目录

  • 系列文章目录
  • 前言
  • 一、hypernetworks是什么?
    • 1 能做什么?
    • 2 原理
    • 3 与其它区别
  • 二、如何使用
    • 1 下载与存放
    • 2 如何使用
    • 3 注意事项
  • 三、收集到的模型
    • 1.1 Multi-waifu-mix
  • 总结


前言

`本章注意要介绍Hypernetwork,也叫做超网络,下面是一个原理概述。


一、hypernetworks是什么?

1 能做什么?

中文名字叫超网络,功能和embedding,lora类似,都是对生成的图片进行针对性的调整,小白可以理解为低配版本的lora。

因为hypernetworks主要用来训练画风,训练难度较大,很有可能被后出现的lora所替代,不过人家既然能坚持到现在,说明也有它的两把刷子。我觉得它最重要,也最好的功能就是对画面风格的转换。
下面这个就是把漫画风格转换为像素风格。

除了画风,它其实也可以训练人物和物品,比如电影角色,但是大家为什么用的少呢,它做到了神似,但是想要高精度还原的话,还是要借助于lora.

2 原理

SD的原理可以这样理解,我们发送一段文本到SD中,然后输出一张符合预期的图片。
embedding就作用于编码器中,影响最后的输出。

在整个运算当中,所有的计算都是在diffusion模型中进行,这个diffusion就是一种神经网络模型。
超网络如下图,通过控制神经网络的权重,最后来完成某种风格的图片输出。

3 与其它区别

总结如下

二、如何使用

1 下载与存放

下载后存放地址:sd-webui-aki-v4.2\models\hypernetworks

2 如何使用

和lora比较类似,hypernet:名称:权重,提示词

<hypernet:Multi-waifu-mix_v1.0:1>,alice zuberg

具体细节可以看下图

3 注意事项

因为超网络会影响模型权重,所以如果想要用好超网络,需要遵从以下几点要求:



三、收集到的模型


下载链接:
国内的是:https://www.liblibai.com
国外的是:https://civitai.com
下载后存放地址:sd-webui-aki-v4.2\models\hypernetworks

序号名称说明
1Multi-waifu-mix漫画女孩
2$1
导3$1

1.1 Multi-waifu-mix

下载链接:https://www.liblibai.com/modelinfo/20ad3e989d47d74745ccf14bcc73c411
基础模型:SD1.5(AWPainting_v1.2_liblib_sd15.safetensors)
触发词语:根据角色不同来确定
正面提示词:

fantasy,landscape,best quality,highly detailed,
<hypernet:Multi-waifu-mix_v1.0:1>,1girl,esdeath \(genshin impact\),

反面提示词:

lowres,bad anatomy,bad hands,text,error,missing fingers,
extra digit,fewer digits,cropped,worst quality,
low quality,normal quality,jpeg artifacts,signature,
watermark,username,blurry,artist name,

该模型包含了很多角色,可以根据需要进行挑选:

V1.0 model containing 75 characters:
aisaka taiga
alice zuberg
altina orion
angela balzac
angelina kudou shields
aqua (konosuba)
ayanami (azur lane)
black heart
darkness (konosuba)
echidna (re:zero)
elaina (majo no tabitabi)
emilia (re:zero)
eris greyrat
eula (genshin impact)
fujibayashi kyou
furuhashi fumino
gokou ruri
gotou hitori
hiiragi shinoa
himeragi yukina
hiroi kikuri
holo
...
图1 vladilena millize
图2 alice zuberg

总结

以上就是今天要讲的内容。

http://www.lryc.cn/news/151463.html

相关文章:

  • Win10搭建VisualSvn Server
  • Golang网络编程
  • 详解vue3中ref和reactive用法和区别
  • QML与C++的交互操作
  • Java_理解方法调用
  • Mysql 性能分析(慢日志、profiling、explain)、读写分离(主从架构)、分库分表(垂直分库、垂直分表、水平分表)
  • 获取Linux内核源码
  • 【Maven教程】(四)坐标与依赖:坐标概念,依赖配置、范围、传递性和最佳实践 ~
  • Java“牵手”京东店铺所有商品API接口数据,通过店铺ID获取整店商品详情数据,京东店铺所有商品API申请指南
  • TuyaOS开发学习笔记(1)——NB-IoT开发搭建环境、编译烧写(MT2625)
  • Css 将div设置透明度,并向上移50px,盖住上面的元素一部分
  • HTTPS安全通信和SSL Pinning
  • PHP自己的框架PDO数据表前缀、alias、model、table、join方法实现(完善篇九--结束)
  • 华为OD:敏感字段加密
  • IDEA新建SpringBoot项目时启动编译报错:Error:java: 无效的源发行版: 17
  • 【云原生进阶之PaaS中间件】第一章Redis-2.3.3集群模式
  • 游戏发行商能够提供什么服务?
  • Linux 多进程解决客户端与服务器端通信
  • Scala的模式匹配
  • HttPClient简介及示例:学习如何与Web服务器进行通信
  • STS4 New 安装Spring Bean Configuration File
  • Java经典面试题(异或运算)
  • No primary or single unique constructor found for interface java.util.List
  • C#关于WebService中File.Exists()处理远程路径的异常记录
  • JavaWeb_LeadNews_Day10-Xxljob, Redis实现定时热文章
  • 【WebRTC---源码篇】(二:二)视频源VideoSourceBase
  • Linux_8_磁盘存储和文件系统
  • VS + QT 封装带UI界面的DLL
  • 逆向工程-架构真题(二十)
  • Zookeeper 入门