图像生成工具箱 SDK
1. 文生图：输入提示词，生成图片
2. 图生图：根据图片及提示词生成图片
3. Lora 图像生成
- 文生图测试
- 提示词 prompt： a photo of an astronaut riding a horse on mars
- 生成图片效果：
4. Controlnet 图像生成
4.1. Canny 边缘检测
- Canny 边缘检测预处理器可很好识别出图像内各对象的边缘轮廓，常用于生成线稿。
- 对应ControlNet模型： control_canny
4.2. MLSD 线条检测
- MLSD 线条检测用于生成房间、直线条的建筑场景效果比较好。
- 对应ControlNet模型： control_mlsd
4.3. Scribble 涂鸦
- 不用自己画，图片自动生成类似涂鸦效果的草图线条。
- 对应ControlNet模型： control_scribble
4.4. SoftEdge 边缘检测
- SoftEdge 边缘检测可保留更多柔和的边缘细节，类似手绘效果。
- 对应ControlNet模型： control_softedge。
4.5. OpenPose 姿态检测
- OpenPose 姿态检测可生成图像中角色动作姿态的骨架图(含脸部特征以及手部骨架检测)，这个骨架图可用于控制生成角色的姿态动作。
- 对应ControlNet模型： control_openpose。
4.6. Segmentation 语义分割
- 语义分割可多通道应用，原理是用颜色把不同类型的对象分割开，让AI能正确识别对象类型和需求生成的区界。
- 对应ControlNet模型： control_seg。
4.7. Depth 深度检测
- 通过提取原始图片中的深度信息，生成具有原图同样深度结构的深度图，越白的越靠前，越黑的越靠后。
- 对应ControlNet模型： control_depth。
4.8. Normal Map 法线贴图
- 根据图片生成法线贴图，适合CG或游戏美术师。法线贴图能根据原始素材生成一张记录凹凸信息的法线贴图，便于AI给图片内容进行更好的光影处理，它比深度模型对于细节的保留更加的精确。法线贴图在游戏制作领域用的较多，常用于贴在低模上模拟高模的复杂光影效果。
- 对应ControlNet模型： control_normal。
4.9. Lineart 生成线稿
- Lineart 边缘检测预处理器可很好识别出图像内各对象的边缘轮廓，用于生成线稿。
- 对应ControlNet模型： control_lineart。
4.10. Lineart Anime 生成线稿
- Lineart Anime 边缘检测预处理器可很好识别出卡通图像内各对象的边缘轮廓，用于生成线稿。
- 对应ControlNet模型： control_lineart_anime。
4.11. Content Shuffle
- Content Shuffle 图片内容变换位置，打乱次序，配合模型 control_v11e_sd15_shuffle 使用。
- 对应ControlNet模型： control_shuffle。
项目源码的使用说明
代码下载地址，请帮忙点星
