图像生成工具箱 SDK

1. 文生图：输入提示词，生成图片

2. 图生图：根据图片及提示词生成图片

3. Lora 图像生成

• 文生图测试
• 提示词 prompt： a photo of an astronaut riding a horse on mars
• 生成图片效果：

4. Controlnet 图像生成

4.1. Canny 边缘检测

• Canny 边缘检测预处理器可很好识别出图像内各对象的边缘轮廓，常用于生成线稿。
• 对应ControlNet模型： control_canny

4.2. MLSD 线条检测

• MLSD 线条检测用于生成房间、直线条的建筑场景效果比较好。
• 对应ControlNet模型： control_mlsd

4.3. Scribble 涂鸦

• 不用自己画，图片自动生成类似涂鸦效果的草图线条。
• 对应ControlNet模型： control_scribble

4.4. SoftEdge 边缘检测

• SoftEdge 边缘检测可保留更多柔和的边缘细节，类似手绘效果。
• 对应ControlNet模型： control_softedge。

4.5. OpenPose 姿态检测

• OpenPose 姿态检测可生成图像中角色动作姿态的骨架图(含脸部特征以及手部骨架检测)，这个骨架图可用于控制生成角色的姿态动作。
• 对应ControlNet模型： control_openpose。

4.6. Segmentation 语义分割

• 语义分割可多通道应用，原理是用颜色把不同类型的对象分割开，让AI能正确识别对象类型和需求生成的区界。
• 对应ControlNet模型： control_seg。