【Hackathon 5th】fastdeploy版的sd15模型添加gradio界面 #311
Conversation
|
你好，需要添加更多的参数到gradio界面，比如negative_prompt，guidance scale |
需要全部吗？因为 pipe那边还满多的，还是说常见的即可呢 |
|
1.2 : 收到 |
|
如果想要导出模型，请使用ppdiffusers==0.16.3进行导出。 推理的环境： # aistudio的v100环境下
python -m pip install paddlepaddle-gpu==2.5.2 -i https://pypi.tuna.tsinghua.edu.cn/simple --user
pip install fastdeploy-gpu-python -f https://www.paddlepaddle.org.cn/whl/fastdeploy.html --user
pip install https://paddlenlp.bj.bcebos.com/models/community/junnyu/fd_trt_model/ppdiffusers-0.19.3-py3-none-any.whl --user适配文生图，图生图，inpaint legacy的模型 # 下载导出后的模型
# 这个是适配文生图，图生图，inpaint legacy的模型
wget https://paddlenlp.bj.bcebos.com/models/community/junnyu/fd_trt_model/runwayml_stable-diffusion-v1-5_fd.tar.gz && tar -zxvf runwayml_stable-diffusion-v1-5_fd.tar.gz
python infer.py --model_dir runwayml_stable-diffusion-v1-5_fd --task_name text2img
python infer.py --model_dir runwayml_stable-diffusion-v1-5_fd --task_name img2img
python infer.py --model_dir runwayml_stable-diffusion-v1-5_fd --task_name inpaint_legacy
适配inpaint的模型 wget https://paddlenlp.bj.bcebos.com/models/community/junnyu/fd_trt_model/stable-diffusion-v1-5-inpainting.tar.gz && tar -zxvf stable-diffusion-v1-5-inpainting.tar.gz
python infer.py --model_dir stable-diffusion-v1-5-inpainting --task_name inpaint
适配Controlnet的模型 # 使用的是controlnet目录下的infer
cd controlnet
# 下载
wget https://paddlenlp.bj.bcebos.com/models/community/junnyu/fd_trt_model/control_sd15_canny.tar.gz && tar -zxvf control_sd15_canny.tar.gz
python infer.py --model_dir control_sd15_canny --task_name text2img_control
|
|
@JunnYu 验证如下：(目前是普通的后端跑通但留了fd的接口） 普通pipe
inpaint
canny
|
|
现在咋样了呢？这个gradio界面能跑成功了吗？ |
sorry这两三天加班都到九点多，我已经把模型拉到本地了，明晚上看看能不能再给新的一版 |
修正了大小 和图生图 inpaint问题：
|
|
@JunnYu 麻烦研发大哥有空看看~ |
shiyutang
changed the title
|
我跑了一下，文生图、图生图、inpaint没有问题。 |
|
再添加一下对应的使用的readme，以及使用结果的截图。 |
图片文件存在哪，可以新建asset文件夹吗 |
|
@sanbuphy 直接放到github这里，比如拖拽个图片进来 |
明白，我写下readme |
|
TODO内容：
|
已部署成功，已添加readme |
ppdiffusers/deploy/README.md
Outdated
|
|
||
| pip install fastdeploy-gpu-python -f https://www.paddlepaddle.org.cn/whl/fastdeploy.html | ||
|
|
||
| pip install https://paddlenlp.bj.bcebos.com/models/community/junnyu/fd_trt_model/ppdiffusers-0.19.3-py3-none-any.whl |
|
|
请问这边的文生图/图生图接口，会和diffusers相关接口保持同步吗？比如StableDiffusionControlNetInpaintPipeline， StableDiffusionControlNetImg2ImgPipeline 这种接口好像diffusers的参数他有时候会增加的 |
你好，比较困难，没有ci覆盖不知道什么时候坏了需要修理，只能固定一个版本 |
支持文生图、图生图、inpaint_legacy、inpaint、controlnet+canny的推理
#256
aistudio 项目还在施工中。