全爱科技 - AI图像修复

AI图像修复

高清图像修复（python）

功能：超高分辨率图像修复。
样例输入：待修复的jpg图片以及对应的mask图片。
样例输出：修复后的图片。

前置条件

请检查以下条件要求是否满足，如不满足请按照备注进行相应处理。如果CANN版本升级，请同步检查第三方依赖是否需要重新安装（5.0.4及以上版本第三方依赖和5.0.4以下版本有差异，需要重新安装）。

条件	要求	备注
CANN版本	>=5.0.4	请参考CANN样例仓介绍中的安装步骤完成CANN安装，如果CANN低于要求版本请根据版本说明切换samples仓到对应CANN版本
硬件要求	Atlas200DK/Atlas300(ai1s)	当前已在Atlas200DK和Atlas300测试通过，产品说明请参考硬件平台，其他产品可能需要另做适配
第三方依赖	opencv,python-acllite	请参考第三方依赖安装指导（python样例）选择需要的依赖完成安装

样例准备

获取源码包。

可以使用以下两种方式下载，请选择其中一种进行源码准备。

命令行方式下载（下载时间较长，但步骤简单）。

# 开发环境，非root用户命令行中执行以下命令下载源码仓。    
cd ${HOME}     
git clone https://gitee.com/ascend/samples.git

注：如果需要切换到其它tag版本，以v0.5.0为例，可执行以下命令。

git checkout v0.5.0

压缩包方式下载（下载时间较短，但步骤稍微复杂）。
注：如果需要下载其它版本代码，请先请根据前置条件说明进行samples仓分支切换。

 # 1. samples仓右上角选择 【克隆/下载】 下拉框并选择 【下载ZIP】。    
 # 2. 将ZIP包上传到开发环境中的普通用户家目录中，【例如：${HOME}/ascend-samples-master.zip】。     
 # 3. 开发环境中，执行以下命令，解压zip包。     
 cd ${HOME}    
 unzip ascend-samples-master.zip

获取此应用中所需要的模型并转换。

模型名称	模型说明	模型下载路径
image_inpainting	使用ImageInpainting模型对超高分辨率图像修复	image_inpainting：https://gitee.com/ascend/ModelZoo-TensorFlow/tree/master/TensorFlow/contrib/cv/imageinpainting_HiFill

cd ${HOME}/samples/python/level2_simple_inference/6_other/imageinpainting_hifill/model
wget https://c7xcode.obs.myhuaweicloud.com/models/imageinpainting_hifill/matmul_27648.json   
wget https://c7xcode.obs.myhuaweicloud.com/models/imageinpainting_hifill/hifill.pb
atc --output_type=FP32 --input_shape="img:1,512,512,3;mask:1,512,512,1" --input_format=NHWC --output="./hifill" --soc_version=Ascend310 --framework=3 --save_original_model=false --model="./hifill.pb"
atc --singleop=./matmul_27648.json --output=./0_BatchMatMul_0_0_1_1_1024_1024_0_0_1_1_1024_27648_0_0_1_1_1024_27648 --soc_version=Ascend310

获取样例需要的测试图片。

# 执行以下命令，下载对应的测试图片。
cd ${HOME}/samples/python/level2_simple_inference/6_other/imageinpainting_hifill/data
wget https://c7xcode.obs.myhuaweicloud.com/models/imageinpainting_hifill/data/test.jpg
cd ${HOME}/samples/python/level2_simple_inference/6_other/imageinpainting_hifill/mask
wget https://c7xcode.obs.myhuaweicloud.com/models/imageinpainting_hifill/mask/test.jpg 
cd ../src

样例运行

注：开发环境与运行环境合一部署，请跳过步骤1，直接执行步骤2即可。

执行以下命令,将开发环境的 imageinpainting_hifill 目录上传到运行环境中，例如 /home/HwHiAiUser，并以HwHiAiUser（运行用户）登录运行环境（Host）。

# 【xxx.xxx.xxx.xxx】为运行环境ip，200DK在USB连接时一般为192.168.1.2，300（ai1s）为对应的公网ip。
scp -r $HOME/samples/python/level2_simple_inference/6_other/imageinpainting_hifill HwHiAiUser@xxx.xxx.xxx.xxx:/home/HwHiAiUser
ssh HwHiAiUser@xxx.xxx.xxx.xxx
cd ${HOME}/imageinpainting_hifill/src