全爱科技 - 黑白视频上色

黑白视频上色

视频黑白图像上色样例

功能：使用黑白图像上色模型对输入的黑白视频进行推理。
样例输入：黑白mp4视频。
样例输出：presenter界面展现推理结果。

前置条件

请检查以下条件要求是否满足，如不满足请按照备注进行相应处理。如果CANN版本升级，请同步检查第三方依赖是否需要重新安装（5.0.4及以上版本第三方依赖和5.0.4以下版本有差异，需要重新安装）。

条件	要求	备注
CANN版本	>=5.0.4	请参考CANN样例仓介绍中的安装步骤完成CANN安装，如果CANN低于要求版本请根据版本说明切换samples仓到对应CANN版本
硬件要求	Atlas200DK/Atlas300(ai1s)	当前已在Atlas200DK和Atlas300测试通过，产品说明请参考硬件平台，其他产品可能需要另做适配
第三方依赖	presentagent, opencv, ffmpeg+acllite	请参考第三方依赖安装指导(C++样例)完成对应安装

样例准备

获取源码包。

可以使用以下两种方式下载，请选择其中一种进行源码准备。

命令行方式下载（下载时间较长，但步骤简单）。

# 开发环境，非root用户命令行中执行以下命令下载源码仓。    
cd ${HOME}     
git clone https://gitee.com/ascend/samples.git

注：如果需要切换到其它tag版本，以v0.5.0为例，可执行以下命令。

git checkout v0.5.0

压缩包方式下载（下载时间较短，但步骤稍微复杂）。
注：如果需要下载其它版本代码，请先请根据前置条件说明进行samples仓分支切换。

 # 1. samples仓右上角选择 【克隆/下载】 下拉框并选择 【下载ZIP】。    
 # 2. 将ZIP包上传到开发环境中的普通用户家目录中，【例如：${HOME}/ascend-samples-master.zip】。     
 # 3. 开发环境中，执行以下命令，解压zip包。     
 cd ${HOME}    
 unzip ascend-samples-master.zip

获取此应用中所需要的原始网络模型。

模型名称	模型说明	模型下载路径
colorization	黑白视频上色推理模型。是基于Caffe的colorization模型。	请参考https://gitee.com/ascend/ModelZoo-TensorFlow/tree/master/TensorFlow/contrib/cv/colorization/ATC_colorization_caffe_AE目录中README.md下载原始模型章节下载模型和权重文件。

# 为了方便下载，在这里直接给出原始模型下载及模型转换命令,可以直接拷贝执行。也可以参照上表在modelzoo中下载并手工转换，以了解更多细节。 
cd ${HOME}/samples/python/level2_simple_inference/6_other/colorization_video/model
wget https://modelzoo-train-atc.obs.cn-north-4.myhuaweicloud.com/003_Atc_Models/AE/ATC%20Model/colorization/colorization.caffemodel
wget https://modelzoo-train-atc.obs.cn-north-4.myhuaweicloud.com/003_Atc_Models/AE/ATC%20Model/colorization/colorization.prototxt
atc --input_shape="data_l:1,1,224,224" --weight="./colorization.caffemodel" --input_format=NCHW --output=colorization --soc_version=Ascend310 --framework=0 --model="./colorization.prototxt"

样例部署

执行以下命令，执行编译脚本，开始样例编译。

cd $HOME/samples/cplusplus/level2_simple_inference/6_other/colorization_video /scripts
bash sample_build.sh

样例运行

注：开发环境与运行环境合一部署，请跳过步骤1，直接执行步骤2即可。

执行以下命令,将开发环境的 colorization_video 目录上传到运行环境中，例如 /home/HwHiAiUser，并以HwHiAiUser（运行用户）登录运行环境（Host）。

# 【xxx.xxx.xxx.xxx】为运行环境ip，200DK在USB连接时一般为192.168.1.2，300（ai1s）为对应的公网ip。
scp -r ${HOME}/samples/cplusplus/level2_simple_inference/6_other/colorization_video HwHiAiUser@xxx.xxx.xxx.xxx:/home/HwHiAiUser    
ssh HwHiAiUser@xxx.xxx.xxx.xxx     
cd ${HOME}/colorization_video/scripts

执行运行脚本，开始样例运行。
```
bash sample_run.sh
```

查看结果

打开presentserver网页界面。
- 使用产品为200DK开发者板。
  打开启动Presenter Server服务时提示的URL即可。
- 使用产品为300加速卡（ai1s云端推理环境）。
  以300加速卡（ai1s）内网ip为192.168.0.194，公网ip为124.70.8.192举例说明。
  启动Presenter Server服务时提示为Please visit http://192.168.0.194:7009 for display server。
  只需要将URL中的内网ip：192.168.0.194替换为公网ip：124.70.8.192，则URL为 http://124.70.8.192:7009。
  然后在windows下的浏览器中打开URL即可。
等待Presenter Agent传输数据给服务端，单击“Refresh“刷新，当有数据时相应的Channel 的Status变成绿色。
单击右侧对应的View Name链接，查看结果。