README_CN.md 5.3 KB
Newer Older
H
hypox64 已提交
1 2 3 4 5 6 7
<div align="center">
  <img src="./imgs/logo.png" width="250"><br><br>
  <img src="https://badgen.net/github/stars/hypox64/deepmosaics?icon=github&color=4ab8a1">&emsp;<img src="https://badgen.net/github/forks/hypox64/deepmosaics?icon=github&color=4ab8a1">&emsp;<a href="https://github.com/HypoX64/DeepMosaics/releases"><img src=https://img.shields.io/github/downloads/hypox64/deepmosaics/total></a>&emsp;<a href="https://github.com/HypoX64/DeepMosaics/releases"><img src=https://img.shields.io/github/v/release/hypox64/DeepMosaics></a>&emsp;<img src=https://img.shields.io/github/license/hypox64/deepmosaics>
</div>

# DeepMosaics
**[English](./README.md) | 中文**<br>
H
HypoX64 已提交
8

H
hypox64 已提交
9
这是一个通过深度学习自动的为图片/视频添加马赛克,或消除马赛克的项目.<br>它基于“语义分割”以及“图像翻译”.<br>现在可以在这个[网站](http://118.89.27.46:5000/)尝试使用该项目清除马赛克!<br>
H
hypox64 已提交
10

H
hypox64 已提交
11 12
### 例子
![image](./imgs/hand.gif)
H
hypox64 已提交
13 14
原始 | 自动打码 |  自动去码  
:-:|:-:|:-:
H
HypoX64 已提交
15 16
![image](./imgs/example/lena.jpg) | ![image](./imgs/example/lena_add.jpg) | ![image](./imgs/example/lena_clean.jpg) 
![image](./imgs/example/youknow.png)  | ![image](./imgs/example/youknow_add.png) | ![image](./imgs/example/youknow_clean.png) 
H
hypox64 已提交
17

H
hypox64 已提交
18
*[DeepCreamPy](https://github.com/deeppomf/DeepCreamPy)相比较
H
hypox64 已提交
19

H
hypox64 已提交
20
马赛克图片 | DeepCreamPy | ours  
H
hypox64 已提交
21
:-:|:-:|:-:
H
HypoX64 已提交
22 23
![image](./imgs/example/face_a_mosaic.jpg) | ![image](./imgs/example/a_dcp.png) | ![image](./imgs/example/face_a_clean.jpg) 
![image](./imgs/example/face_b_mosaic.jpg) | ![image](./imgs/example/b_dcp.png) | ![image](./imgs/example/face_b_clean.jpg) 
H
hypox64 已提交
24

H
HypoX64 已提交
25
* 风格转换
H
hypox64 已提交
26

H
HypoX64 已提交
27 28 29
原始 | 梵高风格 | 转化为冬天
:-:|:-:|:-:
![image](./imgs/example/SZU.jpg) | ![image](./imgs/example/SZU_vangogh.jpg) | ![image](./imgs/example/SZU_summer2winter.jpg) 
H
hypox64 已提交
30

H
HypoX64 已提交
31
一个有意思的尝试:[香蕉君♂猫](https://www.bilibili.com/video/BV1Q7411W7n6)
H
hypox64 已提交
32 33 34

## 如何运行
可以通过我们预编译好的二进制包或源代码运行.<br>
H
hypox64 已提交
35 36
### 在网页中运行
打开[这个网站](http://118.89.27.46:5000/)上传照片,将获得去除马赛克后的结果,受限与当地法律,目前只支持人脸.<br>
H
hypox64 已提交
37 38 39 40
### 预编译的程序包
对于Windows用户,我们提供了包含GUI界面的免安装软件包.<br>
可以通过下面两种方式进行下载: [[Google Drive]](https://drive.google.com/open?id=1LTERcN33McoiztYEwBxMuRjjgxh4DEPs)  [[百度云,提取码1x0a]](https://pan.baidu.com/s/10rN3U3zd5TmfGpO_PEShqQ) <br>

H
hypox64 已提交
41 42
* [[帮助文档]](./docs/exe_help_CN.md)<br>
* [[视频教程]](https://www.bilibili.com/video/BV1QK4y1a7Av)<br>
H
hypox64 已提交
43 44 45
![image](./imgs/GUI.png)<br>

注意事项:<br>
H
hypox64 已提交
46
  - 程序的运行要求在64位Windows操作系统,我仅在Windows10运行过,其他版本暂未经过测试<br>
H
HypoX64 已提交
47
  - 请根据需求选择合适的预训练模型进行测试,不同的预期训练模型具有不同的效果.[[预训练模型介绍]](./docs/pre-trained_models_introduction_CN.md)<br>
H
hypox64 已提交
48
  - 运行时间取决于电脑性能,对于视频文件,我们建议在GPU上运行.<br>
H
hypox64 已提交
49 50
  - 如果输出的视频无法播放,这边建议您尝试[potplayer](https://daumpotplayer.com/download/).<br>
  - 相比于源码,该版本的更新将会延后.
H
hypox64 已提交
51 52 53

### 通过源代码运行
#### 前提要求
H
hypox64 已提交
54 55
  - Linux, Mac OS, Windows
  - Python 3.6+
H
hypox64 已提交
56
  - [ffmpeg 3.4.6](http://ffmpeg.org/)
H
HypoX64 已提交
57
  - [Pytorch 1.0+](https://pytorch.org/) 
H
hypox64 已提交
58
  - CPU or NVIDIA GPU + CUDA CuDNN<br>
H
hypox64 已提交
59 60
#### Python依赖项
代码依赖于opencv-python以及 torchvision,可有通过pip install 进行安装.
H
hypox64 已提交
61
#### 克隆源代码
H
hypox64 已提交
62 63 64 65
```bash
git clone https://github.com/HypoX64/DeepMosaics
cd DeepMosaics
```
66 67
#### 下载预训练模型
可以通过以下两种方法下载预训练模型,并将他们置于'./pretrained_models'文件夹中.<br>
H
hypox64 已提交
68
[[Google Drive]](https://drive.google.com/open?id=1LTERcN33McoiztYEwBxMuRjjgxh4DEPs)  [[百度云,提取码1x0a]](https://pan.baidu.com/s/10rN3U3zd5TmfGpO_PEShqQ) <br>
H
HypoX64 已提交
69
[[预训练模型介绍]](./docs/pre-trained_models_introduction_CN.md)<br>
H
hypox64 已提交
70 71

#### 简单的例子
H
hypox64 已提交
72
* 为视频或照片添加马赛克,例子中认为脸是需要打码的区域 ,可以通过切换预训练模型切换自动打码区域(输出结果将储存到 './result')<br>
H
hypox64 已提交
73
```bash
H
hypox64 已提交
74
python deepmosaic.py --media_path ./imgs/ruoruo.jpg --model_path ./pretrained_models/mosaic/add_face.pth --gpu_id 0
H
hypox64 已提交
75
```
H
hypox64 已提交
76
* 将视频或照片中的马赛克移除,对于不同的打码物体需要使用对应的预训练模型进行马赛克消除(输出结果将储存到  './result')<br>
H
hypox64 已提交
77
```bash
H
hypox64 已提交
78
python deepmosaic.py --media_path ./result/ruoruo_add.jpg --model_path ./pretrained_models/mosaic/clean_face_HD.pth --gpu_id 0
H
hypox64 已提交
79 80
```
#### 更多的参数
H
HypoX64 已提交
81 82
如果想要测试其他的图片或视频,请参照以下文件输入参数.<br>
[[options_introduction_CN.md]](./docs/options_introduction_CN.md) <br>
H
hypox64 已提交
83

H
hypox64 已提交
84 85 86
## 使用自己的数据训练模型
如果需要使用自己的数据训练模型,请参照 [training_with_your_own_dataset.md](./docs/training_with_your_own_dataset.md)

H
hypox64 已提交
87
## 鸣谢
H
hypox64 已提交
88
代码大量的参考了以下项目:[[pytorch-CycleGAN-and-pix2pix]](https://github.com/junyanz/pytorch-CycleGAN-and-pix2pix) [[Pytorch-UNet]](https://github.com/milesial/Pytorch-UNet) [[pix2pixHD]](https://github.com/NVIDIA/pix2pixHD) [[BiSeNet]](https://github.com/ooooverflow/BiSeNet) [[DFDNet]](https://github.com/csxmli2016/DFDNet) [[GFRNet_pytorch_new]](https://github.com/sonack/GFRNet_pytorch_new).
H
hypox64 已提交
89