compile_MacOS.md 10.2 KB
Newer Older
1 2 3 4 5
***
# **MacOS下从源码编译**

本说明将介绍如何在*64位台式机或笔记本电脑*以及MacOS系统下编译PaddlePaddle,我们支持的MacOS系统需满足#以下要求:

J
JiabinYang 已提交
6
* MacOS 10.12/10.13/10.14(这涉及到相关工具是否能被正常安装)
7 8 9 10 11 12 13 14 15 16

## 确定要编译的版本
* **仅支持CPU的PaddlePaddle**

<!--* 支持GPU的PaddlePaddle,为了使得PaddlePaddle程序运行的更加迅速,我们通常使用GPU对PaddlePaddle程序进行加速,但安装GPU版本的PaddlePaddle需要先拥有满足以下条件的NVIDIA® GPU(具体安装流程和配置请务必参见NVIDIA官方文档:[For CUDA](https://docs.nvidia.com/cuda/cuda-installation-guide-linux/)[For cuDNN](https://docs.nvidia.com/deeplearning/sdk/cudnn-install/)
	* *Cuda 工具包9.0配合cuDNN v7*
	* *Cuda 工具包8.0配合cuDNN v7*
	* *GPU运算能力超过1.0的硬件设备*-->

## 选择如何编译
J
JiabinYang 已提交
17
在MacOS 10.12/10.13/10.14 的系统下我们提供2种编译方式:
18 19


C
Cheerego 已提交
20
* Docker源码编译 (该镜像已经包含python2.7、python3.6、python3.7环境)
J
JiabinYang 已提交
21
* 直接本机源码编译
22 23 24 25




S
shanyi15 已提交
26 27 28
我们更加推荐**使用Docker进行编译**,因为我们在把工具和配置都安装在一个 Docker image 里。这样如果遇到问题,其他人可以复现问题以便帮助。另外,对于习惯使用Windows和MacOS的开发者来说,使用Docker就不用配置交叉编译环境了。需要强调的是:Docker 不会虚拟任何硬件,Docker container 里运行的编译工具实际上都是在本机的 CPU 和操作系统上直接运行的,性能和把编译工具安装在本机运行一样。

同样对于那些出于各种原因不能够安装Docker的用户我们也提供了可以从**本机直接源码编译**的方法,但是由于在本机上的情况更加复杂,因此我们只支持特定的系统。
29 30 31 32 33 34 35 36 37 38 39 40 41




<a name="mac_docker"></a>



<br/><br/>
### ***使用Docker编译***

为了更好的使用Docker并避免发生问题,我们推荐使用**最高版本的Docker**,关于**安装和使用Docker**的细节请参阅Docker[官方文档](https://docs.docker.com/install/)

S
shanyi15 已提交
42
> 请注意,在MacOS系统下登陆docker需要使用您的dockerID进行登录,否则将出现`Authenticate Failed`错误。
43 44 45 46 47 48 49 50 51 52 53 54 55 56 57


当您已经**正确安装Docker**后你就可以开始**使用Docker编译PaddlePaddle**啦:

1. 进入Mac的终端

2. 请选择您希望储存PaddlePaddle的路径,然后在该路径下使用以下命令将PaddlePaddle的源码从github克隆到本地当前目录下名为Paddle的文件夹中:

	`git clone https://github.com/PaddlePaddle/Paddle.git`

3. 进入Paddle目录下: `cd Paddle`

4. 利用我们提供的镜像(使用该命令您可以不必提前下载镜像):

	`docker run --name paddle-test -v $PWD:/paddle --network=host -it hub.baidubce.com/paddlepaddle/paddle:latest-dev /bin/bash`
S
shanyi15 已提交
58

59 60 61 62
	> --name paddle-test为您创建的Docker容器命名为paddle-test,-v $PWD:/paddle 将当前目录挂载到Docker容器中的/paddle目录下(Linux中PWD变量会展开为当前路径的[绝对路径](https://baike.baidu.com/item/绝对路径/481185)),-it 与宿主机保持交互状态,`hub.baidubce.com/paddlepaddle/paddle:latest-dev` 使用名为`hub.baidubce.com/paddlepaddle/paddle:latest-dev`的镜像创建Docker容器,/bin/bash 进入容器后启动/bin/bash命令。

5. 进入Docker后进入paddle目录下:`cd paddle`

T
tink2123 已提交
63
6. 切换到较稳定版本下进行编译:
64

S
Shan Yi 已提交
65
	`git checkout v1.1`
66 67 68 69 70

7. 创建并进入/paddle/build路径下:

	`mkdir -p /paddle/build && cd /paddle/build`

C
Cheerego 已提交
71
8. 使用以下命令安装相关依赖:(For Python3:请选择您希望用的python版本对应的pip,如pip3.5、pip3.6)
72 73

		For Python2: pip install protobuf==3.1.0
C
Cheerego 已提交
74
		For Python3: pip3.5 install protobuf==3.1.0
S
shanyi15 已提交
75 76


77 78 79
	> 安装protobuf 3.1.0。

	`apt install patchelf`
S
shanyi15 已提交
80

81 82
	> 安装patchelf,PatchELF 是一个小而实用的程序,用于修改ELF可执行文件的动态链接器和RPATH。

S
shanyi15 已提交
83 84
9. 执行cmake:

85 86 87 88 89
	>具体编译选项含义请参见[编译选项表](../Tables.html/#Compile)<!--TODO: Link 编译选项表到这里-->


	*  对于需要编译**CPU版本PaddlePaddle**的用户:

S
shanyi15 已提交
90 91 92
		`cmake .. -DWITH_FLUID_ONLY=ON -DWITH_GPU=OFF -DWITH_TESTING=OFF  -DCMAKE_BUILD_TYPE=Release`

		> 我们目前不支持CentOS下GPU版本PaddlePaddle的编译
93 94 95 96 97 98 99




10. 执行编译:

	`make -j$(nproc)`
S
shanyi15 已提交
100

101 102 103 104
	> 使用多核编译

11. 编译成功后进入`/paddle/build/python/dist`目录下找到生成的`.whl`包: `cd /paddle/build/python/dist`

C
Cheerego 已提交
105
12. 在当前机器或目标机器安装编译好的`.whl`包:(For Python3:请选择您希望用的python版本对应的pip,如pip3.5、pip3.6)
106 107

		For Python2: pip install (whl包的名字)
C
Cheerego 已提交
108
		For Python3: pip3.5 install (whl包的名字)
S
shanyi15 已提交
109

110 111 112 113 114 115 116 117 118

至此您已经成功使用Docker安装PaddlePaddle,您只需要进入Docker容器后运行PaddlePaddle即可,更多Docker使用请参见[Docker官方文档](https://docs.docker.com)

> 注:PaddlePaddle Docker镜像为了减小体积,默认没有安装`vim`,您可以在容器中执行 `apt-get install -y vim` 安装后,在容器中编辑代码。

恭喜您,现在您已经完成使用Docker编译PaddlePaddle的过程。


<br/><br/>
S
shanyi15 已提交
119
### ***本机编译***
120 121 122 123

**请严格按照以下指令顺序执行**


C
Cheerego 已提交
124
1. 检查您的计算机和操作系统是否符合我们支持的编译标准: `uname -m` 并且在`关于本机`中查看系统版本。并提前安装openCV。
125

S
shanyi15 已提交
126
2. 安装python以及pip:
127

C
Cheerego 已提交
128
	> **请不要使用MacOS中自带python**,我们强烈建议您使用[Homebrew](https://brew.sh)安装python(对于**Python3**请使用python[官方下载](https://www.python.org/downloads/mac-osx/)python3.5.x、python3.6.x、python3.7.x), pip以及其他的依赖,这会大大降低您安装编译的难度。
S
shanyi15 已提交
129

130
		For python2: brew install python@2
J
JiabinYang 已提交
131
		For python3: 使用Python官网安装
S
shanyi15 已提交
132 133 134

	> 请注意,当您的mac上安装有多个python时请保证您正在使用的python是您希望使用的python。

135
3. (Only For Python2)设置Python相关的环境变量:
S
shanyi15 已提交
136

137
	- 请使用`find / -name libpython2.7.dylib`找到您当前使用python的`libpython2.7.dylib`路径,并使用`export LD_LIBRARY_PATH=[libpython2.7.dylib的路径] && export DYLD_LIBRARY_PATH=[libpython2.7.dylib所在的目录的上两级目录]`
138

S
shanyi15 已提交
139 140 141 142 143 144 145
4. (Only For Python3)设置Python相关的环境变量:

	- a. 首先使用
			```find `dirname $(dirname
			  $(which python3))` -name "libpython3.*.dylib"```
			找到Pythonlib的路径(弹出的第一个对应您需要使用的python的dylib路径),然后(下面[python-lib-path]替换为找到文件路径)

146
	- b. 设置PYTHON_LIBRARIES:`export PYTHON_LIBRARY=[python-lib-path]`
S
shanyi15 已提交
147 148

	- c. 其次使用找到PythonInclude的路径(通常是找到[python-lib-path]的上一级目录为同级目录的include,然后找到该目录下python3.x或者python2.x的路径),然后(下面[python-include-path]替换为找到路径)
149 150
	- d. 设置PYTHON_INCLUDE_DIR: `export PYTHON_INCLUDE_DIRS=[python-include-path]`

S
shanyi15 已提交
151 152 153 154 155 156 157
	- e. 设置系统环境变量路径:`export PATH=[python-bin-path]:$PATH` (这里[python-bin-path]为将[python-lib-path]的最后两级目录替换为/bin/后的目录)

	- f. 设置动态库链接: `export LD_LIBRARY_PATH=[python-ld-path]` 以及 `export DYLD_LIBRARY_PATH=[python-ld-path]` (这里[python-ld-path]为[python-bin-path]的上一级目录)

	- g. (可选)如果您是在MacOS 10.14上编译PaddlePaddle,请保证您已经安装了[对应版本](http://developer.apple.com/download)的Xcode。


158 159 160


5. **执行编译前**请您确认您的环境中安装有[编译依赖表](../Tables.html/#third_party)中提到的相关依赖,否则我们强烈推荐使用`Homebrew`安装相关依赖。
S
shanyi15 已提交
161

162
	> MacOS下如果您未自行修改或安装过“编译依赖表”中提到的依赖,则仅需要使用`pip`安装`numpy,protobuf,wheel`,使用`homebrew`安装`wget,swig`,另外安装`cmake`即可
S
shanyi15 已提交
163

164
	- a. 这里特别说明一下**CMake**的安装:
S
shanyi15 已提交
165

166
		由于我们使用的是CMake3.4请根据以下步骤:
S
shanyi15 已提交
167

168 169
		1. 从CMake[官方网站](https://cmake.org/files/v3.4/cmake-3.4.3-Darwin-x86_64.dmg)下载CMake镜像并安装
		2. 在控制台输入`sudo "/Applications/CMake.app/Contents/bin/cmake-gui" –install`
S
shanyi15 已提交
170

J
JiabinYang 已提交
171
	- b. 如果您不想使用系统默认的blas而希望使用自己安装的OPENBLAS请参见[FAQ](../FAQ.html/#OPENBLAS)
172 173 174 175 176 177 178 179


6. 将PaddlePaddle的源码clone在当下目录下的Paddle的文件夹中,并进入Padde目录下:

	- `git clone https://github.com/PaddlePaddle/Paddle.git`

	- `cd Paddle`

C
Cheerego 已提交
180
7. 切换到较稳定release分支下进行编译:(注意,python3.6、python3.7版本是从1.2.0分支开始支持)
181 182 183 184 185 186 187 188

	`git checkout release/1.0.0`

8. 并且请创建并进入一个叫build的目录下:

	`mkdir build && cd build`

9. 执行cmake:
S
shanyi15 已提交
189

190 191 192 193
	>具体编译选项含义请参见[编译选项表](../Tables.html/#Compile)<!--TODO:Link 安装选项表到这里-->

	*  对于需要编译**CPU版本PaddlePaddle**的用户:

S
shanyi15 已提交
194 195 196
			For Python2: cmake .. -DWITH_FLUID_ONLY=ON -DWITH_GPU=OFF -DWITH_TESTING=OFF  -DCMAKE_BUILD_TYPE=Release
			For Python3: cmake .. -DPY_VERSION=3.5 -DPYTHON_INCLUDE_DIR=${PYTHON_INCLUDE_DIRS} \
			 -DPYTHON_LIBRARY=${PYTHON_LIBRARY} -DWITH_FLUID_ONLY=ON -DWITH_GPU=OFF -DWITH_TESTING=OFF  -DCMAKE_BUILD_TYPE=Release
C
Cheerego 已提交
197
	>`-DPY_VERSION=3.5`请修改为安装环境的Python版本
S
shanyi15 已提交
198

199 200 201 202 203 204 205 206 207

10. 使用以下命令来编译:

	`make -j4`

11. 编译成功后进入`/paddle/build/python/dist`目录下找到生成的`.whl`包: `cd /paddle/build/python/dist`

12. 在当前机器或目标机器安装编译好的`.whl`包:

S
shanyi15 已提交
208 209
	`pip install (whl包的名字)`或`pip3 install (whl包的名字)`

210 211
	> 如果您的电脑上安装有多个python环境以及pip请参见[FAQ](../Tables.html/#MACPRO)

J
JiabinYang 已提交
212
恭喜您,现在您已经完成使用本机编译PaddlePaddle的过程了。
213 214 215 216 217 218 219 220 221 222




<br/><br/>
## ***验证安装***
安装完成后您可以使用:`python` 进入Python解释器,然后使用`import paddle.fluid` 验证是否安装成功。

<br/><br/>
## ***如何卸载***
C
Cheerego 已提交
223
请使用以下命令卸载PaddlePaddle(使用docker安装PaddlePaddle的用户请进入包含PaddlePaddle的容器中使用以下命令,请使用相应版本的pip):
224

S
shanyi15 已提交
225
* ***CPU版本的PaddlePaddle***: `pip uninstall paddlepaddle``pip3 uninstall paddlepaddle`