Fix compile on raspberry pi #1835

hedaoyuan · 2017-04-20T11:00:39Z

No description provided.

Xreki

有两个关于文档建议：

这个是关于编译的文档，是不是应该放在getstarted/build_and_install目录下
文档的用词是不是需要更书面化一些，然后，所有arm相关的编译文档都可以放在一个文件里面吧

Xreki · 2017-04-24T02:37:38Z

doc/howto/raspberry/build_for_raspberry.md

+
+这里考虑的是交叉编译方式，即在Linux-X86环境下构建raspberry pi下可运行的paddle。
+
+## 下载较差编译环境


typo：较差 -> 交叉

hedaoyuan

getstarted目前定位是新手入门，这个文档放新手入门不是很合适。

所有arm相关的编译文档都可以放在一个文件里面吧

这个是可以的，后续有新的嵌入式相关的文档后，可以新增一个目录，将这个文档一并移过去。

wangkuiyi · 2017-04-24T18:40:24Z

doc/howto/raspberry/build_for_raspberry.md

@@ -0,0 +1,45 @@
+# 如何构建raspberry pi下运行的paddle


raspberry pi => Raspberry Pi

wangkuiyi · 2017-04-24T18:40:32Z

doc/howto/raspberry/build_for_raspberry.md

@@ -0,0 +1,45 @@
+# 如何构建raspberry pi下运行的paddle


paddle => PaddlePaddle

wangkuiyi · 2017-04-24T18:40:43Z

doc/howto/raspberry/build_for_raspberry.md

@@ -0,0 +1,45 @@
+# 如何构建raspberry pi下运行的paddle
+
+这里考虑的是交叉编译方式，即在Linux-X86环境下构建raspberry pi下可运行的paddle。


wangkuiyi · 2017-04-24T18:41:48Z

doc/howto/raspberry/build_for_raspberry.md

+
+
+## 编译第三方库
+Paddle在cmake会在编译paddle的时候自动编译依赖的第三方库，不过openblas和protobuf最好还是在编译paddle之前先编译好，这样可以保证编译paddle的时候更加顺畅。


Paddle在cmake会在编译paddle的时候自动编译依赖的第三方库

==>

cmake会自动下载PaddlePaddle依赖的第三方库。

wangkuiyi · 2017-04-24T18:43:21Z

doc/howto/raspberry/build_for_raspberry.md

+
+
+## 编译第三方库
+Paddle在cmake会在编译paddle的时候自动编译依赖的第三方库，不过openblas和protobuf最好还是在编译paddle之前先编译好，这样可以保证编译paddle的时候更加顺畅。


不过openblas和protobuf最好还是在编译paddle之前先编译好，这样可以保证编译paddle的时候更加顺畅。

为什么最好？和依赖cmake去下载和编译OpenBLAS和protobuf有什么区别？我理解这个工作应该是让在Raspberry
Pi上编译和在其他平台编译的用户体验尽量一致。如果可以依赖cmake去下载所有依赖，貌似更合理？

在交叉编译方式下，直接依赖cmake去下载和编译中间会断掉，不能一次cmake & make成功。比如，编译protobuf时编译出来的protoc是arm版本的，在后续用到protoc的地方编译过程就崩溃了，需要用一个x86版本的protoc去替换掉，然后再继续make。
如果，直接在Pi编译，应该是直接cmake & make就可以了，不过编译耗时会比较长。

wangkuiyi · 2017-04-24T18:43:40Z

doc/howto/raspberry/build_for_raspberry.md

+## 编译第三方库
+Paddle在cmake会在编译paddle的时候自动编译依赖的第三方库，不过openblas和protobuf最好还是在编译paddle之前先编译好，这样可以保证编译paddle的时候更加顺畅。
+
+### 编译openblas


openblas => OpenBLAS

wangkuiyi · 2017-04-24T18:44:00Z

paddle/api/CMakeLists.txt

@@ -26,7 +26,7 @@ FILE(GLOB PY_PADDLE_PYTHON_FILES ${PROJ_ROOT}/paddle/py_paddle/*.py)
 SET_SOURCE_FILES_PROPERTIES(Paddle.i PROPERTIES CPLUSPLUS ON)

 SET(CMAKE_SWIG_OUTDIR ${CMAKE_CURRENT_BINARY_DIR})
-SET(CMAKE_CXX_FLAGS "-std=c++11 -fPIC -Wall")
+SET(CMAKE_CXX_FLAGS "${CMAKE_CXX_FLAGS} -std=c++11 -fPIC -Wall")


wangkuiyi · 2017-04-24T18:45:03Z

赞这个文档和code两全的PR！有一些建议都是针对文档写作的。

Xreki · 2017-04-28T03:11:53Z

刚刚按照文档走了一下流程，在编译OpenBLAS和protobuf时出现了两个错误。
OpenBLAS： make TARGET=ARMV7 HOSTCC=gcc CC=arm-linux-gnueabihf-gcc NOFORTRAN=1 USE_THREAD=0
git clone下来应该是develop上的最新提交，应该是最新的提交引入了些bug。错误如下：

arm-linux-gnueabihf-gcc -O2 -DMAX_STACK_ALLOC=2048 -Wall -DF_INTERFACE_GFORT -fPIC -DNO_LAPACK -DNO_LAPACKE -DNO_WARMUP -DMAX_CPU_NUMBER=12 -marm -mfpu=vfpv3  -mfloat-abi=hard -march=armv7-a -DASMNAME= -DASMFNAME=_ -DNAME=_ -DCNAME= -DCHAR_NAME=\"_\" -DCHAR_CNAME=\"\" -DNO_AFFINITY -I..  -w -o linktest linktest.c ../libopenblas_armv7-r0.2.20.dev.so -L/home/liuyiqun01/.jumbo/lib -L/home/liuyiqun01/.jumbo/lib -L -Wl,-rpath,/home/liuyiqun01/.jumbo/opt/gcc48/lib64 -L/home/liuyiqun01/.jumbo/opt/gcc48/lib/gcc/x86_64-unknown-linux-gnu/4.8.3 -L/home/liuyiqun01/.jumbo/opt/gcc48/lib/gcc/x86_64-unknown-linux-gnu/4.8.3/../../../../lib64 -L/lib/../lib64 -L/usr/lib/../lib64 -L/home/liuyiqun01/.jumbo/opt/gcc48/lib/gcc/x86_64-unknown-linux-gnu/4.8.3/../../..  -lgfortran -lm -lquadmath -lm -lc   && echo OK.
/home/liuyiqun01/.jumbo/opt/gcc48/lib/gcc/x86_64-unknown-linux-gnu/4.8.3/../../../../lib64/libgfortran.so: file not recognized: File format not recognized
collect2: error: ld returned 1 exit status
make[1]: *** [../libopenblas_armv7-r0.2.20.dev.so] Error 1
make[1]: Leaving directory `/home/liuyiqun01/github/raspberrypi/OpenBLAS/exports'
make: *** [shared] Error 2

不过到这个时候，libopenblas_armv7-r0.2.20.dev.a已经生成了。

protobuf：cmake ../protobuf/cmake -Dprotobuf_BUILD_TESTS=OFF -DCMAKE_CXX_COMPILER=arm-linux-gnueabihf-g++ -DCMAKE_C_COMPILER=arm-linux-gnueabihf-gcc -DCMAKE_POSITION_INDEPENDENT_CODE=ON -DCMAKE_BUILD_TYPE=Release -DCMAKE_INSTALL_LIBDIR=lib; make
出现如下错误：

[ 19%] Building CXX object CMakeFiles/libprotobuf.dir/src/google/protobuf/io/gzip_stream.cc.o
In file included from /home/liuyiqun01/github/raspberrypi/protobuf/src/google/protobuf/io/gzip_stream.cc:38:0:
/home/liuyiqun01/github/raspberrypi/protobuf/src/google/protobuf/io/gzip_stream.h:48:18: fatal error: zlib.h: No such file or directory
 #include <zlib.h>
                  ^
compilation terminated.
make[2]: *** [CMakeFiles/libprotobuf.dir/src/google/protobuf/io/gzip_stream.cc.o] Error 1
make[1]: *** [CMakeFiles/libprotobuf.dir/all] Error 2
make: *** [all] Error 2

protobuf的编译依赖zlib。
我正在写自动编译protobuf和OpenBLAS的cmake，看这里是否需要先修订一下吧。

wangkuiyi

按照大家的约定，响应了reviwers的comemnts之后，应该至少写一个“Done”。这是对reviwers工作的尊重。

对 #1835 (review) 这批comments的响应都没有回复。

wangkuiyi · 2017-05-01T02:37:32Z

doc/howto/raspberry/build_for_raspberry.md

+注意：这样编译出来的`libprotobuf.a`和`protoc`都是ARM版本的，而我们需要的是一个x86-64版本的`protoc`，所以需要用host gcc再编译一遍protobuf然后使用其中的`protoc`。
+
+
+## 编译Paddle


Paddle ==> PaddlePaddle

…rrypi

hedaoyuan

抱歉，之前没有对comemnts回复，下次一定注意。

hedaoyuan · 2017-05-03T13:30:52Z

doc/howto/raspberry/build_for_raspberry.md

+注意：这样编译出来的`libprotobuf.a`和`protoc`都是ARM版本的，而我们需要的是一个x86-64版本的`protoc`，所以需要用host gcc再编译一遍protobuf然后使用其中的`protoc`。
+
+
+## 编译Paddle


hedaoyuan · 2017-05-03T13:31:46Z

doc/howto/raspberry/build_for_raspberry.md

@@ -0,0 +1,45 @@
+# 如何构建raspberry pi下运行的paddle


hedaoyuan · 2017-05-03T13:31:49Z

doc/howto/raspberry/build_for_raspberry.md

@@ -0,0 +1,45 @@
+# 如何构建raspberry pi下运行的paddle


hedaoyuan · 2017-05-03T13:31:53Z

doc/howto/raspberry/build_for_raspberry.md

@@ -0,0 +1,45 @@
+# 如何构建raspberry pi下运行的paddle
+
+这里考虑的是交叉编译方式，即在Linux-X86环境下构建raspberry pi下可运行的paddle。


hedaoyuan · 2017-05-03T13:31:57Z

doc/howto/raspberry/build_for_raspberry.md

+
+这里考虑的是交叉编译方式，即在Linux-X86环境下构建raspberry pi下可运行的paddle。
+
+## 下载较差编译环境


hedaoyuan · 2017-05-03T13:31:59Z

doc/howto/raspberry/build_for_raspberry.md

+
+
+## 编译第三方库
+Paddle在cmake会在编译paddle的时候自动编译依赖的第三方库，不过openblas和protobuf最好还是在编译paddle之前先编译好，这样可以保证编译paddle的时候更加顺畅。


hedaoyuan · 2017-05-03T13:32:03Z

doc/howto/raspberry/build_for_raspberry.md

+## 编译第三方库
+Paddle在cmake会在编译paddle的时候自动编译依赖的第三方库，不过openblas和protobuf最好还是在编译paddle之前先编译好，这样可以保证编译paddle的时候更加顺畅。
+
+### 编译openblas


hedaoyuan

@Xreki #1835 (comment)
这两个问题，是否在 #1973 里面已经解决了？另外，应该基于 #1973 从新写一下这个文档是吗？

Xreki · 2017-05-04T02:18:04Z

@hedaoyuan

这两个问题，是否在 #1973 里面已经解决了？

#1973 可以可以自动编译第三方库了（host、target的protobuf，opneblas），但是需要一些cmake配置告诉cmake正在交叉编译。cmake默认是配置了CMAKE_SYSTEM_NAME这个变量，就认为是在交叉编译。Android配置CMAKE_SYSTEM_NAME=Android，Raspberry Pi配置CMAKE_SYSTEM_NAME=RPi

另外，应该基于 #1973 从新写一下这个文档是吗？

在这个PR里改是不是不太合适？

hedaoyuan

好的，那这个PR就先这样，后续Build相关工作可以继续优化。
@wangkuiyi comemnts已经都回复了，请review一下。

Fix compile on raspberry pi

e128861

hedaoyuan requested a review from Xreki April 20, 2017 11:00

Xreki reviewed Apr 24, 2017

View reviewed changes

follow comment

5ba7f61

hedaoyuan commented Apr 24, 2017

View reviewed changes

wangkuiyi requested changes Apr 24, 2017

View reviewed changes

follow comments

fe7825b

Xreki added this to In Progress in Embedded and Mobile Deployment Apr 28, 2017

wangkuiyi reviewed May 1, 2017

View reviewed changes

Xreki mentioned this pull request May 3, 2017

Add cross-compiling toolchain files for Android and Raspberry Pi. #1973

Merged

hedaoyuan added 2 commits May 3, 2017 21:03

Merge branch 'develop' of https://github.com/baidu/Paddle into raspbe…

98e1033

…rrypi

Fix some bug

5cdc495

hedaoyuan commented May 3, 2017

View reviewed changes

hedaoyuan commented May 4, 2017

View reviewed changes

wangkuiyi approved these changes May 17, 2017

View reviewed changes

wangkuiyi merged commit 0fdbd40 into PaddlePaddle:develop May 17, 2017

Xreki moved this from In Progress to Done in Embedded and Mobile Deployment May 18, 2017

lizexu123 added a commit to lizexu123/Paddle that referenced this pull request Feb 23, 2024

[fix]修复自然语言处理模型自动压缩示例 (PaddlePaddle#1835)

9fe0e73

Provide feedback

Saved searches

Use saved searches to filter your results more quickly

Fix compile on raspberry pi #1835

Fix compile on raspberry pi #1835

hedaoyuan commented Apr 20, 2017

Xreki left a comment

Xreki Apr 24, 2017

hedaoyuan May 3, 2017

hedaoyuan left a comment •

edited

Loading

wangkuiyi Apr 24, 2017

hedaoyuan May 3, 2017

wangkuiyi Apr 24, 2017

hedaoyuan May 3, 2017

wangkuiyi Apr 24, 2017

hedaoyuan May 3, 2017

wangkuiyi Apr 24, 2017

hedaoyuan May 3, 2017

wangkuiyi Apr 24, 2017

hedaoyuan Apr 25, 2017

wangkuiyi Apr 24, 2017

hedaoyuan May 3, 2017

wangkuiyi Apr 24, 2017

wangkuiyi commented Apr 24, 2017

Xreki commented Apr 28, 2017

wangkuiyi left a comment •

edited

Loading

wangkuiyi May 1, 2017

hedaoyuan May 3, 2017

hedaoyuan left a comment

hedaoyuan May 3, 2017

hedaoyuan May 3, 2017

hedaoyuan May 3, 2017

hedaoyuan May 3, 2017

hedaoyuan May 3, 2017

hedaoyuan May 3, 2017

hedaoyuan May 3, 2017

hedaoyuan left a comment

Xreki commented May 4, 2017

hedaoyuan left a comment •

edited

Loading


		这里考虑的是交叉编译方式，即在Linux-X86环境下构建raspberry pi下可运行的paddle。

		## 下载较差编译环境

		@@ -0,0 +1,45 @@
		# 如何构建raspberry pi下运行的paddle



		## 编译第三方库
		Paddle在cmake会在编译paddle的时候自动编译依赖的第三方库，不过openblas和protobuf最好还是在编译paddle之前先编译好，这样可以保证编译paddle的时候更加顺畅。

		注意：这样编译出来的`libprotobuf.a`和`protoc`都是ARM版本的，而我们需要的是一个x86-64版本的`protoc`，所以需要用host gcc再编译一遍protobuf然后使用其中的`protoc`。


		## 编译Paddle

Fix compile on raspberry pi #1835

Fix compile on raspberry pi #1835

Conversation

hedaoyuan commented Apr 20, 2017

Xreki left a comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

hedaoyuan left a comment • edited Loading

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

wangkuiyi commented Apr 24, 2017

Xreki commented Apr 28, 2017

wangkuiyi left a comment • edited Loading

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

hedaoyuan left a comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

hedaoyuan left a comment

Choose a reason for hiding this comment

Xreki commented May 4, 2017

hedaoyuan left a comment • edited Loading

Choose a reason for hiding this comment

hedaoyuan left a comment •

edited

Loading

wangkuiyi left a comment •

edited

Loading

hedaoyuan left a comment •

edited

Loading