ubuntu下编译caffe

Ubuntu下编译caffe

纯粹是我的编译的记录。不用CUDA（笔记本是amd卡，万恶的nvidia）；不手动编译依赖包（apt-get是用来干啥的？用来直接装二进制包，以及自动解决依赖项的）
caffe官方给出的ubuntu下的教程在http://caffe.berkeleyvision.org/install_apt.html

make: protoc: 命令未找到

解决办法：

sudo apt-get install protobuf-c-compiler protobuf-compiler

fatal error: gflags/gflags.h:没有那个文件或目录

解决办法：

sudo apt-get install libgflags-dev

顺便吐槽一下ubuntu的apt-get命令的补全，它是残破的。我想下载gflags，因而输入：

sudo apt-get install gflags #此处直接按tab，但愿它补全，tab一次不出来就再按一次

结果呢，只显示了一个结果：

sudo apt-get install libgflags2v5

问题是，实际上有3个结果：libflags2v5,libgflags-dev,libgflags-doc

ubuntu的命令行，另外一个残破的地方在于，各类包老是喜欢私自添加lib前缀，好比，好好的opencv，非得要libopencv才行（全名并非libopencv和oepncv，一般都是用-dev或-devel各类的包）

fatal error: glog/logging.h: 没有那个文件或目录

尝试apt-get install glog，妈蛋，没有。要这样：

sudo apt-get install libgoogle-glog-dev

fatal error: hdf5.h: 没有那个文件或目录

妈蛋！老子执行过apt-get install hdf5-tools了，怎么还说没有hdf5？并且我当时tab了好几下，只有两个结果，另外一个是hdf5-helpers不装也罢。
其实，这又是ubuntu的命令行比较残破的缘由。为何不能完整点搜索？

固然此次，须要的不只仅是一个-dev包，由于试了后仍是报一样错误，那就尝试：

sudo apt-get install libhdf5-\*  #我用的shell是zsh，若是你没有用zsh，那就是默认的bash，那就把“\”去掉。这，是zsh比较残破的地方

而后再make all，仍是报一样错误。怒了，此次是caffe自身的问题。要在Makefile.config中把hdf5的一个目录添加进来：

# 找到这行：
INCLUDE_DIRS := $(PYTHON_INCLUDE) /usr/local/include

# 替换为：
INCLUDE_DIRS := $(PYTHON_INCLUDE) /usr/local/include /usr/include/hdf5/serial/

fatal error: lmdb.h: 没有那个文件或目录

擦，刚刚明明apt-get安装了lmdb-utils，怎么又来？并且，安装lmdb时tab了好几回只有这么一个有用的结果。
此次，又是ubuntu命令的残破引起的。

解决办法：

sudo apt-get install liblmdb-dev

make: *** [.build_release/lib/libcaffe.so.1.0.0-rc3] Error 1

此次的问题有点大了。问题完整描述：

AR -o .build_release/lib/libcaffe.a
LD -o .build_release/lib/libcaffe.so.1.0.0-rc3
/usr/bin/ld: cannot find -lboost_python3
collect2: error: ld returned 1 exit status
Makefile:563: recipe for target '.build_release/lib/libcaffe.so.1.0.0-rc3' failed
make: *** [.build_release/lib/libcaffe.so.1.0.0-rc3] Error 1

我也想不出办法，因而google之。发现caffe在github的repo上有人提出一样的问题：https://github.com/BVLC/caffe/issues/4045
而后，真是不友好或没有用的回答，维护caffe的都是什么鬼？！说什么，别在issue里提“使用，安装，编译出错”的问题，请使用caffe-users list。我就草，issue不是用来解决问题的么？user list是google group谷歌用户组，一个更很差用的东西，连markdown都没有，太落后了。anyway，这些都无论用。

管用的方法：再次修改Makefile.config（艹，caffe官方的Makefile.config你敢再残破一点么？市面上一共就3种最经常使用的跑caffe的平台，第一个就是ubuntu还搞这么用户不友好，第二个是fedora只能说还凑合由于fedora自身命令比ubuntu完善，第三个mac用户暂时不考虑，真正跑caffe的都是烧GPU的，mac用户管他干啥）

anyway，要这样改:

# 原来
INCLUDE_DIRS := $(PYTHON_INCLUDE) /usr/local/include /usr/include/hdf5/serial

LIBRARY_DIRS := $(PYTHON_LIB) /usr/local/lib /usr/lib

# 如今改为（64位系统）：
INCLUDE_DIRS := $(PYTHON_INCLUDE) /usr/local/include /usr/include/hdf5/serial

LIBRARY_DIRS := $(PYTHON_LIB) /usr/local/lib /usr/lib /usr/lib/x86_64-linux-gnu /usr/lib/x86_64-linux-gnu/hdf5/serial

# 或者，你是32位系统：
INCLUDE_DIRS := $(PYTHON_INCLUDE) /usr/local/include /usr/include/hdf5/serial

LIBRARY_DIRS := $(PYTHON_LIB) /usr/local/lib /usr/lib /usr/lib/i386-linux-gnu /usr/lib/i386-linux-gnu/hdf5/serial

这样就行了么？天真。还得执行很是肮脏的sed脚本！

find . -type f -exec sed -i -e 's^"hdf5.h"^"hdf5/serial/hdf5.h"^g' -e 's^"hdf5_hl.h"^"hdf5/serial/hdf5_hl.h"^g' '{}' \;

这个多是ubuntu自身的问题，也多是caffe的问题。

blas的问题

做为小白用户，方便起见，用不着去搞MKL，一则申请麻烦，二则太大。同时也要尽可能避免手动编译。手动编译源码可能带来更多的依赖项问题。因此尽量全都用apt-get安装。

sudo apt-get install libopenblas-dev

reference

https://github.com/BVLC/caffe/wiki/Ubuntu-16.04-or-15.10-Installation-Guide
https://github.com/SHUCV/caffe_demo/wiki/install-caffe-on-ubuntu14.04

==== update 2016年11月5日 17:39:33 ====
换ubuntu16.04了，编译caffe时会提示：memcpy未定义
解决方法：Makefile中，找到：

NVCCFLAGS += -ccbin=$(CXX) -Xcompiler -fPIC $(COMMON_FLAGS)

换成

NVCCFLAGS += -D_FORCE_INLINES -ccbin=$(CXX) -Xcompiler -fPIC $(COMMON_FLAGS)