ubuntu14.04 安装 tensorflow

若是内容侵权的话，联系我，我会立马删了的～由于参考的太多了，若是一一联系再等回复，战线太长了～～蟹蟹给我贡献技术源泉的做者们～

 

最近准备从理论和实验两个方面学习深度学习，因此，前面装好了Theano环境，后来知乎上看到这个回答，就调研了一下各个深度学习框架，我没有看源码，调研也不是很深刻，仅仅是为了选择深度学习框架作的一个大概了解～

1. 如何选择深度学习框架？

参考资料以下：

 1. https://github.com/zer0n/deepframeworks/blob/master/README.md

 2. http://blog.csdn.net/qiexingqieying/article/details/51734347

 3. https://www.zhihu.com/question/41907061

 4. http://www.open-open.com/news/view/1069a70

 5. http://www.kuqin.com/shuoit/20151124/349098.html

博客2总结以下：

库名称	开发语言	速度	灵活性	文档	适合模型	平台	上手
Caffe	c++/cuda	快	通常	全面	CNN	全部系统	中等
TensorFlow	c++/cuda/python	中等	好	中等	CNN/RNN	Linux\OSX	难
MXNet	c++/cuda	快	好	全面	CNN	全部系统	中等
Torch	c/lua/cuda	快	好	全面	CNN/RNN	Linux\OSX	中等
Theano	python/c++/cuda	中等	好	中等	CNN/RNN	Linux\OSX	易

（1）Caffe

第一个主流的工业级深度学习工具。它开始于2013年末,由UC Berkely的 Yangqing Jia老师编写和维护的具备出色的卷积神经网络实现。在计算机视觉领域Caffe依然是最流行的工具包。它有不少扩展，可是因为一些遗留的架构问题，不够灵活且对递归网络和语言建模的支持不好。

（2）TensorFlow

Google开源的其第二代深度学习技术——被使用在Google搜索、图像识别以及邮箱的深度学习框架。是一个理想的RNN（递归神经网络）API和实现，TensorFlow使用了向量运算的符号图方法，使得新网络的指定变得至关容易，支持快速开发。缺点是速度慢，内存占用较大。（好比相对于Torch）

（3）MXNet

是李沐和陈天奇等各路英雄豪杰打造的开源深度学习框架，是分布式机器学习通用工具包 DMLC 的重要组成部分。它注重灵活性和效率，文档也很是的详细，同时强调提升内存使用的效率，甚至能在智能手机上运行诸如图像识别等任务。

（4）Torch

Facebook力推的深度学习框架，主要开发语言是C和Lua。有较好的灵活性和速度。它实现而且优化了基本的计算单元，使用者能够很简单地在此基础上实现本身的算法，不用浪费精力在计算优化上面。核心的计算单元使用C或者cuda作了很好的优化。在此基础之上，使用lua构建了常见的模型。缺点是接口为lua语言，须要一点时间来学习。

（5）Theano

2008年诞生于蒙特利尔理工学院，主要开发语言是Python。Theano派生出了大量深度学习Python软件包，最著名的包括 Blocks和 Keras。Theano的最大特色是很是的灵活，适合作学术研究的实验，且对递归网络和语言建模有较好的支持，缺点是速度较慢。

 

知乎用户 杜客回答以下：

       斯坦福的CS231n - Convolutional Neural Networks for Visual Recognition(Winter 2016)中的Lecture 12中，由课程讲师@ Justin Johnson详细介绍了他我的对于主流第三方库的实践经历和见解，时间新，干货多:

而后他强调了几个 用例问题：
1.Extract AlexNet or VGG features? Use Caffe
2.Fine tune AlexNet for new classes? Use Caffe
3.Image caption with finetuning?

-> Need pretrained models (Caffe, Torch, Lasagne)

-> Need RNNs (Torch or Lasagne)
-> Use Torch or Lasagna

4.Segmentation？(Classify every pixel)

-> Need pretrained model (Caffe, Torch, Lasagna) -> Need funny loss function
-> If loss function exists in Caffe: Use Caffe
-> If you want to write your own loss: Use Torch

5.Object Detection?

-> Need pretrained model (Torch, Caffe, Lasagne)
-> Need lots of custom imperative code (NOT Lasagne) -> Use Caffe + Python or Torch

6.Language modeling with new RNN structure?

-> Need easy recurrent nets (NOT Caffe, Torch)

-> No need for pretrained models
-> Use Theano or TensorFlow

7.Implemente BatchNorm?

-> Don’t want to derive gradient? Theano or TensorFlow

-> Implement efficient backward pass? Use Torch

最后，JJ比较我的化地给出了本身的偏好：

 

第一部分对于这5个框架的介绍讲述了一些概念以及基本优缺点，首先个人使用状况就是文本训练学习，可能须要用到RNN模型，并且我比较熟悉python一些，C++以及lua都不太会，因此基本肯定要了解Theano 和 Tensorflow这两个框架，杜客在知乎回答的内容中，选择tensorflow仍是Theano，能够看出大牛介绍的主要仍是图像领域的一些应用，而后第6点，Language modeling with new RNN structure也能够基本肯定咱们须要这两个框架。

而后选择谁？虽然Caffe的做者贾扬清老师说“都是基于Python的符号运算库，TensorFlow显然支持更好，Google也比高校有更多的人力投入。Theano的主要开发者如今都在Google，能够想见未来的工程资源上也会更偏向于TF一些”。知乎用户张昊说“ 1. 看你作什么application 2. 看哪一个framework可以提供给你最多与你所作的问题相关的资源。举个例子，好比作language相关，在小数据上跑跑实验的话我以为theano不错，网上能找到的相关资源（好比其余相关paper的实现，model）不少。若是作视觉相关的那theano的资源跟caffe和torch比就少多了，因此caffe和torch可能会是更好的选择。TF也不错，最近Google promote的很厉害，估计随着用的人愈来愈多在一两年内资源也会愈来愈多。”鉴于我目前只是学习一下，因此决定使用Theano ,可是今天仍是花了蟹时间安装Tensorflow。

 

2.安装Tensorflow

Ubuntu14.04+cuda7.5+cudnnv4+Tensorflow

基本根据官方给的教程就能够安装了https://www.tensorflow.org，而后学校有时候打不开界面，因此也能够参考这里。

我选择的pip install方式。

$ sudo apt-get install python-pip python-dev

其实这些工具前面好像安装过了，可是怕有问题就再执行一遍，选择符合本身状况的命令执行下去。

# Ubuntu/Linux 64-bit, GPU enabled, Python 2.7
# Requires CUDA toolkit 7.5 and CuDNN v4. For other versions, see "Install from sources" below.
$ export TF_BINARY_URL=https://storage.googleapis.com/tensorflow/linux/gpu/tensorflow-0.9.0-cp27-none-linux_x86_64.whl

出现错误，在教程里的common problems中说：

...
SSLError: [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed

Solution: Download the wheel manually via curl or wget, and pip install locally.因此使用wget命令下载再执行安装。

wget https://storage.googleapis.com/tensorflow/linux/gpu/tensorflow-0.9.0-cp27-none-linux_x86_64.whl
sudo pip install tensorflow-0.9.0-cp27-none-linux_x86_64.whl

接着测试tensorflow.

Open a terminal and type the following:

$ python
...
>>> import tensorflow as tf
>>> hello = tf.constant('Hello, TensorFlow!')
>>> sess = tf.Session()
>>> print(sess.run(hello))
Hello, TensorFlow!
>>> a = tf.constant(10)
>>> b = tf.constant(32)
>>> print(sess.run(a + b))
42
>>>

没有问题。

$ python -c 'import os; import inspect; import tensorflow; print(os.path.dirname(inspect.getfile(tensorflow)))'

结果以下：

测试运行：

$ python -m tensorflow.models.image.mnist.convolutional

出现错误：

lvxia@kde:~$ python -m tensorflow.models.image.mnist.convolutional
I tensorflow/stream_executor/dso_loader.cc:108] successfully opened CUDA library libcublas.so locally
I tensorflow/stream_executor/dso_loader.cc:108] successfully opened CUDA library libcudnn.so locally
I tensorflow/stream_executor/dso_loader.cc:108] successfully opened CUDA library libcufft.so locally
I tensorflow/stream_executor/dso_loader.cc:108] successfully opened CUDA library libcuda.so locally
I tensorflow/stream_executor/dso_loader.cc:108] successfully opened CUDA library libcurand.so locally
Extracting data/train-images-idx3-ubyte.gz
Traceback (most recent call last):
  File "/usr/lib/python2.7/runpy.py", line 162, in _run_module_as_main
    "__main__", fname, loader, pkg_name)
  File "/usr/lib/python2.7/runpy.py", line 72, in _run_code
    exec code in run_globals
  File "/usr/local/lib/python2.7/dist-packages/tensorflow/models/image/mnist/convolutional.py", line 316, in <module>
    tf.app.run()
  File "/usr/local/lib/python2.7/dist-packages/tensorflow/python/platform/app.py", line 30, in run
    sys.exit(main(sys.argv))
  File "/usr/local/lib/python2.7/dist-packages/tensorflow/models/image/mnist/convolutional.py", line 128, in main
    train_data = extract_data(train_data_filename, 60000)
  File "/usr/local/lib/python2.7/dist-packages/tensorflow/models/image/mnist/convolutional.py", line 75, in extract_data
    buf = bytestream.read(IMAGE_SIZE * IMAGE_SIZE * num_images)
  File "/usr/lib/python2.7/gzip.py", line 261, in read
    self._read(readsize)
  File "/usr/lib/python2.7/gzip.py", line 308, in _read
    self._read_eof()
  File "/usr/lib/python2.7/gzip.py", line 347, in _read_eof
    hex(self.crc)))
IOError: CRC check failed 0xe1d362ba != 0x90dd462eL

 https://github.com/tensorflow/tensorflow/issues/1319中的解决方式：

所以，进入convolutional.py所在目录，修改文件权限，而后将WORK_DIRECTORY的data修改成 /usr/local/lib/python2.7/dist-packages/tensorflow/models/image/mnist/data 便可。

sudo chmod 777 convolutional.py

从新执行：

python -m tensorflow.models.image.mnist.convolutional

仍是出现错误

E tensorflow/stream_executor/cuda/cuda_dnn.cc:286] Loaded cudnn library: 5005 but source was compiled against 4007. If using a binary install, upgrade your cudnn library to match. If building from sources, make sure the library loaded matches the version you specified during compile configuration.

能够看到是cudnn版本不一致的问题致使的。

而后官网上有这么一句“Download cuDNN v4 (v5 is currently a release candidate and is only supported when installing TensorFlow from sources).”，因此我就下载了cuDNN v4。

tar xvzf cudnn-7.0-linux-x64-v4.tgz
sudo cp cuda/include/cudnn.h /usr/local/cuda-7.5/include
sudo cp cuda/lib64/libcudnn* /usr/local/cuda-7.5/lib64
sudo chmod a+r /usr/local/cuda-7.5/include/cudnn.h /usr/local/cuda-7.5/lib64/libcudnn*

我忘记之前怎么操做的了，个人/esr/local文件夹下有两个cuda文件，一个是cuda一个是cuda-7.5.这里我把他放在cuda7.5文件夹下面。

而后执行上述命令就没有问题了。

 

中间晕晕呼呼还尝试了一遍源代码安装方式，就是官网上的install from sources,基本步骤也按照上面来，结合 博客 博客 就能够了，碰到蟹问题，基本google能找出解决办法的。

这篇博客讲述了tensorflow源码目录结构的一些知识。

 

 

这里记录几个小问题和解决方法：

（1）OSError - Errno 13 Permission denied 

chown -R user-id:group-id /path/to/the/directory

（2）AttributeError: type object 'NewBase' has no attribute 'is_abstract'

sudo pip install six --upgrade --target="/Library/Python/2.7/site-packages/"

（3）./configure 在 tensorflow目录下，这个在源代码安装方式中用到这个配置了。