Python 实现多个服务器之间进行上传/下载文件功能

首先要说明的就是要实现此功能，须要借助paramiko模块，因此，本博客着重点讲解如何使用paramiko模块来进行相关的服务器之间的文件操做。

一：简介

paramiko是用python语言写的一个模块，遵循SSH2协议，支持以加密和认证的方式，进行远程服务器的链接。

因为使用的是python这样的可以跨平台运行的语言，因此全部python支持的平台，如Linux, Solaris, BSD, MacOS X, Windows等，paramiko均可以支持，所以，若是须要使用SSH从一个平台链接到另一个平台，进行一系列的操做时，paramiko是最佳工具之一。

举个常见的例子，现有这样的需求：须要使用windows客户端，远程链接到Linux服务器，查看上面的日志状态，你们一般使用的方法会是：

1. 用telnet

2. 用PUTTY

3. 用WinSCP

4. 用XManager等…

那如今若是需求又增长一条，要从服务器上下载文件，该怎么办？那经常使用的办法可能会是：

1. Linux上安装FTP并配置

2. Linux上安装Sambe并配置…

你们会发现，常见的解决方法都会须要对远程服务器必要的配置，若是远程服务器只有一两台还好说，若是有N台，还须要逐台进行配置，或者须要使用代码进行以上操做时，上面的办法就不太方便了。

使用paramiko能够很好的解决以上问题，比起前面的方法，它仅须要在本地上安装相应的软件（python以及PyCrypto），对远程服务器没有配置要求，对于链接多台服务器，进行复杂的链接操做特别有帮助。

二：安装

安装paramiko有两个先决条件，python和另一个名为PyCrypto的模块。
一般安装标准的python模块，只须要在模块的根目录下运行：

python setup.py build
python setup.py install

备注：安装前先检查是否安装gcc（yum -y install gcc）

2.一、PyCrypto安装

wget http://ftp.dlitz.net/pub/dlitz/crypto/pycrypto/pycrypto-2.6.tar.gz

tar -zxvf pycrypto-2.6.tar.gz

cd pycrypto-2.6/

python setup.py build && python setup.py install

测试：

python>> import Crypto

(编译时报错：error: command 'gcc' failed with exit status 1；这是由于缺乏python-dev的软件包，所yum -y install python-devel)

2.二、paramiko安装

wget http://www.lag.net/paramiko/download/paramiko-1.7.7.1.tar.gz

tar xvzf paramiko-1.7.7.1.tar.gz

cd paramiko-1.7.7.1/

python setup.py build && python setup.py install

Crypto error: 'module' object has no attribute 'HAVE_DECL_MPZ_POWM_SEC'

测试：

python>> import paramiko

(Crypto error: ‘module’ object has no attribute ‘HAVE_DECL_MPZ_POWM_SEC’

找到 /usr/lib/python2.7/site-packages/Crypto/Util/number.py

把if _fastmath is not None and not _fastmath.HAVE_DECL_MPZ_POWM_SEC:

注释了

#if _fastmath is not None and not _fastmath.HAVE_DECL_MPZ_POWM_SEC:)*

三： 使用paramiko

#设置ssh链接的远程主机地址和端口
t=paramiko.Transport((ip,port))
#设置登陆名和密码
t.connect(username=username,password=password)
#链接成功后打开一个channel
chan=t.open_session()
#设置会话超时时间
chan.settimeout(session_timeout)
#打开远程的terminal
chan.get_pty()
#激活terminal
chan.invoke_shell()
而后就能够经过chan.send(‘command’)和chan.recv(recv_buffer)来远程执行命令以及本地获取反馈。
paramiko有两个模块SSHClient()和SFTPClient()
利用SSHClient()

#coding:utf-8
 import paramiko
 
 #建立SSH对象
 ssh = paramiko.SSHClient()
 # 容许链接不在know_hosts文件中的主机
 ssh.set_missing_host_key_policy(paramiko.AutoAddPolicy())
 # 链接服务器
 ssh.connect(hostname='192.168.2.103', port=22, username='root', password='123456')

 # 执行命令
 stdin, stdout, stderr = ssh.exec_command('ls')
 # 获取命令结果
 result = stdout.read()
 print (str(result,encoding='utf-8'))
 # 关闭链接
 ssh.close()

SSHClient()里面有一个transport变量，这个是用于获取链接的，所以咱们也能够单独的获取到transport变量，而后执行链接操做

#coding:utf-8
 import paramiko

 transport = paramiko.Transport(('192.168.2.103', 22))
 transport.connect(username='root', password='123456')
 
 ssh = paramiko.SSHClient()
 ssh._transport = transport
 stdin, stdout, stderr = ssh.exec_command('df')
 print (str(stdout.read(),encoding='utf-8'))
 transport.close()

用transport实现上传下载以及命令的执行：

1 #coding:utf-8
 2 import paramiko
 3 import uuid
 4 
 5 class SSHConnection(object):
 6 
 7     def __init__(self, host='192.168.2.103', port=22, username='root',pwd='123456'):
 8         self.host = host
 9         self.port = port
10         self.username = username
11         self.pwd = pwd
12         self.__k = None
13 
14     def connect(self):
15         transport = paramiko.Transport((self.host,self.port))
16         transport.connect(username=self.username,password=self.pwd)
17         self.__transport = transport
18 
19     def close(self):
20         self.__transport.close()
21 
22     def upload(self,local_path,target_path):
23         # 链接，上传
24         # file_name = self.create_file()
25         sftp = paramiko.SFTPClient.from_transport(self.__transport)
26         # 将location.py 上传至服务器 /tmp/test.py
27         sftp.put(local_path, target_path)
28 
29     def download(self,remote_path,local_path):
30         sftp = paramiko.SFTPClient.from_transport(self.__transport)
31         sftp.get(remote_path,local_path)
32 
33     def cmd(self, command):
34         ssh = paramiko.SSHClient()
35         ssh._transport = self.__transport
36         # 执行命令
37         stdin, stdout, stderr = ssh.exec_command(command)
38         # 获取命令结果
39         result = stdout.read()
40         print (str(result,encoding='utf-8'))
41         return result
42 
43 ssh = SSHConnection()
44 ssh.connect()
45 ssh.cmd("ls")
46 ssh.upload('s1.py','/tmp/ks77.py')
47 ssh.download('/tmp/test.py','kkkk',)
48 ssh.cmd("df")
49 ssh.close()

4、与linux链接

下面是两种使用paramiko链接到linux服务器的代码

方式一：

1 ssh = paramiko.SSHClient()
2 ssh.set_missing_host_key_policy(paramiko.AutoAddPolicy())
3 ssh.connect("某IP地址",22,"用户名", "口令")

方式二：

1 t = paramiko.Transport((“主机”,”端口”))
2 t.connect(username = “用户名”, password = “口令”)

SFTPClient()也是使用transport来实现的，所以若是有需求须要执行命令和上传文件糅合在一块儿的话，那么就须要使用transport的方式来实现。
若是链接远程主机须要提供密钥，上面第二行代码可改为：

t.connect(username = “用户名”, password = “口令”, hostkey=”密钥”)

3.1 windows对linux运行任意命令,并将结果输出

若是linux服务器开放了22端口，在windows端，咱们可使用paramiko远程链接到该服务器，并执行任意命令，而后经过 print或其它方式获得该结果，

代码以下

1 #coding:Utf8
 2 
 3 import paramiko
 4  
 5 ssh = paramiko.SSHClient()
 6 ssh.set_missing_host_key_policy(paramiko.AutoAddPolicy())
 7 ssh.connect("某IP地址",22,"用户名", "口令")
 8 stdin, stdout, stderr = ssh.exec_command("你的命令")
 9 print stdout.readlines()
10 ssh.close()

其中的”你的命令”能够任意linux支持的命令

3.2 从widnows端下载linux服务器上的文件

1 coding:utf8
 2 
 3 import paramiko
 4  
 5 t = paramiko.Transport((“主机”,”端口”))
 6 t.connect(username = “用户名”, password = “口令”)
 7 sftp = paramiko.SFTPClient.from_transport(t)
 8 remotepath=’/var/log/system.log’
 9 localpath=’/tmp/system.log’
10 sftp.get(remotepath, localpath)
11 t.close()

3.3 从widnows端上传文件到linux服务器

1 import paramiko
2 
3 t = paramiko.Transport((“主机”,”端口”))
4 t.connect(username = “用户名”, password = “口令”)
5 sftp = paramiko.SFTPClient.from_transport(t)
6 remotepath=’/var/log/system.log’
7 localpath=’/tmp/system.log’
8 sftp.put(localpath,remotepath)
9 t.close()

3.4 在Linux上安装paramiko模块

安装scrapy这个应用中遇到的问题
c/_cffi_backend.c:2:20: fatal error: Python.h: No such file or directory
sudo apt-get install python-dev
c/_cffi_backend.c:13:17: fatal error: ffi.h: No such file or directory
1 sudo apt-get install libffi-dev
*make sure the development packages of libxml2 and libxslt are installed *
1 sudo apt-get install libxslt1-dev

1.下载安装wget http://peak.telecommunity.com/dist/ez_setup.py

2.python ez_setup.py

3.easy_install paramiko