不一样环境下Jenkins调用shell脚本管理docker容器脚本两则

防伪码:桃李春风一杯酒,江湖夜雨十年灯。html

1、生产环境Jenkins使用ssh-copy-id实现SSH无密码登陆,实现方式以下:python

ssh-keygen  产生公钥与私钥对.mysql

ssh-copy-id 将本机的公钥复制到远程机器的authorized_keys文件中,ssh-copy-id也能让你有到远程机器的home, ~./ssh , 和 ~/.ssh/authorized_keys的权利sql


第一步:在本地机器上使用ssh-keygen产生公钥私钥对docker

$ ssh-keygen


第二步:用ssh-copy-id将公钥复制到远程机器中shell

$  ssh-copy-id -i .ssh/id_rsa.pub  用户名字@192.168.x.xxx

注意: ssh-copy-id 将key写到远程机器的 ~/ .ssh/authorized_key.文件中
数据库


第三步: 登陆到远程机器不用输入密码浏览器

$  ssh 用户名字@192.168.x.xxx
Last login: Sun Nov 16 17:22:33 2008 from 192.168.1.2


常见问题:安全

ssh-copy-id -u eucalyptus -i ~eucalyptus/.ssh/id_rsa.pub ssh 用户名字@192.168.x.xxx


第一次须要密码登陆bash

上述是给eucalyptus用户赋予无密码登录的权利


/usr/bin/ssh-copy-id: ERROR: No identities found


使用选项 -i ,当没有值传递的时候或者 若是 ~/.ssh/identity.pub 文件不可访问(不存在), ssh-copy-id 将显示上述的错误信息  ( -i选项会优先使用将ssh-add -L的内容)



ssh命令


一、复制SSH密钥到目标主机,开启无密码SSH登陆


ssh-copy-id user@host


若是尚未密钥,请使用ssh-keygen命令生成。


二、从某主机的80端口开启到本地主机2001端口的隧道


ssh -N -L2001:localhost:80 somemachine


如今你能够直接在浏览器中输入http://localhost:2001访问这个网站。


三、将你的麦克风输出到远程计算机的扬声器


dd if=/dev/dsp | ssh -c arcfour -C username@host dd of=/dev/dsp


这样来自你麦克风端口的声音将在SSH目标计算机的扬声器端口输出,但遗憾的是,声音质量不好,你会听到不少嘶嘶声。


四、比较远程和本地文件


ssh user@host cat /path/to/remotefile | diff /path/to/localfile –


在比较本地文件和远程文件是否有差别时这个命令很管用。


五、经过SSH挂载目录/文件系统


sshfs name@server:/path/to/folder /path/to/mount/point
从http://fuse.sourceforge.net/sshfs.html下载sshfs,它容许你跨网络安全挂载一个目录。

六、经过中间主机创建SSH链接


ssh -t reachable_host ssh unreachable_host
Unreachable_host表示从本地网络没法直接访问的主机,但能够从reachable_host所在网络访问,这个命令经过到reachable_host的“隐藏”链接,建立起到unreachable_host的链接。



七、将你的SSH公钥复制到远程主机,开启无密码登陆 – 简单的方法


ssh-copy-id username@hostname


八、直接链接到只能经过主机B链接的主机A


ssh -t hostA ssh hostB


固然,你要能访问主机A才行。


九、建立到目标主机的持久化链接


ssh -MNf <user>@<host>


在后台建立到目标主机的持久化链接,将这个命令和你~/.ssh/config中的配置结合使用:


Host host
ControlPath ~/.ssh/master-%r@%h:%p
ControlMaster no


全部到目标主机的SSH链接都将使用持久化SSH套接字,若是你使用SSH按期同步文件(使用rsync/sftp/cvs/svn),这个命令将很是有用,由于每次打开一个SSH链接时不会建立新的套接字。


十、经过SSH链接屏幕


ssh -t remote_host screen –r


直接链接到远程屏幕会话(节省了无用的父bash进程)。


十一、端口检测(敲门)


knock <host> 3000 4000 5000 && ssh -p <port> user@host && knock <host> 5000 4000 3000

在一个端口上敲一下打开某个服务的端口(如SSH),再敲一下关闭该端口,须要先安装knockd,下面是一个配置文件示例。


[options]
logfile = /var/log/knockd.log
[openSSH]
sequence = 3000,4000,5000
seq_timeout = 5
command = /sbin/iptables -A INPUT -i eth0 -s %IP% -p tcp –dport 22 -j ACCEPT
tcpflags = syn
[closeSSH]
sequence = 5000,4000,3000
seq_timeout = 5
command = /sbin/iptables -D INPUT -i eth0 -s %IP% -p tcp –dport 22 -j ACCEPT
tcpflags = syn


十二、删除文本文件中的一行内容,有用的修复


ssh-keygen -R <the_offending_host>


在这种状况下,最好使用专业的工具。


1三、经过SSH运行复杂的远程shell命令


ssh host -l user $(<cmd.txt)


更具移植性的版本:


ssh host -l user “`cat cmd.txt`”


1四、经过SSH将MySQL数据库复制到新服务器


mysqldump –add-drop-table –extended-insert –force –log-error=error.log -uUSER -pPASS OLD_DB_NAME | ssh -C user@newhost “mysql -uUSER -pPASS NEW_DB_NAME”
经过压缩的SSH隧道Dump一个MySQL数据库,将其做为输入传递给mysql命令,我认为这是迁移数据库到新服务器最快最好的方法。



1五、删除文本文件中的一行,修复“SSH主机密钥更改”的警告


sed -i 8d ~/.ssh/known_hosts


1六、从一台没有SSH-COPY-ID命令的主机将你的SSH公钥复制到服务器


cat ~/.ssh/id_rsa.pub | ssh user@machine “mkdir ~/.ssh; cat >> ~/.ssh/authorized_keys”


若是你使用Mac OS X或其它没有ssh-copy-id命令的*nix变种,这个命令能够将你的公钥复制到远程主机,所以你照样能够实现无密码SSH登陆。


1七、实时SSH网络吞吐量测试


yes | pv | ssh $host “cat > /dev/null”


经过SSH链接到主机,显示实时的传输速度,将全部传输数据指向/dev/null,须要先安装pv。


若是是Debian:


apt-get install pv


若是是Fedora:


yum install pv


(可能须要启用额外的软件仓库)。


1八、若是创建一个能够从新链接的远程GNU screen


ssh -t user@some.domain.com /usr/bin/screen –xRR


人们老是喜欢在一个文本终端中打开许多shell,若是会话忽然中断,或你按下了“Ctrl-a d”,远程主机上的shell不会受到丝毫影响,你能够从新链接,其它有用的screen命令有“Ctrl-a c”(打开新的shell)和“Ctrl-a a”(在shell之间来回切换),请访问http://aperiodic.net/screen/quick_reference阅读更多关于screen命令的快速参考。


1九、继续SCP大文件


rsync –partial –progress –rsh=ssh $file_source $user@$host:$destination_file


它能够恢复失败的rsync命令,当你经过***传输大文件,如备份的数据库时这个命令很是有用,须要在两边的主机上安装rsync。


rsync –partial –progress –rsh=ssh $file_source $user@$host:$destination_file local -> remote



rsync –partial –progress –rsh=ssh $user@$host:$remote_file $destination_file remote -> local


20、经过SSH W/ WIRESHARK分析流量


ssh root@server.com ‘tshark -f “port !22″ -w -' | wireshark -k -i –


使用tshark捕捉远程主机上的网络通讯,经过SSH链接发送原始pcap数据,并在wireshark中显示,按下Ctrl+C将中止捕捉,但也会关闭wireshark窗口,能够传递一个“-c #”参数给tshark,让它只捕捉“#”指定的数据包类型,或经过命名管道重定向数据,而不是直接经过SSH传输给wireshark,我建议你过滤数据包,以节约带宽,tshark可使用tcpdump替代:


ssh root@example.com tcpdump -w – ‘port !22′ | wireshark -k -i –


2一、保持SSH会话永久打开


autossh -M50000 -t server.example.com ‘screen -raAd mysession’


打开一个SSH会话后,让其保持永久打开,对于使用笔记本电脑的用户,若是须要在Wi-Fi热点之间切换,能够保证切换后不会丢失链接。


2二、更稳定,更快,更强的SSH客户端


ssh -4 -C -c blowfish-cbc


强制使用IPv4,压缩数据流,使用Blowfish加密。


2三、使用cstream控制带宽


tar -cj /backup | cstream -t 777k | ssh host ‘tar -xj -C /backup’


使用bzip压缩文件夹,而后以777k bit/s速率向远程主机传输。Cstream还有更多的功能,请访问http://www.cons.org/cracauer/cstream.html#usage了解详情,例如:


echo w00t, i’m 733+ | cstream -b1 -t2


2四、一步将SSH公钥传输到另外一台机器


ssh-keygen; ssh-copy-id user@host; ssh user@host


这个命令组合容许你无密码SSH登陆,注意,若是在本地机器的~/.ssh目录下已经有一个SSH密钥对,ssh-keygen命令生成的新密钥可能会覆盖它们,ssh-copy-id将密钥复制到远程主机,并追加到远程帐号的~/.ssh/authorized_keys文件中,使用SSH链接时,若是你没有使用密钥口令,调用ssh user@host后不久就会显示远程shell。


2五、将标准输入(stdin)复制到你的X11缓冲区


ssh user@host cat /path/to/some/file | xclip


你是否使用scp将文件复制到工做用电脑上,以便复制其内容到电子邮件中?xclip能够帮到你,它能够将标准输入复制到X11缓冲区,你须要作的就是点击鼠标中键粘贴缓冲区中的内容。



2、Linux环境和Jenkins环境2则脚本,仅供参考

一、Jenkins构建调用shell脚本管理容器(Linux环境)脚本:


#!/bin/bash
#操做/项目路径(Dockerfile存放的路劲)
BASE_PATH=/work/project
# 源jar路径
SOURCE_PATH=/root/.jenkins/workspace
#docker 镜像/容器名字或者jar名字 这里都命名为这个
SERVER_NAME=docker-test
#容器id
CID=$(docker ps | grep "$SERVER_NAME" | awk '{print $1}')
#镜像id
IID=$(docker images | grep "$SERVER_NAME" | awk '{print $3}')
DATE=`date +%Y%m%d%H%M`
# 备份
PATH=$(pwd)
cd /opt/docker_data/nlp_drgs_zhikong/
/usr/bin/tar zcf ICD_code_qc_${DATE}.tar.gz ICD_code_qc
/usr/bin/mv ICD_code_qc_${DATE}.tar.gz /opt/bak/
cd $PATH
echo "备份 $ 完成
# 构建docker镜像
function build(){
if [ -n "$IID" ]; then
echo "存在$SERVER_NAME镜像,IID=$IID"
else
echo "不存在$SERVER_NAME镜像,开始构建镜像"
cd $BASE_PATH
docker build -t $SERVER_NAME .
fi
}
docker container run --name 容器名 --restart=always --detach --network nlp-drgs -v /opt/qq:/opt/yy -w /opt -p 本机端口(65534个):容器里端口 镜像名 /usr/bin/python test.py
# 运行docker容器
function run(){
#backup
#transfer
build
if [ -n "$CID" ]; then
echo "存在$SERVER_NAME容器,CID=$CID,重启docker容器 ..."
$docker restart $SERVER_NAME
echo "$SERVER_NAME容器重启完成"
else
echo "不存在$SERVER_NAME容器,docker run建立容器..."
docker run --name $SERVER_NAME -v $BASE_PATH:$BASE_PATH -d -p 3636:3636 $SERVER_NAME
echo "$SERVER_NAME容器建立完成"
fi
}
#入口
run



二、Jenkins构建调用shell脚本管理容器(Jenkins环境)脚本:


#!/bin/bash
#操做/项目路径(Dockerfile存放的路劲)
BASE_PATH=/work/project
# 源jar路径
SOURCE_PATH=/root/.jenkins/workspace
#docker 镜像/容器名字或者jar名字 这里都命名为这个
SERVER_NAME=docker-test
#容器id
CID=$(docker ps | grep "$SERVER_NAME" | awk '{print $1}')
#镜像id
IID=$(docker images | grep "$SERVER_NAME" | awk '{print $3}')
DATE=`date +%Y%m%d%H%M`
# 备份
PATH=$(pwd)
cd /opt/docker_data/nlp_drgs_zhikong/
tar zcf ICD_code_qc_${DATE}.tar.gz ICD_code_qc
mv ICD_code_qc_${DATE}.tar.gz /opt/bak/
cd $PATH
echo "备份 $ 完成
# 构建docker镜像
function build(){
if [ -n "$IID" ]; then
echo "存在$SERVER_NAME镜像,IID=$IID"
else
echo "不存在$SERVER_NAME镜像,开始构建镜像"
cd $BASE_PATH
docker build -t $SERVER_NAME .
fi
}
docker container run --name 容器名 --restart=always --detach --network nlp-drgs -v /opt/new:/opt/old -w /opt -p 本机端口(65534个):容器里端口 镜像名 /usr/bin/python test.py
# 运行docker容器
function run(){
#backup
#transfer
build
if [ -n "$CID" ]; then
echo "存在$SERVER_NAME容器,CID=$CID,重启docker容器 ..."
docker restart $SERVER_NAME
echo "$SERVER_NAME容器重启完成"
else
echo "不存在$SERVER_NAME容器,docker run建立容器..."
docker run --name $SERVER_NAME -v $BASE_PATH:$BASE_PATH -d -p 3636:3636 $SERVER_NAME
echo "$SERVER_NAME容器建立完成"
fi
}
#入口
run