【Linux】Devops的一些运维工具

1、Devops简介

从手工编译、上传服务器文件、执行命令、启动中止服务器、发现BUG再重复一遍流程，软件开发的重复劳动愈来愈多，在Devops概念以前，所有要靠人工手动完成，也看到了不少运维人员半夜起来救急的状况。

Devops一词来自于Development 和 Operations 的组合，从字面意思理解，就是让软件开发人员和运维人员更好的沟通合做，经过自动化流程让软件开发、测试、发布更快捷。实际上，Devops是对敏捷和精益开发的传承，是在整个IT价值流中实施精益的结果，Devops并非只一个新的工程师，也不是一个部门，而是一种文化，没有什么工具能够把团队直接变成Devops组织，这是一种观念的转变。

Devops在高效交付以及自动运维方面的好处让其快速被市场承认并接受，可是在作Devops实践中每每会遇到很大的阻力。

Devops并非简单的将开发部门和运维部门合并，而是经过自动化的基础设施、合理的流程规范以及智能的自动运行系统测试使开发和运维之间的沟通协做获得增强。

2、工具简介

一、版本控制和协做开发工具

（1）版本控制系统Git

（2）代码托管平台 GitLab

（3）代码评审工具 Gerrit

二、自动化构建和测试工具

（1）Apache Ant：Apache Ant是一个将软件编译、测试、部署等步骤联系在一块儿加以自动化的一个工具，大多用于Java环境中的软件开发。

（2）Maven：Maven 除了以程序构建能力为特点以外，还提供 Ant 所缺乏的高级项目管理工具。因为 Maven 的缺省构建规则有较高的可重用性，因此经常用两三行 Maven 构建脚本就能够构建简单的项目，而使用 Ant 则须要十几行。

（3）Selenium集成测试工具

（4）Python单元测试框架

（5）QUnit 是 jQuery 的单元测试框架。

（6）JMeter功能和性能测试的工具，彻底用java实现。

（7）Gradle：Gradle 是可使用 Groovy 来书写构建脚本的构建系统，支持依赖管理和多项目，相似 Maven。

（8）PHPUnit：PHPUnit 是一个轻量级的PHP测试框架。

3.、持续集成&交付

（1）Jenkins可扩展的持续集成引擎

（2）Capistrano：Capistrano 是用来并行在多台机器上执行相同命令的工具，使用用来安装一整批机器。

（3）BuildBot：BuildBot是进行系统自动化编译/测试周期最须要的软件，用于验证代码的变化。

（4）Fabric：fabric8 是开源 Java Containers(JVMs) 深度管理集成平台。可以很方便的从 UI 和 UX 一致的中央位置进行自动操做，配置和管理。fabric8还提供了一些非功能性需求，好比配置管理，服务发现故障转移，集中化监控，自动化等等。

（5）Tinderbox

（6）Travis CI：Travis CI 是一个基于云的持续集成项目， 能够支持大部分主流语言，好比：C，PHP，Ruby，Python, Nodejs等等。

（7）Continuum是最新的 CI 服务器之一，基于 Web 界面配置容易。

（8）LuntBuild自动构建工具。经过web接口能够很容易地进行系统的持续构建。

（9）CruiseControl：CruiseControl 是一个针对持续构建程序(项目持续集成)的框架,包括email通知的插件，Ant和各类各样的CVS工具，还提供了一个Web接口, 可随时查看当前的编译情况和历史情况

（10）Gump：Gump 是 Apache 的整合工具。它以 Python 写成、彻底支持 Apache Ant、Apache Maven 等等软件组建工具。

4.、部署工具

4.1 容器平台

（1）Docker：Docker 是一个开源的应用容器引擎，让开发者能够打包他们的应用以及依赖包到一个可移植的容器中，而后发布到任何流行的 Linux 机器上，也能够实现虚拟化。

（2）Rocket：Rocket （也叫 rkt）是 CoreOS 推出的一款容器引擎，和 Docker 相似，帮助开发者打包应用和依赖包到可移植容器中，简化搭环境等部署工做。

（3）Ubuntu（LXC）：LXD 是 ubuntu 基于 LXC 技术的重构，容器自然支持非特权和分布式。LXD 与 Docker 的思路不一样，Docker 是 PAAS，LXD 是 IAAS。LXC 项目由一个 Linux 内核补丁和一些 userspace 工具组成。这些 userspace 工具使用由补丁增长的内核新特性，提供一套简化的工具来维护容器。

4.2 配置管理

（1）Chef：Chef 是一个系统集成框架，为整个架构提供配置管理功能。

（2）Puppet：Puppet，您能够集中管理每个重要方面，您的系统使用的是跨平台的规范语言，管理全部的单独的元素一般汇集在不一样的文件，如用户， CRON做业，和主机一块儿显然离散元素，如包装，服务和文件。

（3）CFengine：Cfengine（配置引擎）是一种 UNIX 管理工具，其目的是使简单的管理的任务自动化，使困难的任务变得较容易。Cfengine 适用于管理各类环境，从一台主机到上万台主机的机群都可使用。

（4）Bash：bash 是大多数Linux系统以及Mac OS X v10.4默认的shell，它能运行于大多数Unix风格的操做系统之上，甚至被移植到了Microsoft Windows上的Cygwin系统中，以实现windows的POSIX虚拟接口。此外，它也被DJGPP项目移植到了MS-DOS上。

（5）Rudder：Rudder 已更名为Flannel，为每一个使用 Kubernetes 的机器提供一个子网。也就是说 Kubernetes 集群中的每一个主机都有本身一个完整的子网，例如机器 A 和 B 能够有 10.0.1.0/24 和 10.0.2.0/24 子网。

（6）RunDeck：RunDeck 是用 Java/Grails 写的开源工具，帮助用户在数据中心或者云环境中自动化各类操做和流程。经过命令行或者web界面，用户能够对任意数量的服务器进行操做，大大下降了对服务器自动化的门槛。

（7）Saltstack：Saltstack 能够看作是func的加强版+Puppet的弱化版。使用Python编写。很是好用,快速能够基于EPEL部署。Salt 是一个开源的工具用来管理你的基础架构，可轻松管理成千上万台服务器。

（8）Ansible：Ansible 是用于发布、管理和编排计算机系统的工具，Ansible 是一个模型驱动的配置管理器，支持多节点发布、远程任务执行。默认使用 SSH 进行远程链接。无需在被管理节点上安装附加软件，可以使用各类编程语言进行扩展。

 

4.3 微服务平台

（1）OpenShift：OpenShift 是由红帽推出的一款面向开源开发人员开放的平台即服务(PaaS)。 OpenShift经过为开发人员提供在语言、框架和云上的更多的选择，使开发人员能够构建、测试、运行和管理他们的应用。

（2）Cloud Foundry：Cloud Foundry 是VMware于2011年4月12日推出的业界第一个开源PaaS云平台，它支持多种框架、语言、运行时环境、云平台及应用服务，使开发 人员可以在几秒钟内进行应用程序的部署和扩展，无需担忧任何基础架构的问题。

（3）Kubernetes：Kubernetes 是来自 Google 云平台的开源容器集群管理系统。基于 Docker 构建一个容器的调度服务。该系统能够自动在一个容器集群中选择一个工做容器供使用。其核心概念是 Container Pod。

（4）Mesosphere：Apache Mesos 是一个集群管理器，提供了有效的、跨分布式应用或框架的资源隔离和共享，能够运行Hadoop、MPI、Hypertable、Spark。

4.4 服务开通

（1）Puppet：Puppet，您能够集中管理每个重要方面，您的系统使用的是跨平台的规范语言，管理全部的单独的元素一般汇集在不一样的文件，如用户， CRON做业，和主机一块儿显然离散元素，如包装，服务和文件。

（2）Razor

（3）Docker Swarm：Docker Swarm 是一个Dockerized化的分布式应用程序的本地集群，它是在Machine所提供的功能的基础上优化主机资源的利用率和容错服务。具体来 说，Docker Swarm支持用户建立可运行Docker Daemon的主机资源池，而后在资源池中运行Docker容器。Docker Swarm能够管理工做负载并维护集群状态。

（4）Vagrant：Vagrant 是一个基于 Ruby 的工具，用于建立和部署虚拟化开发环境。它使用 Oracle 的开源 VirtualBox 虚拟化系统，使用 Chef 建立自动化虚拟环境。

（5）OpenStack Heat

5.、日志管理

（1）Logstash：Logstash 是一个应用程序日志、事件的传输、处理、管理和搜索的平台。你能够用它来统一对应用程序日志进行收集管理，提供 Web 接口用于查询和统计。

（2）CollectD：Collectd 是一个守护(daemon)进程，用来收集系统性能和提供各类存储方式来存储不一样值的机制。好比以RRD 文件形式。

（3）StatsD：StatsD 是一个简单的网络守护进程，基于 Node.js 平台，经过 UDP 或者 TCP 方式侦听各类统计信息，包括计数器和定时器，并发送聚合信息到后端服务，例如 Graphite。

6.、监控，警告&分析

（1）Nagios：Nagios 是一个监视系统运行状态和网络信息的监视系统。Nagios能监视所指定的本地或远程主机以及服务，同时提供异常通知功能等。

（2）Ganglia：Ganglia 是一个跨平台可扩展的，高 性能计算系统下的分布式监控系统，如集群和网格。它是基于分层设计，它使用普遍的技术，如XML数据表明，便携数据传输，RRDtool用于数据存储和可视化。

（3）Sensu：Sensu 是开源的监控框架。主要特性：高度可组合；提供一个监控代理，一个事件处理器和文档 APIs；为云而设计；Sensu 的现代化架构容许监控大规模的动态基础设施，可以经过复杂的公共网络监控几千个全球分布式的机器和服务；热情的社区。

（4）Zabbix：Zabbix 是一个基于WEB界面的提供分布式系统监视以及网络监视功能的企业级的开源解决方案。

（5）ICINGA：ICINGA 项目是 由Michael Luebben、HendrikB?cker和JoergLinge等人发起的，他们都是现有的Nagios项目社区委员会的成员，他们承诺，新的开源项 目将彻底兼容之前的Nagios应用程序及扩展功能。

（6）Graphite：Graphite 是一个用于采集网站实时信息并进行统计的开源项目，可用于采集多种网站服务运行状态信息。Graphite服务平均每分钟有4800次更新操做。

（7）Kibana：Kibana 是一个为 Logstash 和 ElasticSearch 提供的日志分析的 Web 接口。可以使用它对日志进行高效的搜索、可视化、分析等各类操做