自动化运维

自动化运维介绍

puppet 老牌
saltstack 效率高 适用大基数平台
ansible 轻量 功能全
puppet安装准备工作
务端 172.7.15.106 web9.aming.com
客户端 172.7.15.111 web10.aming.com
两台机器关闭selinux 清空iptables规则 设置hostname
getenforce Permissive 关闭
vim /etc/selinux/config selinux=disabled 永久生效
iptables -F 清空iptables规则
service iptables save
编辑hosts文件，106和111全部为 vim /etc/hosts 添加
172.7.15.106 web9.aming.com
172.7.15.111 web10.aming.com
利用DNS服务器批量添加hosts
ping web9.aming.com
ping web10.aming.com
都安装ntpdate，并建立自动同步时间的任务计划
yum install -y ntp
cront -e
*/10 * * * * ntpdate time.windows.com >/dev/null 2>&1

puppet安装
lient host 都要装
安装RPM包
rpm -ivh "http://yum.puppetlabs.com/el/6/products/x86_64/puppetlabs-release-6-7.noarch.rpm"
查看是否生成yum源 ls /etc/yum.repos.d/
yum list
安装服务端程序
yum install -y puppet-server host
yum install -y puppet client
host加入服务列表
chkconfig puppetmaster on
service puppetmaster start
ps aux |grep puppet
查看ruby启动端口 8140

client修改配置文件
vim /etc/puppet/puppet.conf [agent]最后添加
listen = true
server = web9.aming.com
ruminterval = 30 //主动更新间隔
service puppet start
//etc/init.d/puppet restart 这是重启~
chkconfig puppet on
可能会查询不到端口 客户端在连接时启动。

puppet配置认证
host client 相互认证才能沟通
puppet cert list --all //列出所有的客户端 签名&未签名
puppet cert sign web10 签名注册
puppet cert sign web9.aming.com
列表时前面带+号则认证成功
puppet cert clean web10 host删除签名
puppet cert --clean all 清空证书
rm -rf /var/lib/puppet/ssl/* 客户端清除旧证书重启
/etc/init.d/puppet restart

puppet 配置自动签发证书
puppet cert --clean all host清空证书
rm -rf /var/lib/puppet/ssl/* client清除ssl相关文件
在host端创建自动签发配置文件
vim /etc/puppet/autosign.conf
*.aming.com 加入一个域vim /etc/puppet/puppet.conf
[main] 后加入一行
autosign = ture //支持自动签名
//etc/init.d/puppetmaster restart host重启
//etc/init.d/puppet restart

在client上
vim /etc/puppet/puppet.conf
[agent] 后加入一行
server = web9.aming.com
runinterval = 106
rm -rf /var/lib/puppet/ssl/*
/etc/init.d/puppe restart client重启
重启后即可得到签名
如果client不启动puppet服务，可通过命令签发
puppet agent --test --server web9.aming.com

测试证书
host 端编辑配置文件
vim /etc/puppet/manifests/site.pp
node default{
file{"/tmp/123.txt":
content =>"test,test"；
}}
如果不配置 客户端不会同步任何数据
host重启服务
puppet配置模块(一)
http://www.apelearn.com/bbs/thread-7730-1-1.html 自动化运维
puppet
http://www.apelearn.com/bbs/thread-9389-1-1.html

首先要理解几个概念，模块、类、资源。 模块是puppet的最大单元，模块里面有类，类下面有资源。 puppet管理的文件、用户、服务、任务计划等全部由这些单元组成。
puppet配置模块(二)
下面我们来定义一个模块：
在服务端上做如下操作：
mkdir /etc/puppet/modules/testm //模块名字就是testm
cd !$
mkdir {files,manifests,templates} //一个模块下需要有这三个目录，files存一些文件（可以为空），manifests存配置文件，templates存模板（可以留空）
touch manifests/init.pp //这个是必须的
vi manifests/init.pp //内容如下
class testm{
file {"/tmp/2.txt":
owner => "root",
group => "root",
mode => 0400,
source => "puppet://$puppetserver/modules/testm/1.txt"
}
}

说明：类名字也叫做testm, 类下面定义了一个资源file，文件名字叫做/tmp/2.txt ，owner，group，mode定义文件的属主、数组以及权限，source定义这个文件从哪里获取。 $puppetserver一会也要定义一下，这里指的是puppet server服务器上/etc/puppet/modules/testm/files/1.txt

下面要继续定义一个很关键的配置文件：
vim /etc/puppet/manifests/site.pp //内容如下
$puppetserver = 'master.aming.com'

node 'client.aming.com'{
include testm
}

说明：$puppetserver 定义服务端的主机名，node后面为客户端的主机名，这里面定义该客户端要加载的模块
配置完成后，在客户端执行命令：
puppet agent --test --server=master.aming.com //如果客户端上启动了puppet服务，不用执行这命令，它也会自动同步的
1.9 puppet文件或目录资源(1)

上面的模块其实只是同步了一个文件而已，那么要想同步一个目录如何做？我们可以通过实现同步一个目录来做一个包发布系统。 比如在一台机器上编译安装好了apache，那么就可以通过这样的模块把这个apache目录整个分发到其他机器上。

模块配置文件如下：
class apache{
file {"/usr/local/apache2":
owner => "root",
group => "root",
source => "puppet://$puppetserver/modules/apache/apache2",
recurse => true,
purge => true

}
}
其中recurse=>true 这个参数很关键，它表示递归的意思，没有这个不能同步目录。purge参数可以保证当服务端删除某个文件，客户端可以跟着删除。
2.0 puppet远程执行命令
远程执行命令：
exec {"123":
unless => "test -f /tmp/aminglinux.txt",
path => ["/bin", "/sbin", "/usr/bin", "/usr/sbin"],
command => "/bin/touch /tmp/aminglinux.txt"
}

说明：unless后面的命令作为一个条件，当条件成立时，不会执行下面的命令，如果想要条件成立时，执行下面的命令，用 onlyif。要注意的是，我们一定要给执行的这条命令加个条件，使用unless就可以，必须满足这个条件才能执行命令，否则这个命令会一直执行，不太妥当。
puppet配置croncron资源
cron {"aming1":
command => "/sbin/ntpdate time.windows.com",
user => "root",
minute => "*/10",
# ensure => "absent" //当增加了这行配置，则会把该cron删除掉
}
2.2 saltstack安装配置认证
http://www.apelearn.com/bbs/thread-9597-1-1.html
三种工作方式： 本地， c/s, 基于ssh（不用安装agent）
三大功能： 远程命令执行，配置管理（服务，文件，cron，用户，组），云管理
支持系统：大多数都支持，windows上不支持安装master

1. saltstack安装
前期准备：
准备两台机器，写hostname
172.7.15.106 server.aming.com
172.7.15.111 client.aming.com
server上：
yum install -y epel-release
yum install -y salt-master salt-minion
client上：
yum install -y epel-release
yum install -y salt-minion
启动
server上：
/etc/init.d/salt-master start
/etc/init.d/salt-minion start

client上：
vim /etc/salt/minion //指定server的ip
大概是16行,修改或增加
master: 172.7.15.106
id: client
说明，这个id虽然不定义也没有关系，如果不定义，那么master会以客户端的hostname来显示，一定定义了就按id定义的名字来显示了，这个id可以不和hostname一致，但定义了id后，也应该在/etc/hosts里面定义记录
/etc/init.d/salt-minion start
2. 认证
server上：
salt-key -a client.aming.com
此时我们在client的 /etc/salt/pki/minion 目录下面会多出一个minion_master.pub 文件
可以使用 salt-key 命令查看到已经签名的客户端
salt-key 可以使用-A签名所有主机，也可以使用-d删除指定主机的key

2.3 saltstack grains
远程执行
示例1： salt '*' test.ping 这里的*表示所以已经签名的客户端，也可以指定其中一个
示例2: salt '*' cmd.run 'df -h'

说明1： 这里的*必须是在master上已经被接受过的客户端，可以通过salt-key查到，通常是我们已经设定的id值。关于这部分内容，它支持通配、列表以及正则。 比如两台客户端 web10 web11， 那我们可以写成 salt 'web*' salt 'web1[02]' salt -L 'web10,web11' salt -E 'web(10|11) 等形式，使用列表，即多个机器用逗号分隔，而且需要加-L，使用正则必须要带-E选项。 它还支持grains，加-G选项，下面会介绍到。

3. 配置管理
server上：
vim /etc/salt/master //搜索找到 file_roots
打开如下内容的注释：
file_roots:
base:
- /srv/salt

mkdir /srv/salt
cd /srv/salt
vim /srv/salt/top.sls //加入如下内容
base:
'*':
- apache
意思是，在所有的客户端上执行 apache模块

vim /srv/salt/apache.sls //加入如下内容，这个就是apache模块的内容
apache-service:
pkg.installed:
- names:
- httpd
- httpd-devel
service.running:
- name: httpd
- enable: True

说明，该模块调用了pkg.installed 函数，下面是要安装的包的名字。service.running也是一个函数，来保证指定的服务启动，enable表示开机启动。
执行： salt 'client.aming.com' state.highstate

4. grains
grains是在minion启动时收集到的一些信息，比如操作系统类型、网卡ip等。 使用命令
salt 'client.aming.com' grains.ls 列出所有的grains项目名字
salt 'client.aming.com' grains.items 列出所有grains项目以及值
grains的信息并不是动态的，并不会时时变更，它只是在minion启动时收集到的。
grains可以做配置管理。

自定义grains
vim /etc/salt/minion
添加或更改：
grains:
role:
- nginx
env:
- test
或者
vim /etc/salt/grains
添加：
role: nginx
env: test
重启minion服务
获取grains：
salt '*' grains.item role env
salt 'client.aming.com' grains.get role
grains其实在远程执行命令时，很方便。我们可以按照grains的一些指标来操作。比如把所有的web服务器的grains的role设置为nginx，那这样我们就可以批量对nginx的服务器进行操作了：
salt -G role:nginx cmd.run 'hostname'
salt -G os:CentOS cmd.run 'hostname'
saltstack pillar
5. pillar
pillar和grains不一样，是在master上定义的，并且是针对minion定义的一些信息。像一些比较重要的数据（密码）可以存在pillar里，还可以定义变量等。
查看指定minion的pillar值（我测试的版本为空）：
salt 'client.aming.com' pillar.items
配置自定义pillar
vim /etc/salt/master
找到如下配置：
pillar_roots:
base:
- /srv/pillar
去掉前面的警号
mkdir /srv/pillar
vi /srv/pillar/test.sls //内容如下
conf: /etc/123.conf

vi /srv/pillar/top.sls //内容如下
base:
'client.aming.com':
- test
重启master
/etc/init.d/salt-master restart

当更改完pillar配置文件后，我们可以通过刷新pillar配置来获取新的pillar状态：
salt ‘*’ saltutil.refresh_pillar
验证：
salt '*' pillar.itme test
pillar同样可以用来作为salt的匹配对象。比如
salt -I 'conf:/etc/123.conf' test.ping
6. 深入salt配置
环境： base, dev(开发环境）, test（测试环境）, prod（生产环境）
vim /etc/salt/master
file_roots:
base:
- /srv/salt/
dev:
- /srv/salt/dev
test:
- /srv/salt/test
prod:
- /srv/salt/prod

mkdir /srv/salt/{dev,test,prod}

案例一：初始化配置
vim /srv/salt/top.sls //内容如下
base:
'*':
- init.dns
如果写成带一个点的形式，那么点前面是目录名字，后面是sls文件名字。
mkdir init
cd init
vim dns.sls //内容
/etc/resolve.conf:
file.managed:
- source: salt://init/files/resolv.conf //说明 salt://为当前环境（base）的主目录（/srv/salt/）下。
- user: root
- group: root
- mode: 644
mkdir /srv/salt/init/files //在此目录下放resolv.conf作为模板文件

运行： salt '*' state.highstate

案例二： 自动化部署lamp环境

三个模块：
pkg 安装软件包
file 管理配置文件
service 服务管理

思路： lamp需要安装的软件包有 httpd, php, mysql, mysql-server, php-mysql, php-pdo
预设：我们把这个lamp的安装项目放到dev环境下

cd /srv/salt/dev/
mkdir /srv/salt/dev/files/

vim lamp.sls //加入如下内容
lamp-pkg-install:
pkg.installed:
- names:
- php
- mysql
- php-cli
- php-common
- php-mysql
- mysql-server
- php-pdo

apache-service:
pkg.installed:
- name: httpd
file.managed:
- name: /etc/httpd/conf/httpd.conf
- source: salt://files/httpd.conf
- user: root
- group: root
- mode: 644
- require:
- pkg: apache-service
service.running:
- name: httpd
- enable: True
- reload: True
- watch:
- file: apache-service

mysql-service:
file.managed:
- name: /etc/my.cnf
- source: salt://files/my.cnf
- user: root
- group: root
- mode: 644
service.running:
- name: mysqld
- enable: True

vim /srv/salt/top.sls //加入如下内容
dev:
'client.aming.com':
- lamp

执行： salt '*' state.highstate

salt编译安装nginx http://blog.cunss.com/?p=272

7. 目录管理

file_dir:
file.recurse: //文件使用 file.managed
- name: /tmp/123
- source: salt://test/123
- user: root
- group: root
- file_mode: 644
- dir_mode: 755
- mkdir: True
- include_empty: True参考 http://www.0550go.com/automation ... k-file-recurse.html

8. 远程命令管理
cat /srv/salt/ex.sls
cmd_test:
cmd.run:
- names:
- touch /tmp/111.txt
- mkdir /tmp/1233
- user: root

cat /srv/salt/top.sls
base:
'*':
- ex

或者将所有的命令写道master的一个文件中，然后依次执行：

cat /srv/salt/test/exe.sls
cmd_test:
cmd.script:
- source: salt://test/1.sh
- user: root

cat /srv/salt/test/1.sh
#!/bin/bash
touch /tmp/111.txt
if [ -d /tmp/1233 ]
then
rm -rf /tmp/1233
fi

cat /srv/salt/top.sls
base:
'*':
- test.exe

执行命令时，可以使用条件onlyif或者unless，两者正好相反
cmd_test:
cmd.run:
- unless: test -d /tmp/1233
- name: mkdir /tmp/1233
- user: root

或者：
cmd_test:
cmd.run:
- name: touch /tmp/111.txt
- onlyif: test -f /tmp/111.txt

9. 任务计划
cron_test:
cron.present:
- name: /bin/touch /tmp/111.txt
- user: root
- minute: '*'
- hoinur: 20
- daymonth: '*'
- month: '*'
- dayweek: '*'

注意，*需要用单引号引起来。
当然我们还可以使用file.managed模块来管理cron，因为系统的cron都是以配置文件的形式存在的。
删除该cron：
cron.absent:
- name: /bin/touch /tmp/111.txt

两者不能共存，要想删除一个cron，那之前的present就得删除掉。

10. 一些可能会用到的命令
cp.get_file 拷贝master上的文件到客户端
salt '*' cp.get_file salt://test/1.txt /tmp/123.txt
cp.get_dir 拷贝目录
salt '*' cp.get_dir salt://test/conf /tmp/ //会自动在客户端创建conf目录，所以后面不要加conf，如果写成 /tmp/conf/ 则会在/tmp/conf/目录下又创建conf
salt-run manage.up 显示存活的minion
salt '*' cmd.script salt://test/1.sh 命令行下执行master上的shell脚本