saltstack cp实现配置代码文件的管理拉取和回滚下发

前沿:

      前段时间搞了集群配置系统,正在搞配置文件的备份,中心点上传,文件hash记录,配置文件的下发回滚。 这里要用到saltstack cp模块,来实现对 master minion文件的传输及管理。

       这里说下,我主要的实现方式,文件备份是通过自写的模块备份,然后调用cp.push来拉取到master备份。下发回滚的话,用的额是get_file的方式,从master拖过去。   其实saltstack本身就含有文件的备份,但是为了多方面着想,多写了一个逻辑,存放到master点。

       这里提一句,有朋友可能会纳闷,jinja2渲染好的配置文件为啥不直接sls的模式,而用get_url的模式。  个人觉得,如果是初始化配置,sls很是方便,但是对于经常有变动的服务,反而通过mongodb记录数据,然后web api接口渲染配置文件来的更方便。

(备份回滚思路,有兴趣的朋友可以参考下)


说的有点乱,具体的自己看文档 !

get_file


cp.get_file用来从master下载文件到客户端,可以外加几个参数,比如没有文件夹,创建文件夹的makedirs=True ,压缩的gzip参数。  

语法如下:

salt '*' cp.get_file salt://rr /etc/rr

get_url

cp.get_url可以从一个URL地址下载文件,URL可以是msater上的路径(salt://),也可以是http网址。

salt '*' cp.get_url salt://my/file /tmp/mine
salt '*' cp.get_url http://xiaorui.cc/good.txt  /tmp/good.txt

个人觉得 get_template 没啥用处,用他还不如sls的推送。

通过saltstack cp 实现配置文件的下发 !

[root@ruifengyun _modules ]cd /srv
[root@ruifengyun /srv ] ll
s总用量 4
drwxr-xr-x 4 root root 4096  2月 13 17:01 salt
[root@ruifengyun /srv ]cd salt
[root@ruifengyun salt ] ll
总用量 12
drwxr-xr-x 2 root root 4096  2月 13 16:59 _grains
drwxr-xr-x 2 root root 4096  2月 19 10:20 _modules
-rw-r--r-- 1 root root   61  2月 13 16:59 top.sls
[root@ruifengyun salt ]mkdir backup
[root@ruifengyun salt ] cd backup
[root@ruifengyun backup ]ll
总用量 0
[root@ruifengyun backup ] touch 111
[root@ruifengyun backup ]echo 111 >1
[root@ruifengyun backup ] cat 1
111
[root@ruifengyun backup ][root@ruifengyun backup ]
[root@ruifengyun backup ]salt 'lvs150.xiaorui.cc' cp.get_file salt://backup/1 /root/1
lvs150.xiaorui.cc:
    /root/1
[root@ruifengyun backup ]                                                     
[root@ruifengyun backup ][root@ruifengyun backup ] salt 'lvs150.xiaorui.cc' cp.get_url http://10.58.101.248/api/wgetconf\?masterip\=10.2.20.111\&typemode\=reallist /root/keeprealist
lvs150.xiaorui.cc:
    /root/keeprealist
[root@ruifengyun backup ][root@ruifengyun backup ] salt 'lvs150.xiaorui.cc' cmd.run "head /root/keeprealist"                                                                 
lvs150.xiaorui.cc:                                                                                                
            virtual_server 10.2.20.11 80 {
                             
                                delay_loop 6
                                lb_algo    wlc
                                lb_kind    DR
                                persistence_timeout  0
[root@ruifengyun backup ][root@ruifengyun backup ]



这里是saltstack master端从minion拉取文件!


有兴趣的朋友可以改cp.push的源码,也就那几行。

原文:http://xiaorui.cc

[root@ruifengyun backup ]$ vim /usr/lib/python2.7/dist-packages/salt/modules/cp.py

我这里为了获取的方便,用basename来获取他的文件名。
def push(path):
    '''
    Push a file from the minion up to the master, the file will be saved to
    the salt master in the master's minion files cachedir
    (defaults to /var/cache/salt/master/minions/files)
    Since this feature allows a minion to push a file up to the master server
    it is disabled by default for security purposes. To enable add the option:
    file_recv: True
    to the master configuration and restart the master
    CLI Example::
        salt '*' cp.push /etc/fstab
    '''
    path=os.path.basename(path)
    if '../' in path or not os.path.isabs(path):
        return False
    if not os.path.isfile(path):
        return False
    auth = _auth()
    load = {'cmd': '_file_recv',
            'id': __opts__['id'],
            'path': path.lstrip(os.sep)}
    sreq = salt.payload.SREQ(__opts__['master_uri'])
    with salt.utils.fopen(path) as fp_:
        while True:
            load['loc'] = fp_.tell()
            load['data'] = fp_.read(__opts__['file_buffer_size'])
            if not load['data']:
                return True
            ret = sreq.send('aes', auth.crypticle.dumps(load))
            if not ret:
                return ret

关于saltstack cp模块就介绍到这里了!   我给大家演示的时候用的是cli,大家在运维平台上可以使用api调用cp相关的模块。


大家觉得文章对你有些作用! 如果想赏钱,可以用微信扫描下面的二维码,感谢!
另外再次标注博客原地址  xiaorui.cc

2 Responses

  1. 小李 2016年9月9日 / 下午6:15

    小瑞,请教个问题,salt sdk api有增量复制目录的模块吗?

  2. 等待错过的下一站路口 2014年12月30日 / 下午3:49

    请教 , 使用states文件该如何去写呢? 暂时没有发现对应states模块现在很搓的方案 , 将cp.push封装在脚本中 , 将脚本下发执行脚本 , 脚本调用cp.push上传文件

发表评论

邮箱地址不会被公开。 必填项已用*标注