SaltStack数据系统

最新推荐文章于 2022-04-23 18:56:26 发布

书在哪

最新推荐文章于 2022-04-23 18:56:26 发布

阅读量120

点赞数

本文链接：https://blog.youkuaiyun.com/dieyo/article/details/118503250

版权

本文介绍了SaltStack的两大数据系统——Grains和Pillar。Grains是 minion 启动时收集的静态信息，如硬件、网络和系统配置等，用于信息查询、目标匹配等场景。Pillar则作为数据管理中心，存储配置管理所需数据，如软件版本、密码等，其特点是数据安全性高且可按需分配给指定minion。通过示例展示了如何使用Grains查询和自定义数据，以及Pillar的配置和数据管理。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

SaltStack数据系统

SaltStack有两大数据系统，分别是：

Grains
Pillar

SaltStack数据系统组件

SaltStack组件之Grains

Grains是SaltStack的一个组件，其存放着minion启动时收集到的信息。

Grains是SaltStack组件中非常重要的组件之一，因为我们在做配置部署的过程中会经常使用它，Grains是SaltStack记录minion的一些静态信息的组件。可简单理解为Grains记录着每台minion的一些常用属性，比如CPU、内存、磁盘、网络信息等。我们可以通过grains.items查看某台minion的所有Grains信息。

Grains的功能：

收集资产信息

Grains应用场景：

信息查询
在命令行下进行目标匹配
在top file中进行目标匹配
在模板中进行目标匹配

模板中进行目标匹配请看：https://docs.saltstack.com/en/latest/topics/pillar/

信息查询实例：

//列出所有grans的key和value。。
[root@master base]# salt 'minion' grains.items
minion:
    ----------
    SSDs:
    biosreleasedate:
        02/27/2020
    biosversion:
        6.00
    cpu_flags:
        - fpu
        - vme
        - de
        - pse
        - tsc
        - msr
        - pae
        - mce
        - cx8
        - apic
        - sep
        - mtrr
        - pge
        - mca
        - cmov
        - pat
        - pse36
        - clflush
        - mmx
        - fxsr
        - sse
        - sse2
        - ss
        - ht
        - syscall
        - nx
        - pdpe1gb
        - rdtscp
        - lm
        - constant_tsc
        - arch_perfmon
        - nopl
        - xtopology
        - tsc_reliable
        - nonstop_tsc
        - cpuid
        - pni
        - pclmulqdq
        - ssse3
        - fma
        - cx16
        - pcid
        - sse4_1
        - sse4_2
        - x2apic
        - movbe
        - popcnt
        - tsc_deadline_timer
        - aes
        - xsave
        - avx
        - f16c
        - rdrand
        - hypervisor
        - lahf_lm
        - abm
        - 3dnowprefetch
        - cpuid_fault
        - invpcid_single
        - ssbd
        - ibrs
        - ibpb
        - stibp
        - ibrs_enhanced
        - fsgsbase
        - tsc_adjust
        - bmi1
        - avx2
        - smep
        - bmi2
        - invpcid
        - rdseed
        - adx
        - smap
        - clflushopt
        - xsaveopt
        - xsavec
        - xsaves
        - arat
        - md_clear
        - flush_l1d
        - arch_capabilities
    cpu_model:
        Intel(R) Core(TM) i7-10510U CPU @ 1.80GHz
    cpuarch:
        x86_64
    cwd:
        /
    disks:
        - dm-1
        - sr0
        - dm-0
        - sda
    dns:
        ----------
        domain:
        ip4_nameservers:
            - 192.168.31.2
        ip6_nameservers:
        nameservers:
            - 192.168.31.2
        options:
        search:
            - localdomain
        sortlist:
    domain:
    fqdn:
        minion
    fqdn_ip4:
        - 192.168.31.139
    fqdn_ip6:
        - fe80::ad88:29b1:d3a:3039
    fqdns:
    gid:
        0
    gpus:
        |_
          ----------
          model:
              SVGA II Adapter
          vendor:
              vmware
    groupname:
        root
    host:
        minion
    hwaddr_interfaces:
        ----------
        ens33:
            00:0c:29:ad:28:07
        lo:
            00:00:00:00:00:00
    id:
        minion
    init:
        systemd
    ip4_gw:
        192.168.31.2
    ip4_interfaces:
        ----------
        ens33:
            - 192.168.31.139
        lo:
            - 127.0.0.1
    ip6_gw:
        False
    ip6_interfaces:
        ----------
        ens33:
            - fe80::ad88:29b1:d3a:3039
        lo:
            - ::1
    ip_gw:
        True
    ip_interfaces:
        ----------
        ens33:
            - 192.168.31.139
            - fe80::ad88:29b1:d3a:3039
        lo:
            - 127.0.0.1
            - ::1
    ipv4:
        - 127.0.0.1
        - 192.168.31.139
    ipv6:
        - ::1
        - fe80::ad88:29b1:d3a:3039
    kernel:
        Linux
    kernelrelease:
        4.18.0-257.el8.x86_64
    kernelversion:
        #1 SMP Thu Dec 3 22:16:23 UTC 2020
    locale_info:
        ----------
        defaultencoding:
            UTF-8
        defaultlanguage:
            zh_CN
        detectedencoding:
            UTF-8
        timezone:
            EDT
    localhost:
        minion
    lsb_distrib_codename:
        CentOS Stream 8
    lsb_distrib_id:
        CentOS Stream
    lsb_distrib_release:
        8
    machine_id:
        50697133b32f478cb99da1abcfb5dbfd
    manufacturer:
        VMware, Inc.
    master:
        192.168.31.140
    mdadm:
    mem_total:
        1789
    nodename:
        minion
    num_cpus:
        2
    num_gpus:
        1
    os:
        CentOS Stream
    os_family:
        CentOS Stream
    osarch:
        x86_64
    oscodename:
        CentOS Stream 8
    osfinger:
        CentOS Stream-8
    osfullname:
        CentOS Stream
    osmajorrelease:
        8
    osrelease:
        8
    osrelease_info:
        - 8
    path:
        /usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin
    pid:
        8200
    productname:
        VMware Virtual Platform
    ps:
        ps -efHww
    pythonexecutable:
        /usr/bin/python3.6
    pythonpath:
        - /usr/bin
        - /usr/lib64/python36.zip
        - /usr/lib64/python3.6
        - /usr/lib64/python3.6/lib-dynload
        - /usr/lib64/python3.6/site-packages
        - /usr/lib/python3.6/site-packages
    pythonversion:
        - 3
        - 6
        - 8
        - final
        - 0
    saltpath:
        /usr/lib/python3.6/site-packages/salt
    saltversion:
        3000.9
    saltversioninfo:
        - 3000
        - 9
    selinux:
        ----------
        enabled:
            True
        enforced:
            Permissive
    serialnumber:
        VMware-56 4d bf 5e b1 d6 90 28-38 02 22 ae a1 ad 28 07
    server_id:
        582631147
    shell:
        /bin/sh
    swap_total:
        2047
    systemd:
        ----------
        features:
            +PAM +AUDIT +SELINUX +IMA -APPARMOR +SMACK +SYSVINIT +UTMP +LIBCRYPTSETUP +GCRYPT +GNUTLS +ACL +XZ +LZ4 +SECCOMP +BLKID +ELFUTILS +KMOD +IDN2 -IDN +PCRE2 default-hierarchy=legacy
        version:
            239
    uid:
        0
    username:
        root
    uuid:
        5ebf4d56-d6b1-2890-3802-22aea1ad2807
    virtual:
        VMware
    zfs_feature_flags:
        False
    zfs_support:
        False
    zmqversion:
        4.3.1

//只查询所有的grains的key

[root@master base]# salt 'minion' grains.ls
minion:
    - SSDs
    - biosreleasedate
    - biosversion
    - cpu_flags
    - cpu_model
    - cpuarch
    - cwd
    - disks
    - dns
    - domain
    - fqdn
    - fqdn_ip4
    - fqdn_ip6
    - fqdns
    - gid
    - gpus
    - groupname
    - host
    - hwaddr_interfaces
    - id
    - init
    - ip4_gw
    - ip4_interfaces
    - ip6_gw
    - ip6_interfaces
    - ip_gw
    - ip_interfaces
    - ipv4
    - ipv6
    - kernel
    - kernelrelease
    - kernelversion
    - locale_info
    - localhost
    - lsb_distrib_codename
    - lsb_distrib_id
    - lsb_distrib_release
    - machine_id
    - manufacturer
    - master
    - mdadm
    - mem_total
    - nodename
    - num_cpus
    - num_gpus
    - os
    - os_family
    - osarch
    - oscodename
    - osfinger
    - osfullname
    - osmajorrelease
    - osrelease
    - osrelease_info
    - path
    - pid
    - productname
    - ps
    - pythonexecutable
    - pythonpath
    - pythonversion
    - saltpath
    - saltversion
    - saltversioninfo
    - selinux
    - serialnumber
    - server_id
    - shell
    - swap_total
    - systemd
    - uid
    - username
    - uuid
    - virtual
    - zfs_feature_flags
    - zfs_support
    - zmqversion
[root@master base]#

//查询某个key的值，比如想获取ip地址

[root@master base]# salt '*' grains.get fqdn_ip4
master:
    - 192.168.31.140
minion:
    - 192.168.31.139
[root@master base]# salt '*' grains.get ip4_interfaces
master:
    ----------
    ens33:
        - 192.168.31.140
    lo:
        - 127.0.0.1
minion:
    ----------
    ens33:
        - 192.168.31.139
    lo:
        - 127.0.0.1
[root@master base]# salt '*' grains.get ip4_interfaces:ens33
master:
    - 192.168.31.140
minion:
    - 192.168.31.139

目标匹配实例：
用Grains来匹配minion：

[root@master base]# salt -G 'os:CentOS Stream' cmd.run 'uptime'
minion:
     13:18:34 up  1:08,  2 users,  load average: 0.00, 0.00, 0.00
master:
     13:18:34 up 18 min,  2 users,  load average: 0.13, 0.17, 0.20

在top file里面使用Grains：

[root@master ~]# vim /srv/salt/base/top.sls
base:
  'os:CentOS Stream':
    - match: grain
    - web.nginx.install

  'os:Ubuntu':
    - match: grain
    - web.nginx.install

自定义Grains的两种方法：

minion配置文件，在配置文件中搜索grains
在/etc/salt下生成一个grains文件，在此文件中定义
一般使用第二种方法因为这样方便管理minion文件

[root@master base]# vim /etc/salt/grains
[root@master base]# cat /etc/salt/grains
test-grains: minion

[root@master base]# salt 'master' grains.get test-grains
master:
    minion

不重启的情况下自定义grains：

[root@master base]# vim /etc/salt/grains
[root@master base]# cat  /etc/salt/grains
test-grains: minion
aabb: test
[root@master base]# salt '*' saltutil.sync_grains
minion:
master:
ERROR: Minions returned with non-zero exit code
[root@master base]# salt '*' grains.get aabb
master:
    test
minion:

SaltStack组件之Pillar

Pillar也是SaltStack组件中非常重要的组件之一，是数据管理中心，经常配置states在大规模的配置管理工作中使用它。Pillar在SaltStack中主要的作用就是存储和定义配置管理中需要的一些数据，比如软件版本号、用户名密码等信息，它的定义存储格式与Grains类似，都是YAML格式。

在Master配置文件中有一段Pillar settings选项专门定义Pillar相关的一些参数：

要用的话取消注释

pillar_roots:
base:
- /srv/pillar

默认Base环境下Pillar的工作目录在/srv/pillar目录下。若你想定义多个环境不同的Pillar工作目录，只需要修改此处配置文件即可。

Pillar的特点：

可以给指定的minion定义它需要的数据
只有指定的人才能看到定义的数据
在master配置文件里设置

    [root@master ~]# salt '*' pillar.items
    minion1:
        ----------
    master:
        ----------

默认pillar是没有任何信息的，如果想查看信息，需要在 master 配置文件上把 pillar_opts的注释取消，并将其值设为 True。

[root@master ~]# cat /etc/salt/master
pillar_opts: True
[root@master ~]# systemctl restart salt-master
··············上面还有好多行的
        winrepo_passphrase:
        winrepo_password:
        winrepo_privkey:
        winrepo_pubkey:
        winrepo_refspecs:
            - +refs/heads/*:refs/remotes/origin/*
            - +refs/tags/*:refs/tags/*
        winrepo_remotes:
            - https://github.com/saltstack/salt-winrepo.git
        winrepo_remotes_ng:
            - https://github.com/saltstack/salt-winrepo-ng.git
        winrepo_ssl_verify:
            True
        winrepo_user:
        worker_threads:
            5
        zmq_backlog:
            1000
        zmq_filtering:
            False
        zmq_monitor:
            False

pillar自定义数据：
在master的配置文件里找pillar_roots可以看到其存放pillar的位置

[root@master ~]# vim /etc/salt/master //取消注释
pillar_roots:
  base:
    - /srv/pillar/base
[root@master ~]# mkdir -p /srv/pillar/base
[root@master ~]# systemctl restart salt-master
[root@master ~]# vim /srv/pillar/base/apache.sls
{% if grains['os'] == 'CentOS Stream' %}
apache: httpd
{% elif grains['os'] == 'Ubuntu' %}
apache: apache2
{% endif %}
#定义top file入口文件
[root@master ~]# vim /srv/pillar/base/top.sls
base:                 //指定环境
  'minion':                //指定目标
    - apache          //引用apache.sls文件
这个top.sls文件的意思表示的是mimion这台主机的base环境能够访问到apache这个pillar
[root@master ~]# salt '*' pillar.items
minion:
    ----------
    apache:
        httpd


//在salt下修改apache的状态文件，引用pillar的数据
#配置ubuntu系统
czh@czh-virtual-machine:~$ sudo apt-get install curl
正在读取软件包列表... 完成

tom@tom-virtual-machine:~$ sudo curl -fsSL -o /usr/share/keyrings/salt-archive-keyring.gpg https://repo.saltproject.io/py3/ubuntu/20.04/amd64/latest/salt-archive-keyring.gpg

tom@tom-virtual-machine:~$ echo "deb [signed-by=/usr/share/keyrings/salt-archive-keyring.gpg] https://repo.saltproject.io/py3/ubuntu/20.04/amd64/latest focal main" | sudo tee /etc/apt/sources.list.d/salt.list

tom@tom-virtual-machine:~$ sudo apt-get update

tom@tom-virtual-machine:~$ sudo apt-get install salt-minion
tom@tom-virtual-machine:~$ sudo vim /etc/salt/minion
master: 192.168.10.11
tom@tom-virtual-machine:~$ sudo systemctl restart salt-minion

[root@master ~]# salt-key -L
Accepted Keys:
master
minion
Denied Keys:
Unaccepted Keys:
czh-virtual-machine
Rejected Keys:
[root@master ~]# salt-key -L
Accepted Keys:
czh-virtual-machine
master
minion
Denied Keys:
Unaccepted Keys:
Rejected Keys:
#执行改机状态文件
[root@master ~]# salt 'czh-virtual-machine' state.highstate
czh-virtual-machine:
----------
          ID: nginx-install
    Function: pkg.installed
        Name: nginx
      Result: True
     Comment: The following packages were installed/updated: nginx
     Started: 11:59:29.632336
    Duration: 31734.892 ms
     Changes:   
              ----------
              libnginx-mod-http-image-filter:
                  ----------
                  new:
                      1.18.0-0ubuntu1.2
                  old:
              libnginx-mod-http-xslt-filter:
                  ----------
                  new:
                      1.18.0-0ubuntu1.2
                  old:
              libnginx-mod-mail:
                  ----------
                  new:
                      1.18.0-0ubuntu1.2
                  old:
              libnginx-mod-stream:
                  ----------
                  new:
                      1.18.0-0ubuntu1.2
                  old:
              nginx:
                  ----------
                  new:
                      1.18.0-0ubuntu1.2
                  old:
              nginx-common:
                  ----------
                  new:
                      1.18.0-0ubuntu1.2
                  old:
              nginx-core:
                  ----------
                  new:
                      1.18.0-0ubuntu1.2
                  old:
----------
          ID: nginx-sevice
    Function: service.running
        Name: nginx
      Result: True
     Comment: The service nginx is already running
     Started: 12:00:01.384897
    Duration: 31.48 ms
     Changes:   

Summary for czh-virtual-machine
------------
Succeeded: 2 (changed=1)
Failed:    0
------------
Total states run:     2
Total run time:  31.766 s

但还是会报错。
在这里插入图片描述
所以后面的状态啥的都没有，所以看不到。

[root@master ~]# systemctl status httpd
Unit httpd.service could not be found.
czh@czh-virtual-machine:~$ sudo systemctl status apache2
Unit apache2.service could not be found.
但好像有80端口。
czh@czh-virtual-machine:~$ ss -antl
State   Recv-Q   Send-Q     Local Address:Port     Peer Address:Port  Process  
LISTEN  0        511              0.0.0.0:80            0.0.0.0:*              
LISTEN  0        4096       127.0.0.53%lo:53            0.0.0.0:*              
LISTEN  0        5              127.0.0.1:631           0.0.0.0:*              
LISTEN  0        511                 [::]:80               [::]:*              
LISTEN  0        5                  [::1]:631              [::]:*