OpenStack 的部署(一)环境配置
一、虚拟机资源分配
1.控制节点CT(c1、c2同样)
CPU:双核双线程-CPU虚拟化开启
内存:8G 硬盘:300G
双网卡:VM1-(局域网,仅主机模式) 和 NAT-(外网)
操作系统:Centos 7.6(版本1810及以上)-最小化安装
二、部署流程
1.配置操作系统+OpenStack运行环境
2.配置OpenStack平台基础服务(rabbitmq、mariadb、memcache、Apache)
3.配置OpenStack keystone组件
4.配置OpenStack Glance组件
5.配置placement服务
6.配置OpenStack Nova组件
7.配置OpenStack Neutron组件
8.配置OpenStack dashboard组件
9.配置OpenStack Cinder组件
10.常用云主机操作
三、地址分配(配置网卡信息)
主机名 | 内存 | 硬盘 | 网卡 | 系统 |
---|---|---|---|---|
CT | 8 | 300 | VM:192.168.100.20/NAT:192.168.190.20 | Centos7.6 |
C1 | 8 | 0 300 | VM:192.168.100.21/NAT:192.168.190.21 | Centos7.6 |
C2 | 8 | 300 | VM:192.168.100.22/NAT:192.190.22. | Centos7.6 |
vm:仅主机模式
nat:nat模式
1.修改网卡配置(eth0)nat模式网卡
在安装neutron模块时,需要绑定ethx(x是网卡编号,数字)的网卡,所以这里先设置
cd /etc/sysconfig/network-scripts/
vim /etc/sysconfig/network-scripts/ifcfg-eth0
BOOTPROTO=static
IPV4_ROUTE_METRIC=90 #调由优先级,NAT网卡优先
ONBOOT=yes
IPADDR=192.168.190.20 #c1,c2:192.168.190.21/192.168.190.22
NETMASK=255.255.255.0
GATEWAY=192.168.190.2
以c1为例截图
2.修改vm仅主机模式网卡(eth1)
vim ifcfg-eth1
BOOTPROTO=static
IPV4_ROUTE_METRIC=100 #默认值为100,这里为了保险可以设置一下
ONBOOT=yes
IPADDR=192.168.100.20
NETMASK=255.255.255.0
以c1为例截图
四、基础环境配置
配置项(所有节点):
(一)主机名
hostnamectl set-hostname ct # (ct.c1.c2分别更改)
su -
(二)防火墙、核心防护
systemctl stop firewalld
systemctl disable firewalld
#SELinux 主要作用:最大限度地减小系统中服务进程可访问的资源
#这里需要关闭SELinux
#临时关闭
setenforce 0
#永久关闭
vi /etc/sysconfig/selinux
SELINUX=disabled
(三)基础环境依赖包
vi /etc/resolv.conf
nameserver 114.114.114.114
yum -y install net-tools bash-completion vim gcc gcc-c++ make pcre pcre-devel expat-devel cmake bzip2 lrzsz
#------------------------#
net-tools ifconfig命令行工具
bash-completion 辅助自动补全工具
vim vim工具
gcc gcc-c++ 编译环境
make 编译器
pcre pcre-devel 是一个Perl库,包括 perl 兼容的正则表达式库
expat-devel Expat库,Expat是一个面向流的xml解析器
cmake CMake是一个跨平台的编译工具,CMkae目前主要使用场景是作为make的上层工具,产生可移植的makefile文件
lrzsz 可使用rz、sz命令上传、下载数据
EXPAT C语言发开库,//输入两遍//
yum -y install centos-release-openstack-train python-openstackclient openstack-selinux openstack-utils
#OpenStack 的 //train 版本//仓库源安装包,同时安装 OpenStack 客户端和 openstack-selinux 安装包
#------------------------#
centos-release-openstack-train train版本包
python-openstackclient 安装openstack客户端
openstack-selinux 安装selinux自动管理,这里selinux是关闭的
openstack-utils 方便后续直接可以通过命令行方式修改配置文件
(四)配置/etc/hosts映射文件
配置Hosts,映射地址为局域网ip
echo '192.168.100.20 ct' >> /etc/hosts
echo '192.168.100.21 c1' >> /etc/hosts
echo '192.168.100.22 c2' >> /etc/hosts
cat /etc/hosts
(五)免交互
三台节点做免交互
创建非对称密钥,上传公钥文件
ssh-keygen -t rsa
ssh-copy-id ct
ssh-copy-id c1
ssh-copy-id c2
(六)时间同步+周期性计划任务
ct ->同步阿里云时钟服务器
c1、c2 -> 同步ct
vi /etc/resolv.conf
nameserver 114.114.114.114
yum install chrony -y
CT VM:192.168.100.20 NAT:192.168.190.20
vim /etc/chrony.conf
#server 0.centos.pool.ntp.org iburst #注释掉
#server 1.centos.pool.ntp.org iburst #注释掉
#server 2.centos.pool.ntp.org iburst #注释掉
#server 3.centos.pool.ntp.org iburst #注释掉
server ntp6.aliyun.com iburst #配置阿里云时钟服务器源
allow 192.168.100.0/24 #允许192.168.100.0/24网段的主机来同步时钟服务
systemctl enable chronyd
systemctl restart chronyd
#使用 chronyc sources 时间同步
chronyc sources
C1 VM:192.168.100.21 NAT:192.168.163.21
C2 VM:192.168.100.22 NAT:192.168.163.22
vim /etc/chrony.conf
#server 0.centos.pool.ntp.org iburst #注释掉
#server 1.centos.pool.ntp.org iburst #注释掉
#server 2.centos.pool.ntp.org iburst #注释掉
#server 3.centos.pool.ntp.org iburst #注释掉
server ct iburst #配置阿里云时钟服务器源,同步指向控制节点ct
systemctl enable chronyd.service
systemctl restart chronyd.service
chronyc sources
计划任务
#配置计划任务,每隔2分钟同步一次
crontab -e
*/2 * * * * /usr/bin/chronyc sources >>/var/log/chronyc.log
#查看设置的周期性任务
crontab -l
五、系统环境配置
(一)安装、配置MariaDB
1.CT VM:192.168.100.20 NAT:192.168.190.20
ct节点安装
yum -y install mariadb mariadb-server python2-PyMySQL libibverbs
#---------模块解释---------------------------------
mariadb:是mysql的一个分支,是一款完全兼容mysql的开源软件
mariadb-server:数据库服务
python2-PyMySQL:用于openstack的控制端连接mysql所需要的模块,如果不安装,则无法连接数据库;此包只安装在控制端
libibverbs:远程直接内存访问
2.添加MySQL子配置文件,增加如下内容
vim /etc/my.cnf.d/openstack.cnf #新文件需要手动添加内容
[mysqld]
bind-address = 192.168.100.20
default-storage-engine = innodb
innodb_file_per_table = on
max_connections = 4096
collation-server = utf8_general_ci
character-set-server = utf8
#---------配置解释------------#
bind-address = 192.168.100.20 #控制节点本节点局域网地址
default-storage-engine = innodb #默认存储引擎
innodb_file_per_table = on #每张表独立表空间文件
max_connections = 4096 #最大连接数
collation-server = utf8_general_ci #服务器校对时不区分大小写
character-set-server = utf8 #默认字符集
systemctl enable mariadb
systemctl start mariadb
3.执行MariaDB 安全配置脚本
mysql_secure_installation
#---------输出内容-------------------------------------------
Enter current password for root (enter for none): #输入当前root密码,#直接回车
OK, successfully used password, moving on...
Set root password? [Y/n] Y #是否需要更改root密码,Y确认
New password: #输入密码
Re-enter new password: #再次输入密码
Password updated successfully!
Reloading privilege tables..
... Success!
Remove anonymous users? [Y/n] Y #是否移除其他用户,Y确认移除
... Success!
Disallow root login remotely? [Y/n] n #是否不允许root用户远程登陆,输入n,允许root用户远程登陆
... skipping.
Remove test database and access to it? [Y/n] Y #是否删除test测试库,Y确认删除
Reload privilege tables now? [Y/n] Y #是否刷新规则,Y确认刷新
(一)安装、配置RabbitMQ
CT VM:192.168.100.20 NAT:192.168.190.20
1.所有创建虚拟机的指令,控制端都会发送到rabbitmq,node节点监听rabbitmq
yum -y install rabbitmq-server
systemctl enable rabbitmq-server.service
systemctl start rabbitmq-server.service
2.创建消息队列用户,用于controler和 计算节点连接rabbitmq的认证(关联)
rabbitmqctl add_user openstack RABBIT_PASS #增加用户:openstack 密码:PABBIT_PASS
#---------------------#
Creating user "openstack"
3.配置openstack用户的操作权限(正则,配置读写权限)
rabbitmqctl set_permissions openstack ".*" ".*" ".*" #赋予openstack用户读写权限
#---------输出内容--------#
Setting permissions for user "openstack" in vhost "/"
#可查看25672和5672 两个端口(5672是Rabbitmq默认端口,25672是Rabbit的测试工具CLI的端口)
netstat -natp | grep 5672
4.查看rabbitmq插件列表
rabbitmq-plugins list
[root@ct network-scripts]# rabbitmq-plugins list
Configured: E = explicitly enabled; e = implicitly enabled
| Status: * = running on rabbit@ct
|/
[ ] amqp_client 3.6.16
[ ] cowboy 1.0.4
[ ] cowlib 1.0.2
[ ] rabbitmq_amqp1_0 3.6.16
[ ] rabbitmq_auth_backend_ldap 3.6.16
[ ] rabbitmq_auth_mechanism_ssl 3.6.16
[ ] rabbitmq_consistent_hash_exchange 3.6.16
[ ] rabbitmq_event_exchange 3.6.16
[ ] rabbitmq_federation 3.6.16
[ ] rabbitmq_federation_management 3.6.16
[ ] rabbitmq_jms_topic_exchange 3.6.16
[ ] rabbitmq_management 3.6.16
[ ] rabbitmq_management_agent 3.6.16
[ ] rabbitmq_management_visualiser 3.6.16
[ ] rabbitmq_mqtt 3.6.16
[ ] rabbitmq_random_exchange 3.6.16
[ ] rabbitmq_recent_history_exchange 3.6.16
[ ] rabbitmq_sharding 3.6.16
[ ] rabbitmq_shovel 3.6.16
[ ] rabbitmq_shovel_management 3.6.16
[ ] rabbitmq_stomp 3.6.16
[ ] rabbitmq_top 3.6.16
[ ] rabbitmq_tracing 3.6.16
[ ] rabbitmq_trust_store 3.6.16
[ ] rabbitmq_web_dispatch 3.6.16
[ ] rabbitmq_web_mqtt 3.6.16
[ ] rabbitmq_web_mqtt_examples 3.6.16
[ ] rabbitmq_web_stomp 3.6.16
[ ] rabbitmq_web_stomp_examples 3.6.16
[ ] sockjs 0.3.4
5.开启rabbitmq的web管理界面的插件,端口为15672
rabbitmq-plugins enable rabbitmq_managemen
[root@ct network-scripts]# rabbitmq-plugins enable rabbitmq_management
The following plugins have been enabled:
amqp_client
cowlib
cowboy
rabbitmq_web_dispatch
rabbitmq_management_agent
rabbitmq_management
Applying plugin configuration to rabbit@ct... started 6 plugins.
6.检查端口
(25672 5672 15672)
ss -natp | grep 5672 #ss相对与netstat过滤端口更快,特别相对于大量的socket连接时
[root@ct network-scripts]# ss -nautp | grep 5672
tcp LISTEN 0 128 *:25672 *:* users:(("beam.smp",pid=21381,fd=46))
tcp LISTEN 0 128 *:15672 *:* users:(("beam.smp",pid=21381,fd=57))
tcp LISTEN 0 128 :::5672 :::* users:(("beam.smp",pid=21381,fd=55))
流量器访问192.168.190.20:15672 账号密码:guest
六、安装memcached
作用:安装memcached是用于存储session信息;服务身份验证机制(keystone)使用Memcached来缓存令牌 在登录openstack的dashboard时,会产生一些session信息,这些session信息会存放到memcached中
ct VM:192.168.100.20 NAT:192.168.190.20
yum install -y memcached python-memcached
#python-*模块在OpenStack中起到连接数据库的作用
1.修改Memcached配置文件
vim /etc/sysconfig/memcached
PORT="11211" #memcached端口11211
USER="memcached" #用户memcached
MAXCONN="1024" #最大连接数1024
CACHESIZE="64" #字符集大小64位
OPTIONS="-l 127.0.0.1,::1,ct" #监听地址,127.0.0.1:本地地址,::是ipv6地址,ct是本地VMnet1地址,因为做了地址映射文件可以直接ct
systemctl enable memcached
systemctl start memcached
netstat -nautp | grep 11211
七、安装etcd
etcd是一个分布式可靠的键值存储数据库,去中心化的数据库服务。
ct控制节点安装
yum -y install etcd
#修改etcd配置文件
vim /etc/etcd/etcd.conf
ETCD_DATA_DIR="/var/lib/etcd/default.etcd"
ETCD_LISTEN_PEER_URLS="http://192.168.100.20:2380"
ETCD_LISTEN_CLIENT_URLS="http://192.168.100.20:2379"
ETCD_NAME="ct"
ETCD_INITIAL_ADVERTISE_PEER_URLS="http://192.168.100.20:2380"
ETCD_ADVERTISE_CLIENT_URLS="http://192.168.100.20:2379"
ETCD_INITIAL_CLUSTER="ct=http://192.168.100.20:2380"
ETCD_INITIAL_CLUSTER_TOKEN="etcd-cluster-01"
ETCD_INITIAL_CLUSTER_STATE="new"
%s/localhost/192.168.100.20/ #全局替换
-----Member-----
ETCD_DATA_DIR="/var/lib/etcd/default.etcd" #数据目录位置
ETCD_LISTEN_PEER_URLS="http://192.168.100.20:2380" #监听其他etcd member的url(2380端口,集群之间通讯,域名为无效值)
ETCD_LISTEN_CLIENT_URLS="http://192.168.100.20:2379" #对外提供服务的地址(2379端口,集群内部的通讯端口)
ETCD_NAME="ct" #集群中节点标识(名称)
----
ETCD_INITIAL_ADVERTISE_PEER_URLS="http://192.168.100.20:2380" #该节点成员的URL地址,其他member通过该地址与本member交互信息,2380端口:用于集群之间通讯。
ETCD_ADVERTISE_CLIENT_URLS="http://192.168.100.20:2379" #标识集群的url
ETCD_INITIAL_CLUSTER="ct=http://192.168.100.20:2380" #集群中本节点
ETCD_INITIAL_CLUSTER_TOKEN="etcd-cluster-01" #token令牌,集群唯一标识
ETCD_INITIAL_CLUSTER_STATE="new"
#初始集群状态,new为静态,
#若为existing,则表示此ETCD服务将尝试加入已有的集群
#若为DNS,则表示此集群将作为被加入的对象
systemctl enable etcd.service
systemctl start etcd.service
netstat -anutp |grep 2379
netstat -anutp |grep 2380
八、c1、c2安装OpenStack组件
yum -y install centos-release-openstack-train python-openstackclient openstack-selinux openstack-utils