openstack （4）---部署Glance镜像服务，Nova计算服务

一、Glance

　　Glance是Openstack项目中负责镜像管理的模块，其功能包括虚拟机镜像的查找、注册和检索等。 Glance提供Restful API可以查询虚拟机镜像的metadata及获取镜像。 Glance可以将镜像保存到多种后端存储上，比如简单的文件存储或者对象存储。

glance 架构图

glance-api

glance-api 是系统后台运行的服务进程。对外提供 REST API，响应 image 查询、获取和存储的调用。

glance-api 不会真正处理请求。如果操作是与 image metadata（元数据）相关，glance-api 会把请求转发给 glance-registry；如果操作是与 image 自身存取相关，glance-api 会把请求转发给该 image 的 store backend。

glance-registry

glance-registry 是系统后台运行的服务进程。负责处理和存取 image 的 metadata

Glance 支持多种格式的 image，包括

二、Nova

　　Nova 是 OpenStack 最核心的服务，负责维护和管理云环境的计算资源。OpenStack 作为 IaaS 的云操作系统，虚拟机生命周期管理也就是通过 Nova 来实现的。

用途与功能 :

1、实例生命周期管理

2、管理计算资源

3、网络和认证管理

4、REST 风格的 API

5、异步的一致性通信

6、Hypervisor 透明：支持Xen,XenServer/XCP,KVM, UML, VMware vSphere and Hyper-V

Nova 架构

nova创建虚拟机详细过程

1、界面或命令行通过RESTful API向keystone获取认证信息。

2、keystone通过用户请求认证信息，并生成auth-token返回给对应的认证请求。

3、界面或命令行通过RESTful API向nova-api发送一个boot instance的请求（携带auth-token）。

4、nova-api接受请求后向keystone发送认证请求，查看token是否为有效用户和token。

5、keystone验证token是否有效，如有效则返回有效的认证和对应的角色（注：有些操作需要有角色权限才能操作）。

6、通过认证后nova-api和数据库通讯。

7、初始化新建虚拟机的数据库记录。

8、nova-api通过rpc.call向nova-scheduler请求是否有创建虚拟机的资源(Host ID)。

9、nova-scheduler进程侦听消息队列，获取nova-api的请求。

10、nova-scheduler通过查询nova数据库中计算资源的情况，并通过调度算法计算符合虚拟机创建需要的主机。

11、对于有符合虚拟机创建的主机，nova-scheduler更新数据库中虚拟机对应的物理主机信息。

12、nova-scheduler通过rpc.cast向nova-compute发送对应的创建虚拟机请求的消息。

13、nova-compute会从对应的消息队列中获取创建虚拟机请求的消息。

14、nova-compute通过rpc.call向nova-conductor请求获取虚拟机消息。（Flavor）

15、nova-conductor从消息队队列中拿到nova-compute请求消息。

16、nova-conductor根据消息查询虚拟机对应的信息。

17、nova-conductor从数据库中获得虚拟机对应信息。

18、nova-conductor把虚拟机信息通过消息的方式发送到消息队列中。

19、nova-compute从对应的消息队列中获取虚拟机信息消息。

20、nova-compute通过keystone的RESTfull API拿到认证的token，并通过HTTP请求glance-api获取创建虚拟机所需要镜像。

21、glance-api向keystone认证token是否有效，并返回验证结果。

22、token验证通过，nova-compute获得虚拟机镜像信息(URL)。

23、nova-compute通过keystone的RESTfull API拿到认证k的token，并通过HTTP请求neutron-server获取创建虚拟机所需要的网络信息。

24、neutron-server向keystone认证token是否有效，并返回验证结果。

25、token验证通过，nova-compute获得虚拟机网络信息。

26、nova-compute通过keystone的RESTfull API拿到认证的token，并通过HTTP请求cinder-api获取创建虚拟机所需要的持久化存储信息。

27、cinder-api向keystone认证token是否有效，并返回验证结果。

28、token验证通过，nova-compute获得虚拟机持久化存储信息。

29、nova-compute根据instance的信息调用配置的虚拟化驱动来创建虚拟机。

三、环境准备

1、三台机器：主机名：lichaohost1 （控制节点）集群网ip：192.168.206.137 租户网ip: 192.168.206.142 外网ip：192.168.206.143

主机名：lichaohost2 (计算节点）集群网ip：192.168.206.138 租户网ip: 192.168.206.144

主机名：lichaohost3 (储存节点) 集群网ip ：192.168.206.139

2、控制节点端三块网卡:

ens33: 集群网（组件相互通信）

ens37:租户网（实例相互通信）

ens38:外网

3、计算节点两块网卡

ens33:集群网

ens37:租户网

4、储存节点一块网卡

ens33:集群网

5、每台机器最少4G内存

6、静态域名解析

7、免密登录

openstacke ocata版官方网站：https://docs.openstack.org/ocata/index.html

四、搭建glance服务

注：此配置将映像存储在本地文件系统中。

1、控制节点：创建数据库

&1 登录数据库并创建数据库

mysql -u root -p

CREATE DATABASE glance;

&2 授予对glance数据库的正确访问权

GRANT ALL PRIVILEGES ON glance.* TO 'glance'@'localhost'  IDENTIFIED BY 'GLANCE_DBPASS';

GRANT ALL PRIVILEGES ON glance.* TO 'glance'@'%'   IDENTIFIED BY 'GLANCE_DBPASS';

2、控制节点：宣告环境变量

. openrc  或者    source openrc

3、控制节点：添加glance 用户

openstack user create --domain default --password=glance glance

4、控制节点：将admin角色添加到server项目的glance用户中

openstack role add --project service --user glance admin

5、控制节点：创建glance服务实体

openstack service create --name glance    --description "OpenStack Image" image

6、控制节点：创建服务API端点

 openstack endpoint create --region RegionOne  image public http://lichaohost1:9292

 openstack endpoint create --region RegionOne   image internal http://lichaohost1:9292

openstack endpoint create --region RegionOne     image admin http://lichaohost1:9292

#4 查看服务端点

openstack  endpoint  list

7、控制节点：安装glance服务

yum install openstack-glance -y

8、控制节点：编辑/etc/glance/glance-api.conf文件

# 备份

# 编辑如下

[DEFAULT]

[cors]

[cors.subdomain]

[database]

connection = mysql+pymysql://glance:GLANCE_DBPASS@lichaohost1/glance

[glance_store]

stores = file,http

default_store = file

filesystem_store_datadir = /var/lib/glance/images/ 

[image_format]

[keystone_authtoken]

auth_uri = http://lichaohost1:5000

auth_url = http://lichaohost1:35357

memcached_servers = lichaohost1:

auth_type = password

project_domain_name = default

user_domain_name = default

project_name = service

username = glance

password = glance

[matchmaker_redis]

[oslo_concurrency]

[oslo_messaging_amqp]

[oslo_messaging_kafka]

[oslo_messaging_notifications]

[oslo_messaging_rabbit]

[oslo_messaging_zmq]

[oslo_middleware]

[oslo_policy]

[paste_deploy]

flavor = keystone

[profiler]

[store_type_location_strategy]

[task]

[taskflow_executor]

9、控制节点：编辑 /etc/glance/glance-registry.conf

#备份

#编辑如下

[DEFAULT]

[database]

connection = mysql+pymysql://glance:GLANCE_DBPASS@lichaohost1/glance

[keystone_authtoken]

auth_uri = http://lichaohost1:5000

auth_url = http://lichaohost1:35357

memcached_servers = lichaohost1:

auth_type = password

project_domain_name = default

user_domain_name = default

project_name = service

username = glance

password = glance

[matchmaker_redis]

[oslo_messaging_amqp]

[oslo_messaging_kafka]

[oslo_messaging_notifications]

[oslo_messaging_rabbit]

[oslo_messaging_zmq]

[oslo_policy]

[paste_deploy]

flavor = keystone

[profiler]

10、控制节点：同步数据库（导入表）

su -s /bin/sh -c "glance-manage db_sync" glance

11、控制节点：开启服务并设置开机自启

#  systemctl  restart openstack-glance-api.service  openstack-glance-registry.service

#   systemctl enable openstack-glance-api.service  openstack-glance-registry.service

12、控制节点：上传测试镜像

# 上传测试镜像命令

openstack image create "cirros"   --file cirros-0.3.-x86_64-disk.img.   --disk-format qcow2 --container-format bare --public

# 查看镜像列表

openstack  image list

测试镜像存在

五、搭建nova计算服务

1、控制节点：创建数据库

&1 登录数据库并创建数据库

mysql -u root -p

CREATE DATABASE nova_api;

CREATE DATABASE nova;

CREATE DATABASE nova_cell0;

&2 给予正确使用数据库的权利

#  GRANT ALL PRIVILEGES ON nova_api.* TO 'nova'@'localhost'  IDENTIFIED BY 'NOVA_DBPASS';

#  GRANT ALL PRIVILEGES ON nova_api.* TO 'nova'@'%'  IDENTIFIED BY 'NOVA_DBPASS';

#  GRANT ALL PRIVILEGES ON nova.* TO 'nova'@'localhost'  IDENTIFIED BY 'NOVA_DBPASS';

#  GRANT ALL PRIVILEGES ON nova.* TO 'nova'@'%'  IDENTIFIED BY 'NOVA_DBPASS';

#  GRANT ALL PRIVILEGES ON nova_cell0.* TO 'nova'@'localhost' IDENTIFIED BY 'NOVA_DBPASS';

#  GRANT ALL PRIVILEGES ON nova_cell0.* TO 'nova'@'%'  IDENTIFIED BY 'NOVA_DBPASS';

2、控制节点：宣告环境变量

. openrc  或 source  openrc

3、控制节点：创建nova用户

openstack user create --domain default --password=nova  nova

4、控制节点：向nova用户添加管理（admin）角色

openstack role add --project service --user nova admin

5、控制节点：创建nova服务实体

openstack service create --name nova   --description "OpenStack Compute" compute

6、控制节点：创建 API 服务端点

#   openstack endpoint create --region RegionOne compute public http://lichaohost1:8774/v2.1

#    openstack endpoint create --region RegionOne  compute internal http://lichaohost1:8774/v2.1

#  openstack endpoint create --region RegionOne  compute admin http://lichaohost1:8774/v2.1

# 查看

openstack endpoint list

7、控制节点：创建 placement 用户 ( 负责服务追踪，统计资源使用量的用户）

openstack user create --domain default --password=placement  placement

8、控制节点：向placement用户添加管理（admin）角色

openstack role add --project service --user placement admin

9、控制节点：创建服务

openstack service create --name placement --description "Placement API" placement

10、控制节点：创建服务API端点

#   openstack endpoint create --region RegionOne placement public http://lichaohost1:8778

#  openstack endpoint create --region RegionOne placement internal http://lichaohost1:8778

#   openstack endpoint create --region RegionOne placement admin http://lichaohost1:8778

11、控制节点：安装nova

yum install openstack-nova-api openstack-nova-conductor  openstack-nova-console openstack-nova-novncproxy  openstack-nova-scheduler openstack-nova-placement-api -y

12、控制节点：编辑配置文件 /etc/nova/nova.conf

# 备份

#编辑如下

[DEFAULT]

my_ip=192.168.206.137

use_neutron = True

firewall_driver = nova.virt.firewall.NoopFirewallDriver

enabled_apis=osapi_compute,metadata

transport_url = rabbit://openstack:admin@lichaohost1

[api]

auth_strategy = keystone

[api_database]

connection = mysql+pymysql://nova:NOVA_DBPASS@lichaohost1/nova_api

[barbican]

[cache]

[cells]

[cinder]

[cloudpipe]

[conductor]

[console]

[consoleauth]

[cors]

[cors.subdomain]

[crypto]

[database]

connection = mysql+pymysql://nova:NOVA_DBPASS@lichaohost1/nova

[ephemeral_storage_encryption]

[filter_scheduler]

[glance]

api_servers = http://lichaohost1:9292

[guestfs]

[healthcheck]

[hyperv]

[image_file_url]

[ironic]

[key_manager]

[keystone_authtoken]

auth_uri = http://lichaohost1:5000

auth_url = http://lichaohost1:35357

memcached_servers = lichaohost1:

auth_type = password

project_domain_name = default

user_domain_name = default

project_name = service

username = nova

password = nova

[libvirt]

[matchmaker_redis]

[metrics]

[mks]

[neutron]

[notifications]

[osapi_v21]

[oslo_concurrency]

lock_path=/var/lib/nova/tmp

[oslo_messaging_amqp]

[oslo_messaging_kafka]

[oslo_messaging_notifications] 

[oslo_messaging_rabbit]

[oslo_messaging_zmq]

[oslo_middleware]

[oslo_policy]

[pci]

[placement]

os_region_name = RegionOne

auth_type = password

auth_url = http://lichaohost1:35357/v3

project_name = service

project_domain_name = Default

username = placement

password = placement

user_domain_name = Default

[quota]

[rdp]

[remote_debug]

[scheduler]

[serial_console]

[service_user]

[spice]

[ssl]

[trusted_computing]

[upgrade_levels] 

[vendordata_dynamic_auth]

[vmware]

[vnc]

enabled=true

vncserver_listen=$my_ip

vncserver_proxyclient_address=$my_ip

[workarounds]

[wsgi]

[xenserver]

[xvp]

13、控制节点：编辑配置文件 /etc/httpd/conf.d/00-nova-placement-api.conf （服务追踪）

#添加内容如下

<Directory /usr/bin>

   <IfVersion >= 2.4>

　　Require all granted

   </IfVersion>

   <IfVersion < 2.4>

   Order allow,deny

   Allow from all

  </IfVersion>

</Directory>

14、控制节点：重启httpd

15、控制节点：同步数据库

#    su -s /bin/sh -c "nova-manage api_db sync" nova

#    su -s /bin/sh -c "nova-manage cell_v2 map_cell0" nova

#    su -s /bin/sh -c "nova-manage cell_v2 create_cell --name=cell1 --verbose" nova     ( 创建证书的id  ）

  #    su -s /bin/sh -c "nova-manage db sync" nova

15、控制节点：查看cell 证书的列表

nova-manage cell_v2 list_cells

16、控制节点：启动服务并设置开机自启

#  systemctl start openstack-nova-api.service openstack-nova-consoleauth.service openstack-nova-scheduler.service openstack-nova-conductor.service openstack-nova-novncproxy.service

# systemctl enable openstack-nova-api.service openstack-nova-consoleauth.service openstack-nova-scheduler.service openstack-nova-conductor.service openstack-nova-novncproxy.service

#查看状态是否启动成功

systemctl status openstack-nova-api.service openstack-nova-consoleauth.service openstack-nova-scheduler.service openstack-nova-conductor.service openstack-nova-novncproxy.service | grep active

17、计算节点：安装 openstack-nova-compute

yum install openstack-nova-compute -y

18、计算节点：编辑配置文件 /etc/nova/nova.conf

#备份

#编辑内容如下

[DEFAULT]

my_ip=192.168.206.138

use_neutron = True

firewall_driver = nova.virt.firewall.NoopFirewallDriver

enabled_apis=osapi_compute,metadata

transport_url = rabbit://openstack:admin@lichaohost1

[api]

auth_strategy = keystone

[api_database]

[barbican]

[cache]

[cells]

[cinder]

[cloudpipe]

[conductor]

[console]

[consoleauth]

[cors]

[cors.subdomain]

[crypto]

[database]

[ephemeral_storage_encryption]

[filter_scheduler]

[glance]

api_servers = http://lichaohost1:9292

[guestfs]

[healthcheck]

[hyperv]

[image_file_url]

[ironic] 

[key_manager]

[keystone_authtoken]

auth_uri = http://lichaohost1:5000

auth_url = http://lichaohost1:35357

memcached_servers = lichaohost1:

auth_type = password

project_domain_name = default

user_domain_name = default

project_name = service

username = nova

password = nova

[libvirt]

virt_type=qemu

[matchmaker_redis]

[metrics]

[mks]

[neutron]

[notifications]

[osapi_v21]

[oslo_concurrency]

lock_path=/var/lib/nova/tmp

[oslo_messaging_amqp]

[oslo_messaging_kafka]

[oslo_messaging_notifications]

[oslo_messaging_rabbit]

[oslo_messaging_zmq]

[oslo_middleware]

[oslo_policy]

[pci]

[placement]

os_region_name = RegionOne

auth_type = password

auth_url = http://lichaohost1:35357/v3

project_name = service

project_domain_name = Default

username = placement

password = placement

user_domain_name = Default

[quota]

[rdp]

[remote_debug]

[scheduler]

[serial_console]

[service_user]

[spice]

[ssl]

[trusted_computing]

[upgrade_levels]

[vendordata_dynamic_auth]

[vmware]

[vnc]

enabled=true

vncserver_listen=0.0.0.0

vncserver_proxyclient_address=$my_ip

novncproxy_base_url = http://192.168.206.137:6080/vnc_auto.html

[workarounds]

[wsgi]

[xenserver]

[xvp]

19、计算节点：查看是否支持虚拟化

egrep -c '(vmx|svm)' /proc/cpuinfo

20、计算节点：启动服务并设置开机自启

#  systemctl start libvirtd.service openstack-nova-compute.service

#  systemctl enable libvirtd.service openstack-nova-compute.service

21、控制节点：查看计算节点的工作状态

openstack   compute  service list

22、控制节点：宣告环境变量

. openrc 或  source openrc

23、控制节点：列出管理的虚拟化类型

openstack hypervisor list

#查看计算节点

nova hypervisor-list

# 查看计算节点上有哪些虚拟机

nova hypervisor-servers lichaohost2

24、控制节点：数据库同步计算节点

su -s /bin/sh -c "nova-manage cell_v2 discover_hosts --verbose" nova

25、查看服务及服务端点

openstack catalog list

26、更新nova服务的检测（必须三个成功才说明运行成功）

nova-status upgrade check