ceph分布式存储
存储分类:
DAS:直连存储 ide线 sata线 usd线 sas线
NAS:网络附加存储 nfs samba ftp
SAN:存储区域网络 issci
SDS:软件定义存储 ceph
ceph组件:OSD存储设备 Monitors集群监控组件 RGW(ceph-redowsgw)对象存储网关 MDS存放文件系统的元数据
注:montiitors至少需要3台 因为过半原则超过一半几台宕机整个集群都不能用了
例: 有三台机 41(node1) 42 (node2) 43 (node3)
1.部署ceph集群
环境准备 配置yum源
集群几台无密码连接(包括自己免密自己)
ssh-keygen
for i in 41 42 43 ; do ssh-copy-id 192.168.1.$i ; done
/etc/hosts 域名解析 (三台机都做)
vim /etc/hosts
192.168.1.41 node1
192.168.1.42 node2
192.168.1.43 node3
for i in 41 42 43 ; do scp /etc/hosts 192.168.1.$i :/etc/hosts ; done
配置NTP服务时间同步
vim /etc/chrony.conf
server 192.168.1.254 iburst
systemclt restart chronyd
for i in node1 node2 node3
do
scp /etc/chrony.conf $i:/etc/chrony.conf
ssh $i "systemctl restart chronyd"
done
安装ceph-deploy软件(node1 做就行)
yum -y install ceph-deploy
mkdir ceph-deploy
cd ceph-deploy
给所有节点安装ceph相关软件包
for i in node1 node2 node3
do
ssh $i "yum -y install ceph-mon ceph-osd ceph-mds ceph-redowsgw"
done
常见ceph集群配置在ceph-cluster目录下生成ceph配置文件
ceph-deploy new node1 node2 node3
在ceph.conf配置文件里定义mon主机是谁
初始化所有节点mon服务也是启动mon服务
ceph-deploy mon create-initial
2.创建OSD
给每台机准备3个磁盘 2个做存储服务器1各做缓存服务器 注:如果是机台比较多 mon 和osd 分开做的话 只需要给osd机台添加磁盘就可以了
把一个磁盘划分两个分区做令两外两个磁盘的缓存盘
for i in node1 node2 node2
do
ssh $i "parted /dev/vdb mklabel gpt"
ssh $i "parted /dev/vdb mkpart primary 1 50%"
ssh $i "parted /dev/vdb mkpart primary 50% 100%"
done
修改权限 (三台机都要做)
chown ceph.ceph /dev/vdb1 chown ceph.ceph /dev/vdb2
vim /etc/vdev/rules.d/70-vdb.rules
ENV{DEVNAME}=="/dev/vdb1" DENER="ceph",GROUP="ceph"
ENV{DEVNAME}=="/dev/vdb2" DENER="ceph",GROUP="ceph"
初始化清空磁盘 node1做即可
ceph-deploy disk zap node1:vdc node1:vdd
ceph-deploy disk zap node2:vdc node1:vdd
ceph-deploy disk zap node3:vdc node1:vdd
创建osd存储空间
ceph-deploy osd create node1:vdc:/dev/vdb1 node1:vdd:/dev/vdb2 node2:vdc:/dev/vdb1 node2:vdd:/dev/vdb2 node3:vdc:/dev/vdb1 node3:vdd:/dev/vdb2
ceph -s 查看集群状态
3.创建ceph块存储
ceph osd lspools 查看存储池
创建镜像 rbd create demo-image --image -feature layering --size 10G 注: demo-image是镜像名可自定义 10G是大小
rbd info demo-image 查看镜像
4 扩大空间
rbd resize --size 15G demo-image
客户机访问需要:
yum -y install ceph-common
scp 192.168.1.41:/ceph/ceph.conf /etc/ceph 注:拷贝配置文件到客户机不然不知道集群在哪
scp 192.168.1.41:/etc/ceph/ceph.client.admin.keying /etc/ceph 注:拷贝免密 避免无连接权限
rbd showmapped 查看块存储详细信息
rbd map demo-image 查看可以挂载的存储
mkfs.xfs /dev/rbd
mount /dev/rbd /mnt/
ceph分布式存储的更多相关文章
- Ceph分布式存储(luminous)部署文档-ubuntu18-04
Ceph分布式存储(luminous)部署文档 环境 ubuntu18.04 ceph version 12.2.7 luminous (stable) 三节点 配置如下 node1:1U,1G me ...
- Centos7下使用Ceph-deploy快速部署Ceph分布式存储-操作记录
之前已详细介绍了Ceph分布式存储基础知识,下面简单记录下Centos7使用Ceph-deploy快速部署Ceph环境: 1)基本环境 192.168.10.220 ceph-admin(ceph-d ...
- Ceph分布式存储-运维操作笔记
一.Ceph简单介绍1)OSDs: Ceph的OSD守护进程(OSD)存储数据,处理数据复制,恢复,回填,重新调整,并通过检查其它Ceph OSD守护程序作为一个心跳 向Ceph的监视器报告一些检测信 ...
- Ceph分布式存储集群-硬件选择
在规划Ceph分布式存储集群环境的时候,对硬件的选择很重要,这关乎整个Ceph集群的性能,下面梳理到一些硬件的选择标准,可供参考: 1)CPU选择Ceph metadata server会动态的重新分 ...
- Ceph分布式存储-原理介绍及简单部署
1)Ceph简单概述Ceph是一个分布式存储系统,诞生于2004年,最早致力于开发下一代高性能分布式文件系统的项目.Ceph源码下载:http://ceph.com/download/.随着云计算的发 ...
- 简单介绍Ceph分布式存储集群
在规划Ceph分布式存储集群环境的时候,对硬件的选择很重要,这关乎整个Ceph集群的性能,下面梳理到一些硬件的选择标准,可供参考: 1)CPU选择 Ceph metadata server会动态的重新 ...
- Ceph分布式存储-总
Ceph分布式存储-总 目录: Ceph基本组成及原理 Ceph之块存储 Ceph之文件存储 Ceph之对象存储 Ceph之实际应用 Ceph之总结 一.Ceph基本组成及原理 1.块存储.文件存储. ...
- Ceph分布式存储部署过程
前言: 环境介绍:此次部署系统为Cenots 7 MON.OSD 10.110.180.112 Admin MON.OSD 10.110.180.113 Node1 MON.OSD 10.110.18 ...
- Centos7下使用Ceph-deploy快速部署Ceph分布式存储-操作记录(转)
之前已详细介绍了Ceph分布式存储基础知识,下面简单记录下Centos7使用Ceph-deploy快速部署Ceph环境:1)基本环境 1 2 3 4 5 6 7 8 9 10 11 12 13 14 ...
- 让我们了解 Ceph 分布式存储
前言 最近在学习 kubernetes 过程中,想实现 pod 数据的持久化.在调研的过程中,发现 ceph 在最近几年发展火热,也有很多案例落地企业.在选型方面,个人更加倾向于社区火热的项目,Glu ...
随机推荐
- C++STL整理
STL整理 vector #include<bits/stdc++.h> #define go(i,a,b) for(int i=a;i<b;i++) using namespace ...
- 自己实现 aop 和 spring aop
上文说到,我们可以在 BeanPostProcessor 中对 bean 的初始化前化做手脚,当时也说了,我完全可以生成一个代理类丢回去. 代理类肯定要为用户做一些事情,不可能像学设计模式的时候创建个 ...
- [转载]1.1 UiPath下载安装与激活
一.UiPath下载 1.打开官网https://www.uipath.com.cn,点击开始试用 2.选择获取UiPath社区版 3.填写姓.名.电子邮箱地址.专业领域.职位.公司.公司所在行业.国 ...
- 如何处理消息队列消费过程中的重复消息&如何实现幂等性
什么是幂等 幂等本来是数学上的概念,它的定义是这样的: 如果一个函数 f(x) 满足:f(f(x)) = f(x),则函数 f(x) 满足幂等性. 在计算机领域用来描述一个操作.方法或者服务.一个幂等 ...
- 数据仓库ETL案例学习(一)
来自课程案例学习 某跨国食品超市的信息管理系统,每天都会记录成千上万条各地连锁超市的销售数据.基于大数据的背景,该公司的管理层决定建立FoodMart数据仓库,期望能从庞大的数据中挖掘出有商业价值 ...
- Linux命令实践( 六)
1.统计出/etc/passwd文件中其默认shell为非/sbin/nologin的用户个数,并将用户都显示出来 [root@test ~]#awk -F: '{shells[$NF]++;if($ ...
- sqlite修改表、表字段等与sql server的不同之处
sqlite中只支持 ALTER TABLE 命令的 RENAME TABLE 和 ADD COLUMN. 其他类型的 ALTER TABLE 操作如 DROP COLUMN,ALTER COLUMN ...
- Ubuntu 16.04安装JDK并配置环境变量
系统版本:Ubuntu 16.04 JDK版本:jdk1.8.0_121 1.官网下载JDK文件jdk-8u121-linux-x64.tar.gz 我这里下的是最新版,其他版本也可以 2.创建一个目 ...
- Mssql 查询某记录前后N条
Sqlserver 查询指定记录前后N条,包括当前数据 条件 [ID] 查询 [N]条 select * from [Table] where ID in (select top ([N]+1) ID ...
- Python3.7.1学习(一):redis的连接和简单使用
1.python 利用 redis 第三方库 首先安装:pip install redis 2.reids的连接 Redis使用StrictRedis对象来管理对一个redis server 的所有连 ...