[[378329]]

 基礎配置

三臺環境為centos7.9，以下配置需要在每臺機器上執行

配置hosts解析

cat >> /etc/hosts <<EOF 
192.168.2.23 node1 
192.168.2.24 node2 
192.168.2.25 node3 
EOF 

關閉防火墻和selinux

systemctl stop firewalld && systemctl disable firewalld 
setenforce 0 && sed -i 's/SELINUX=enforcing/SELINUX=disabled/g' /etc/selinux/config 

分別在三個節點設置主機名

hostnamectl set-hostname node1 
hostnamectl set-hostname node2 
hostnamectl set-hostname node3 

配置主機時間同步

systemctl restart chronyd.service && systemctl enable chronyd.service 

配置免密登錄

ssh-keygen 
ssh-copy-id -i .ssh/id_rsa.pub node1 
ssh-copy-id -i .ssh/id_rsa.pub node2 
ssh-copy-id -i .ssh/id_rsa.pub node3 

安裝pip和ansible、git

yum install python-pip ansible git -y 

部署ceph集群

克隆存儲庫

這里我選擇安裝的是ceph nautilus版本

git clone https://github.com/ceph/ceph-ansible.git 
cd ceph-ansible 
git checkout stable-4.0 

安裝ansible依賴包

pip install --upgrade pip 
pip install -r requirements.txt 

修改hosts文件，添加安裝的節點

cat >> /etc/ansible/hosts <<EOF 
[mons] 
node1 
node2 
node3 
 
[osds] 
node1 
node2 
node3 
 
[mgrs] 
node1 
 
[mdss] 
node1 
node2 
node3 
 
[clients] 
node1 
node2 
node3 
 
[rgws] 
node1 
node2 
node3 
 
[grafana-server] 
node1 
 
EOF 

 備份group_vars下的yml文件

cd ceph-ansible/group_vars 
for file in *;do cp $file ${file%.*};done 

修改group_vars/all.yml配置

--- 
dummy: 
mon_group_name: mons 
osd_group_name: osds 
rgw_group_name: rgws 
mds_group_name: mdss 
client_group_name: clients 
mgr_group_name: mgrs 
grafana_server_group_name: grafana-server 
configure_firewall: False 
ceph_origin: repository 
ceph_origin: repository 
ceph_repository: community 
ceph_mirror: http://mirrors.aliyun.com/ceph 
ceph_stable_key: http://mirrors.aliyun.com/ceph/keys/release.asc 
ceph_stable_release: nautilus 
ceph_stable_repo: "{{ ceph_mirror }}/rpm-{{ ceph_stable_release }}" 
public_network: "192.168.2.0/24" 
cluster_network: "192.168.2.0/24" 
monitor_interface: ens33 
osd_auto_discovery: true 
osd_objectstore: filestore 
radosgw_interface: ens33 
dashboard_admin_password: asd123456 
grafana_admin_password: admin 
pg_autoscale_mode: True 

修改group_vars/osds.yml配置

devices: 
  - /dev/sdb 

修改site.yml配置

開始進行安裝

剩下的交給時間吧，十分鐘左右就裝好了

ansible-playbook -i /etc/ansible/hosts site.yml 

查看安裝狀態，發現有一個警告，這是因為在之前的all.yml配置沒有開啟允許自動調整pool中的pg數pg_autoscale_mode: False，手動設置下即可

ceph osd pool set <pool-name> pg_autoscale_mode on