将设为首页浏览此站
开启辅助访问 天气与日历 收藏本站联系我们切换到窄版

易陆发现论坛

 找回密码
 开始注册
查看: 326|回复: 1
收起左侧

ceph 下osd删除过程记录清除集群

[复制链接]
发表于 2021-4-21 14:00:05 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有帐号?开始注册

x
systemctl stop ceph-osd@4.service 7 u6 v0 Z  |8 G/ E* j" R
systemctl |grep osd
# E8 v8 G# S3 E6 |0 G/ e* asystemctl status ceph-osd*
  _+ I2 r. Q0 X! Q
; s  Z' L% f( a- z( G5 \1 [, n[root@controller deploy]# ceph osd tree( l4 A0 L5 \* O! T  Z5 b
ID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF
  {$ x- O& M* v" x# U2 `% U7 r-1       0.05875 root default                                1 v3 p, b$ r# {! k- ^8 I9 q9 ~
-3       0.05875     host controller                         : a1 v8 z" |7 R3 U# q* [* r0 ~
0   hdd 0.00200         osd.0           up  1.00000 1.00000
1 Y/ p, M7 F5 { 1   hdd 0.00099         osd.1           up  1.00000 1.00000 $ h: v: {+ ]6 Y( ^
2   hdd 0.01859         osd.2           up  1.00000 1.00000 1 s. r5 S  U& V0 a
3   hdd 0.01859         osd.3           up  1.00000 1.00000 % j1 C: X! M. d: d/ v- k* u) ^
4   hdd 0.01859         osd.4         down  1.00000 1.00000 3 {  V/ C& b' s5 M
[root@controller deploy]# systemctl stop ceph-osd@3.service
  Y+ Z: v5 p' {8 |+ P& w[root@controller deploy]# ceph osd tree6 s! H, L' ~( }7 f' k% I
ID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF
5 g2 [1 y& m- q-1       0.05875 root default                                
2 n  L% i. z1 I' T-3       0.05875     host controller                         , P; w6 B7 G; e$ |6 U! v  H# x
0   hdd 0.00200         osd.0           up  1.00000 1.00000
: l- x3 \9 w( @3 f7 }9 [0 b8 B 1   hdd 0.00099         osd.1           up  1.00000 1.00000 , H7 L0 g/ l) q
2   hdd 0.01859         osd.2           up  1.00000 1.00000 - U$ p; T2 y7 v# M
3   hdd 0.01859         osd.3         down  1.00000 1.00000
4 t& {! t1 P: p4 `( y 4   hdd 0.01859         osd.4         down  1.00000 1.00000 4 K' m! p5 I8 k1 e! \( u

% |% A! [& p4 d" e! ][root@controller deploy]# ceph osd out osd.4$ @0 P# [) q6 L8 u
marked out osd.4. ; R$ v% P( d( V5 Q8 V
[root@controller deploy]# ceph osd tree6 }4 Z% {, d. |8 {& f7 k2 J; {
ID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF
, n5 B$ q3 e5 O; E+ t2 K6 o. {% m* @-1       0.05875 root default                                4 Z8 q, t% u3 N' k8 ~
-3       0.05875     host controller                        
# i* n4 S1 O5 o7 F- d; k 0   hdd 0.00200         osd.0           up  1.00000 1.00000 - ]9 A: X% ?8 E( y. h* d) N
1   hdd 0.00099         osd.1           up  1.00000 1.00000   C  B' q# n0 N9 X/ E5 |
2   hdd 0.01859         osd.2           up  1.00000 1.00000
9 g; s* k+ V: l. L3 Y# w 3   hdd 0.01859         osd.3         down  1.00000 1.00000 2 N2 [* v) l  Z% a8 }: c1 W! P2 D
4   hdd 0.01859         osd.4         down        0 1.00000 9 i1 }; `" t: W+ {. Y1 n, F
[root@controller deploy]# ceph osd out osd.3& F" g8 N5 D/ {; m
marked out osd.3. 0 ]) y+ i) g2 y4 h  I& W1 Y) H  K
[root@controller deploy]# ceph osd tree6 \5 K. t6 j/ E( Y) y/ W$ U& h
ID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF & p9 P/ q5 I8 J" [8 m' V
-1       0.05875 root default                                
9 A3 P( P4 e4 H5 E8 e  W6 f-3       0.05875     host controller                         $ z( N( ]3 K* k/ X6 w1 p% l
0   hdd 0.00200         osd.0           up  1.00000 1.00000
5 [0 w7 k: ~6 L) P" U7 f' R 1   hdd 0.00099         osd.1           up  1.00000 1.00000 # a8 A' W4 J  \+ [0 O5 b
2   hdd 0.01859         osd.2           up  1.00000 1.00000
$ |9 B* Q" L1 ?  p; j2 r. p 3   hdd 0.01859         osd.3         down        0 1.00000
* D) q& L# G( B( b1 Y# ?, ~ 4   hdd 0.01859         osd.4         down        0 1.00000 " r+ O5 B* l$ l

$ s# c# ]  R, k[root@controller deploy]# ceph osd crush remove osd.4
. N) d  @* e  S. Y/ @removed item id 4 name 'osd.4' from crush map  j* }4 m. h' I
" a* y! G" A( P! e, x3 O/ F
[root@controller deploy]# ceph auth del osd.49 Q8 ^$ ?+ P3 Y# t9 N- D  J# U
updated3 D# d) ]4 r' \5 n3 R

3 k# A4 V( X$ h. A4 d& o[root@controller deploy]# ceph osd tree' z5 L" K* @/ W- t& W4 |
ID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF
! }" O7 l( |4 H- I-1       0.04016 root default                                
; V) O6 {! C# ?4 H-3       0.04016     host controller                        
/ B- ^0 _4 L0 g6 u/ a4 P1 h 0   hdd 0.00200         osd.0           up  1.00000 1.00000
( K2 V+ K4 F* P2 c 1   hdd 0.00099         osd.1           up  1.00000 1.00000
$ r2 J  h7 s0 T; _1 y/ W% _' m. q 2   hdd 0.01859         osd.2           up  1.00000 1.00000 6 h  ?) A8 O0 q% x3 @9 d: \7 }
3   hdd 0.01859         osd.3         down        0 1.00000 0 m- v# I8 a! w
4             0 osd.4                 down        0 1.00000 - r3 }5 a$ G  o
0 N1 n; o0 g; l
& l% Z2 \6 e( h8 N% l1 {% e( F
[root@controller deploy]# ceph osd rm osd.4! q# Q; Q* g4 Z7 a* }3 `
removed osd.4' x* o2 C) f5 n- R# j

* Z1 P& U3 [) L0 E9 U5 ~2 N# A( N& ~" I; e2 N
[root@controller deploy]# ceph osd tree6 k* x9 G! G, V1 u( _. N" n
ID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF - e, y) y6 ~) q* N/ T, O
-1       0.04016 root default                                - P' q# @+ e$ [& Z; W
-3       0.04016     host controller                        
  q- I6 ?3 W! l+ V9 a/ S5 k7 F  G 0   hdd 0.00200         osd.0           up  1.00000 1.00000
& ^6 b* U; x& [- i7 b# U1 M 1   hdd 0.00099         osd.1           up  1.00000 1.00000 . \2 Z" A; `$ a5 `/ v
2   hdd 0.01859         osd.2           up  1.00000 1.00000
/ ^6 Z1 D6 \! _, V  m, b 3   hdd 0.01859         osd.3         down        0 1.00000 " q4 f; x8 k! f! |( p
[root@controller deploy]# ceph osd crush remove osd.3, u# c/ I! E* f6 y" g
removed item id 3 name 'osd.3' from crush map1 a, M8 z- E# ]* i4 u# U; `; [, @: x

9 w* V- s" P4 S/ p; N) o6 \% ]  w[root@controller deploy]# ceph -s# {/ l; I) b! R+ h5 g0 S" n9 F9 d
  cluster:2 y. v0 e3 {: M, h" i
    id:     b0657efa-ec62-452d-8354-9c8f3dde3703
# u  C* d! |4 D. h; t9 W* i    health: HEALTH_OK+ Y! _+ C! W9 V5 i5 R5 e$ l
4 s, f1 @- I5 i" ]7 G; P2 ]" g9 B4 C
  services:' S! ?& ^4 `- |3 v' Q0 C7 s
    mon: 1 daemons, quorum controller (age 16m)) f+ d* F; p7 g# G  U0 b$ F# n
    mgr: controller(active, since 17h)# [# O5 ^6 t* \( I* T& I: w
    osd: 4 osds: 3 up (since 4m), 3 in (since 3m)
( w" _8 m* C+ ~, i6 Q: N' h2 B$ Z& C
# m  S: G1 e2 Y+ @0 O  Y  data:
; d0 M& A' T* W& G8 o    pools:   0 pools, 0 pgs/ ~- B( i' Q7 {7 j, C
    objects: 0 objects, 0 B$ }, a0 d% d5 _
    usage:   2.4 GiB used, 20 GiB / 22 GiB avail7 S, a" d  i% f
    pgs:     ' f6 l7 I- l3 `1 Y( D( Q

/ P- ^1 }; H' `( c: w[root@controller deploy]# ceph osd tree
' w. D+ ^2 _: M$ d9 KID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF
8 }% T/ u: Z& C4 T( p" b' `8 X-1       0.02158 root default                                
$ f; w+ y) `( e) d; [5 ]: }2 v-3       0.02158     host controller                         $ ~% j4 r: b3 ?% z1 J; Z
0   hdd 0.00200         osd.0           up  1.00000 1.00000 " t# Y. g9 x7 f% f
1   hdd 0.00099         osd.1           up  1.00000 1.00000
$ @+ Y% [+ ?0 [5 b" P 2   hdd 0.01859         osd.2           up  1.00000 1.00000
; Y% i, g) _5 f4 Q. k; i 3             0 osd.3                 down        0 1.00000 $ ?5 `* M2 {+ J- i# k  ~

( w, g* u; q  @: }[root@controller deploy]# ceph auth del osd.3" n6 B( V) N; i
updated
" i* D' \6 ^; z- f6 l; \3 T( ^% e, W
% y) _  g6 h; N( U/ }1 q7 }7 }" K
[root@controller deploy]# ceph osd tree
  E& U  {4 B' [5 @4 k$ g( jID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF
1 }3 F% X( T" k1 L, w-1       0.02158 root default                                
5 F3 F: E0 B' d# o( N1 l; o( P$ X+ |-3       0.02158     host controller                        
2 R, K  C* u5 \% \ 0   hdd 0.00200         osd.0           up  1.00000 1.00000 0 n; r0 y/ E0 `! J/ Y9 {
1   hdd 0.00099         osd.1           up  1.00000 1.00000 ; J6 x# W2 }( U' U/ X
2   hdd 0.01859         osd.2           up  1.00000 1.00000 3 W9 |% @7 }4 W+ C$ E: D
3             0 osd.3                 down        0 1.00000 ! [4 B- V  g. D5 D9 G  {' q$ V$ _* r

0 A! o  u  v+ S/ M7 W/ Y& s: G- {7 O1 S
[root@controller deploy]# ceph osd rm osd.3) V( E) L+ a! y( J
removed osd.3
  W+ \3 K0 p. |- ]7 h4 A' v
$ j. Q% f. |  H
4 c- |( a( d/ w* @# |* `4 j0 f3 v$ a[root@controller deploy]# ceph osd tree
+ p3 O' H/ v1 H5 R/ f- \ID CLASS WEIGHT  TYPE NAME           STATUS REWEIGHT PRI-AFF
. p, m  j& t; A% X% d# l-1       0.02158 root default                                
+ L- W8 \6 A# U6 F-3       0.02158     host controller                        
" k, S/ `4 r1 W: z; i# g" T/ O 0   hdd 0.00200         osd.0           up  1.00000 1.00000 % |+ I8 }1 H% U; {+ q6 N2 t; d! e3 J( R
1   hdd 0.00099         osd.1           up  1.00000 1.00000
4 }1 |# G4 H9 i( G9 N 2   hdd 0.01859         osd.2           up  1.00000 1.00000 ; a$ S0 e4 E3 F7 h2 Y, S

' A5 b$ S5 s  v# [; v清楚集群
4 ]$ f( Z+ ?, Z4 W. n  b: T删除系统的pv和vg和lv
; `9 D$ F: h9 ~. a7 G
! {6 m5 G4 d. r8 @; V6 \& S3 A3 k: D
6 W& n, H( w/ E8 y8 e% c5 ^' z
 楼主| 发表于 2021-4-21 14:15:55 | 显示全部楼层
for i in `vgscan |grep ceph |awk -F "\"" '{print $2}'` ;do vgremove $i;done
$ n; R7 Z. b# _9 A5 l- b2 y/ x& x
# I, h0 P) y6 t
( r1 m0 A3 p2 j/ X$ g8 B1 Wfor i in {b..k};do pvremove /dev/sd$i;done
您需要登录后才可以回帖 登录 | 开始注册

本版积分规则

关闭

站长推荐上一条 /4 下一条

如有购买积分卡请联系497906712

QQ|返回首页|Archiver|手机版|小黑屋|易陆发现 点击这里给我发消息

GMT+8, 2021-6-20 21:23 , Processed in 0.053612 second(s), 23 queries .

Powered by 龙睿 bbs168x X3.2

© 2001-2020 Comsenz Inc.

快速回复 返回顶部 返回列表