[问题]
[解答]

[问题] 删除 ceph-node1上的osd.4节点的方法？
[解答]
ceph-admin-node@ceph-admin-node:~/my-cluster$ ceph osd tree
ID WEIGHT TYPE NAME UP/DOWN REWEIGHT PRIMARY-AFFINITY
-1 0.07149 root default
-2 0.02859 host ceph-node2
0 0.01430 osd.0 down 0 1.00000
2 0.01430 osd.2 up 1.00000 1.00000
-3 0.01430 host ceph-node3
1 0.01430 osd.1 down 0 1.00000
-4 0.01430 host ceph-node1
4 0.01430 osd.4 up 1.00000 1.00000
-5 0.01430 host ceph-client-node
3 0.01430 osd.3 up 1.00000 1.00000

ceph-admin-node@ceph-admin-node:~/my-cluster$ ssh ceph-node1
Welcome to Ubuntu 14.04.5 LTS (GNU/Linux 4.4.0-31-generic x86_64)

• Documentation: https://help.ubuntu.com/

  System information as of Sun Feb 26 11:28:25 CST 2017

  System load: 0.43 Processes: 115
  Usage of /: 47.6% of 14.64GB Users logged in: 0
  Memory usage: 26% IP address for eth0: 192.168.1.249
  Swap usage: 0%

  Graph this data and manage this system at:
  https://landscape.canonical.com/

New release ‘16.04.2 LTS’ available.
Run ‘do-release-upgrade’ to upgrade to it.

Last login: Sun Feb 26 11:28:25 2017

将 osd.4 设置为 out 状态
ceph osd out osd.4

停止 ceph-node1 上的 osd.4 的服务进程
@H_301_49@ s@H_301_49@u@H_301_49@d@H_301_49@@H_301_49@o@H_301_49@s@H_301_49@t@H_301_49@o@H_301_49@p@H_301_49@c@H_301_49@e@H_301_49@p@H_301_49@h@H_301_49@−@H_301_49@o@H_301_49@s@H_301_49@d@H_301_49@@H_301_49@i@H_301_49@d@H_301_49@@H_301_49@=@H_301_49@4@H_301_49@c@H_301_49@e@H_301_49@p@H_301_49@h@H_301_49@−@H_301_49@o@H_301_49@s@H_301_49@d@H_301_49@@H_301_49@s@H_301_49@t@H_301_49@o@H_301_49@p@H_301_49@/@H_301_49@@H_301_49@@H_301_49@w@H_301_49@a@H_301_49@i@H_301_49@t@H_301_49@i@H_301_49@n@H_301_49@g@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@ @H_301_49@$sudo stop ceph-osd id=4 ceph-osd stop/waiting$ ceph osd tree 查看 osd.4 进入到 down 状态。
harvis@ceph-node1:~@H_301_49@ c@H_301_49@e@H_301_49@p@H_301_49@h@H_301_49@o@H_301_49@s@H_301_49@d@H_301_49@@H_301_49@t@H_301_49@r@H_301_49@e@H_301_49@e@H_301_49@I@H_301_49@@H_301_49@D@H_301_49@W@H_301_49@@H_301_49@E@H_301_49@@H_301_49@I@H_301_49@@H_301_49@G@H_301_49@H@H_301_49@@H_301_49@T@H_301_49@@H_301_49@T@H_301_49@@H_301_49@Y@H_301_49@@H_301_49@P@H_301_49@@H_301_49@E@H_301_49@@H_301_49@N@H_301_49@@H_301_49@A@H_301_49@M@H_301_49@@H_301_49@E@H_301_49@@H_301_49@U@H_301_49@@H_301_49@P@H_301_49@@H_301_49@@H_301_49@@H_301_49@/@H_301_49@@H_301_49@@H_301_49@D@H_301_49@O@H_301_49@W@H_301_49@@H_301_49@N@H_301_49@@H_301_49@R@H_301_49@E@H_301_49@@H_301_49@W@H_301_49@@H_301_49@E@H_301_49@@H_301_49@I@H_301_49@@H_301_49@G@H_301_49@H@H_301_49@@H_301_49@T@H_301_49@@H_301_49@P@H_301_49@@H_301_49@R@H_301_49@I@H_301_49@@H_301_49@M@H_301_49@@H_301_49@A@H_301_49@R@H_301_49@Y@H_301_49@@H_301_49@−@H_301_49@A@H_301_49@F@H_301_49@@H_301_49@F@H_301_49@@H_301_49@I@H_301_49@@H_301_49@N@H_301_49@@H_301_49@I@H_301_49@@H_301_49@T@H_301_49@@H_301_49@Y@H_301_49@@H_301_49@@H_301_49@@H_301_49@−@H_301_49@1@H_301_49@0.04289@H_301_49@r@H_301_49@o@H_301_49@o@H_301_49@t@H_301_49@d@H_301_49@@H_301_49@e@H_301_49@f@H_301_49@@H_301_49@a@H_301_49@u@H_301_49@l@H_301_49@t@H_301_49@@H_273_403@−@H_301_49@2@H_301_49@0.01430@H_301_49@h@H_301_49@o@H_301_49@s@H_301_49@t@H_301_49@c@H_301_49@e@H_301_49@p@H_301_49@h@H_301_49@@H_301_49@@H_301_49@−@H_301_49@n@H_301_49@o@H_301_49@d@H_301_49@@H_301_49@e@H_301_49@2@H_301_49@2@H_301_49@0.01430@H_301_49@o@H_301_49@s@H_301_49@d@H_301_49@@H_301_49@.2@H_301_49@u@H_301_49@p@H_301_49@1.00000@H_301_49@1.00000@H_301_49@−@H_301_49@3@H_301_49@0.01430@H_301_49@h@H_301_49@o@H_301_49@s@H_301_49@t@H_301_49@c@H_301_49@e@H_301_49@p@H_301_49@h@H_301_49@@H_301_49@@H_301_49@−@H_301_49@n@H_301_49@o@H_301_49@d@H_301_49@@H_301_49@e@H_301_49@3@H_301_49@3@H_301_49@0.01430@H_301_49@o@H_301_49@s@H_301_49@d@H_301_49@@H_301_49@.3@H_301_49@u@H_301_49@p@H_301_49@1.00000@H_301_49@1.00000@H_301_49@−@H_301_49@4@H_301_49@0.01430@H_301_49@h@H_301_49@o@H_301_49@s@H_301_49@t@H_301_49@c@H_301_49@e@H_301_49@p@H_301_49@h@H_301_49@@H_301_49@@H_301_49@−@H_301_49@n@H_301_49@o@H_301_49@d@H_301_49@@H_301_49@e@H_301_49@1@H_301_49@4@H_301_49@0.01430@H_301_49@o@H_301_49@s@H_301_49@d@H_301_49@@H_301_49@.4@H_301_49@d@H_301_49@@H_301_49@o@H_301_49@w@H_301_49@n@H_301_49@0@H_301_49@1.00000@H_301_49@将@H_301_49@@H_301_49@@H_301_49@@H_301_49@o@H_301_49@s@H_301_49@d@H_301_49@@H_301_49@.4@H_301_49@从@H_301_49@@H_301_49@@H_301_49@@H_301_49@c@H_301_49@r@H_301_49@u@H_301_49@s@H_301_49@h@H_301_49@m@H_301_49@a@H_301_49@p@H_301_49@中@H_301_49@@H_301_49@@H_301_49@@H_301_49@删@H_301_49@@H_301_49@@H_301_49@@H_301_49@除@H_301_49@@H_301_49@@H_301_49@@H_301_49@掉@H_301_49@@H_301_49@@H_301_49@@H_301_49@h@H_301_49@a@H_301_49@r@H_301_49@v@H_301_49@i@H_301_49@s@H_301_49@@@H_301_49@@H_301_49@@H_301_49@c@H_301_49@e@H_301_49@p@H_301_49@h@H_301_49@@H_301_49@@H_301_49@−@H_301_49@n@H_301_49@o@H_301_49@d@H_301_49@@H_301_49@e@H_301_49@1@H_301_49@:@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@ @H_301_49@$ceph osd tree ID WEIGHT TYPE NAME UP/DOWN REWEIGHT PRIMARY-AFFINITY -1 0.04289 root default -2 0.01430 host ceph-node2 2 0.01430 osd.2 up 1.00000 1.00000 -3 0.01430 host ceph-node3 3 0.01430 osd.3 up 1.00000 1.00000 -4 0.01430 host ceph-node1 4 0.01430 osd.4 down 0 1.00000 将 osd.4 从 crush map 中<a href="/tag/shanchu/" target="_blank" class="keywords">删除</a>掉 harvis@ceph-node1:~$ ceph osd tree
ID WEIGHT TYPE NAME UP/DOWN REWEIGHT PRIMARY-AFFINITY
-1 0.02859 root default
-2 0.01430 host ceph-node2
2 0.01430 osd.2 up 1.00000 1.00000
-3 0.01430 host ceph-node3
3 0.01430 osd.3 up 1.00000 1.00000
-4 0 host ceph-node1
-5 0 host ceph-client-node
0 0 osd.0 down 0 1.00000
1 0 osd.1 down 0 1.00000
4 0 osd.4 down 0 1.00000
执行 auth 删除命令
harvis@ceph-node1:~@H_301_49@ c@H_301_49@e@H_301_49@p@H_301_49@h@H_301_49@a@H_301_49@u@H_301_49@t@H_301_49@h@H_301_49@d@H_301_49@@H_301_49@@H_301_774@e@H_301_49@l@H_301_49@o@H_301_49@s@H_301_49@d@H_301_49@@H_301_49@.4@H_301_49@u@H_301_49@p@H_301_49@d@H_301_49@@H_301_49@a@H_301_49@t@H_301_49@e@H_301_49@d@H_301_49@@H_301_49@h@H_301_49@a@H_301_49@r@H_301_49@v@H_301_49@i@H_301_49@s@H_301_49@@@H_301_49@@H_301_49@@H_301_49@c@H_301_49@e@H_301_49@p@H_301_49@h@H_301_49@−@H_301_49@n@H_301_49@o@H_301_49@d@H_301_49@@H_301_49@e@H_301_49@1@H_301_49@:@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@@H_301_49@ @H_301_49@$ceph auth del osd.4 updated harvis@ceph-node1:~$ ceph osd rm 4
removed osd.4
删除 osd.4 对应的存储目录(这通常是个软链接)
sudo rm -fr /var/lib/ceph/osd/ceph-4
这里对应的实际目录是 /var/local/osd3/ 将它删除掉 sudo rm -fr /var/local/osd3

[问题] heartbeat_map reset_timeout ‘OSD::osd_op_tp thread 0x7f104a89a700’ had timed out after 4

[解答]

[问题]

[解答]

[问题]

[解答]