日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

【ceph】ceph 网络问题和工具

發布時間:2024/1/1 编程问答 35 豆豆
生活随笔 收集整理的這篇文章主要介紹了 【ceph】ceph 网络问题和工具 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

yum?install -y net-tools

?netstat -anp|grep ganesha.nfsd

? ceph daemon /var/run/ceph/ceph-client.admin.1114156.139819448467456.asok config get xxx

?查看socket

netstat -lnxp

unix STREAM LISTENING 84402953 2946130/rados /var/run/ceph/ceph-admin.2946130.94651089703712.asok unix STREAM LISTENING 336026461 2807156/rados /var/run/ceph/ceph-admin.2807156.94357368345376.asok unix STREAM LISTENING 186741342 3320797/rados /var/run/ceph/ceph-admin.3320797.94106476679968.asok unix STREAM LISTENING 97390990 690481/rados /var/run/ceph/ceph-admin.690481.94219819733792.asok unix STREAM LISTENING 111978 1/systemd /run/systemd/private unix STREAM LISTENING 343380102 1831050/rados /var/run/ceph/ceph-admin.1831050.94326674244384.asok unix STREAM LISTENING 224768569 3726894/rados /var/run/ceph/ceph-admin.3726894.94886983721760.asok unix STREAM LISTENING 150163438 3744464/rados /var/run/ceph/ceph-admin.3744464.93915040211744.asok unix STREAM LISTENING 111987 1/systemd /run/lvm/lvmetad.socket unix STREAM LISTENING 74050952 2166906/rados /var/run/ceph/ceph-admin.2166906.93862492377888.asok unix STREAM LISTENING 69560405 21215/rados /var/run/ceph/ceph-admin.21215.94443882525472.asok unix STREAM LISTENING 380506858 1926693/rados /var/run/ceph/ceph-admin.1926693.94827481985824.asok unix STREAM LISTENING 241625897 2794366/rados /var/run/ceph/ceph-admin.2794366.94245238936352.asok

ceph daemon /var/run/ceph/ceph-admin.2794366.94245238936352.asok ?status

ceph --admin-daemon ceph-osd.1.asok config show

ceph --admin-daemon ceph-mon.node1.asok config show

[root@rdma55 system]# ceph daemon /var/run/ceph/ceph-admin.2794366.94245238936352.asok help
{
? ? "config diff": "dump diff of current config and default config",
? ? "config diff get": "dump diff get <field>: dump diff of current and default config setting <field>",
? ? "config get": "config get <field>: get the config value",
? ? "config help": "get config setting schema and descriptions",
? ? "config set": "config set <field> <val> [<val> ...]: set a config variable",
? ? "config show": "dump current config settings",
? ? "get_command_descriptions": "list available commands",
? ? "git_version": "get git sha1",
? ? "help": "list available commands",
? ? "log dump": "dump recent log entries to log file",
? ? "log flush": "flush log entries to log file",
? ? "log reopen": "reopen log file",
? ? "perf dump": "dump perfcounters value",
? ? "perf histogram dump": "dump perf histogram values",
? ? "perf histogram schema": "dump perf histogram schema",
? ? "perf reset": "perf reset <name>: perf reset all or one perfcounter name",
? ? "perf schema": "dump perfcounters schema",
? ? "version": "get ceph version"
}

[root@rdma55 system]# ceph daemon /var/run/ceph/ceph-admin.2794366.94245238936352.asok version
{"version":"12.2.1-UniStorOS_V100R001B62","release":"luminous","release_type":"stable"}[root@rdma55 system]#?

ceph鏈接查看


public_addr = 172.16.156.123
manage_addr = 172.16.31.123
cluster_addr = 192.168.156.123

[root@node123 ~]# ceph osd tree
ID ?CLASS WEIGHT ?TYPE NAME ? ? ? ? ? ? ? ? ? ? ?STATUS REWEIGHT PRI-AFF
-11 ? ? ? ? ? ? 0 root maintain
-10 ? ? ? 1.17224 root dcache-d1
-17 ? ? ? 1.17224 ? ? rack r1.dcache-d1
-21 ? ? ? 0.39075 ? ? ? ? host node122.dcache-d1
? 5 ? ? ? 0.09769 ? ? ? ? ? ? osd.5 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
?11 ? ? ? 0.09769 ? ? ? ? ? ? osd.11 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?17 ? ? ? 0.09769 ? ? ? ? ? ? osd.17 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?23 ? ? ? 0.09769 ? ? ? ? ? ? osd.23 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
-23 ? ? ? 0.39075 ? ? ? ? host node123.dcache-d1
? 4 ? ? ? 0.09769 ? ? ? ? ? ? osd.4 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
?10 ? ? ? 0.09769 ? ? ? ? ? ? osd.10 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?16 ? ? ? 0.09769 ? ? ? ? ? ? osd.16 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?22 ? ? ? 0.09769 ? ? ? ? ? ? osd.22 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
-25 ? ? ? 0.39075 ? ? ? ? host node124.dcache-d1
? 3 ? ? ? 0.09769 ? ? ? ? ? ? osd.3 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
? 9 ? ? ? 0.09769 ? ? ? ? ? ? osd.9 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
?15 ? ? ? 0.09769 ? ? ? ? ? ? osd.15 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?21 ? ? ? 0.09769 ? ? ? ? ? ? osd.21 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?-9 ? ? ? 9.73792 root d1
-12 ? ? ? 9.73792 ? ? rack r1.d1
-19 ? ? ? 3.24597 ? ? ? ? host node122.d1
? 2 ?nvme 0.81149 ? ? ? ? ? ? osd.2 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
? 8 ?nvme 0.81149 ? ? ? ? ? ? osd.8 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
?14 ?nvme 0.81149 ? ? ? ? ? ? osd.14 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?20 ?nvme 0.81149 ? ? ? ? ? ? osd.20 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?-7 ? ? ? 3.24597 ? ? ? ? host node123.d1
? 1 ?nvme 0.81149 ? ? ? ? ? ? osd.1 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
? 7 ?nvme 0.81149 ? ? ? ? ? ? osd.7 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
?13 ?nvme 0.81149 ? ? ? ? ? ? osd.13 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?19 ?nvme 0.81149 ? ? ? ? ? ? osd.19 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?-4 ? ? ? 3.24597 ? ? ? ? host node124.d1
? 0 ?nvme 0.81149 ? ? ? ? ? ? osd.0 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
? 6 ?nvme 0.81149 ? ? ? ? ? ? osd.6 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
?12 ?nvme 0.81149 ? ? ? ? ? ? osd.12 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?18 ?nvme 0.81149 ? ? ? ? ? ? osd.18 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?-1 ? ? ? ? ? ? 0 root default[root@node123 ~]# ceph daemon osd.1 messenger dump
{
? ? "cluster": {
? ? ? ? "name": "osd.1",
? ? ? ? "addr": "192.168.156.123:6808/1060851",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 12,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "client": {
? ? ? ? "name": "osd.1",
? ? ? ? "addr": "172.16.156.123:6819/1060851",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 7,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "ms_objecter": {
? ? ? ? "name": "osd.1",
? ? ? ? "addr": "-",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 0,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.1",
? ? ? ? "addr": "172.16.156.123:0/1060851",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 14,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.1",
? ? ? ? "addr": "192.168.156.123:0/1060851",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 14,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.1",
? ? ? ? "addr": "172.16.156.123:6820/1060851",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 3
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.1",
? ? ? ? "addr": "192.168.156.123:6809/1060851",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 3
? ? }
}
[root@node123 ~]# ps -ef | grep 1060851
ceph ? ? 1060851 ? ? ? 1 ?1 13:51 ? ? ? ? ?00:00:25 /opt/h3c/bin/ceph-osd --cluster=ceph -i 1 -f --setuser ceph --setgroup ceph
root ? ? 1217911 3511408 ?0 14:13 pts/0 ? ?00:00:00 grep --color=auto 1060851
[root@node123 ~]#

[root@node123 ~]# ceph daemon osd.1 connection dump cluster
{
? ? "established connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98dd8e000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6814/2011059",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c344f000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "192.168.156.123:6810/1060879",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 1
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98c8d1000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6808/2010936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 1
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3454000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? "peer_addr": "192.168.156.123:6812/1060936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9a1474000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6806/1530644",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa999f3b000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.8",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6802/3705373",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98dc8e000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.20",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6806/3705519",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98c8dc000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.2",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6800/3705344",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3458000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? "peer_addr": "192.168.156.123:6814/1060973",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 1
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa999f88000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.14",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6804/3705438",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 1
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa99ac4c000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6810/2010961",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98dc9a000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6812/2011020",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ],
? ? "accepting connections": [],
? ? "deleted connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9a1474000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6806/1530644",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? }
? ? ]
}
[root@node123 ~]#

[root@node123 ~]# ceph daemon osd.1 connection dump client
{
? ? "established connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98c891000",
? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? "peer_name": "dse.70684427",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6819/3705334",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c5840000",
? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? "peer_name": "dse.70684199",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6810/2008338",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97647e000",
? ? ? ? ? ? "peer_type": "mgr",
? ? ? ? ? ? "peer_name": "mgr.70684394",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6809/3705389",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 1
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98dd68000",
? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? "peer_name": "dse.70684099",
? ? ? ? ? ? "peer_addr": "172.16.156.123:6810/1058464",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9a740a000",
? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? "peer_name": "mon.1",
? ? ? ? ? ? "peer_addr": "172.16.156.123:6789/0",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9a7243000",
? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? "peer_name": "mon.0",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6789/0",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 1
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9a71d4000",
? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? "peer_name": "mon.2",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6789/0",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ],
? ? "accepting connections": [],
? ? "deleted connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9a7243000",
? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? "peer_name": "mon.0",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6789/0",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 1
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9a740a000",
? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? "peer_name": "mon.1",
? ? ? ? ? ? "peer_addr": "172.16.156.123:6789/0",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? }
? ? ]
}
[root@node123 ~]#

[root@node123 ~]# ceph daemon osd.1 connection dump ms_objecter
{
? ? "established connections": [],
? ? "accepting connections": [],
? ? "deleted connections": []
}
[root@node123 ~]#

[root@node123 ~]# ceph daemon osd.1 connection dump hb_front_client
{
? ? "established connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760f8000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6822/2010961",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760e4000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6826/2011059",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760d9000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6820/2010936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa99ad2d000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.20",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6807/3705519",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa999f6f000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.8",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6803/3705373",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98dd66000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.14",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6805/3705438",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa999f9f000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.2",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6801/3705344",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976068000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6808/1530644",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976072000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6804/1530563",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa99ace1000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? "peer_addr": "172.16.156.123:6826/1060973",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760ee000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6824/2011020",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97609a000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "172.16.156.123:6822/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760a4000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? "peer_addr": "172.16.156.123:6824/1060936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976086000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6806/1530602",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ],
? ? "accepting connections": [],
? ? "deleted connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976068000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6808/1530644",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976072000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6804/1530563",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976086000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6806/1530602",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97609a000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "172.16.156.123:6822/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ]
}
[root@node123 ~]#

[root@node123 ~]# ceph daemon osd.1 connection dump hb_back_client
{
? ? "established connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760e9000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6813/2011020",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760de000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6815/2011059",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760d4000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6809/2010936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa99ad34000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.2",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6801/3705344",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98dd24000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? "peer_addr": "192.168.156.123:6815/1060973",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760f3000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6811/2010961",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98dd39000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.14",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6805/3705438",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97606d000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6803/1530563",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976063000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6807/1530644",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98c925000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.20",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6807/3705519",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976081000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6805/1530602",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976095000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "192.168.156.123:6811/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa99ad1e000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.8",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6803/3705373",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97609f000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? "peer_addr": "192.168.156.123:6813/1060936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ],
? ? "accepting connections": [],
? ? "deleted connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976063000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6807/1530644",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97606d000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6803/1530563",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976081000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6805/1530602",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976095000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "192.168.156.123:6811/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ]
}

[root@node123 ~]# ceph daemon osd.1 connection dump hb_front_server
{
? ? "established connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3471000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2010936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c342b000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1060973",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3435000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1060936",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3440000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976043000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.20",
? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705519",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976077000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.8",
? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705373",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97607c000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.2",
? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705344",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976059000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2010961",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976090000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.14",
? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705438",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c345e000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2011059",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3469000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2011020",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ],
? ? "accepting connections": [],
? ? "deleted connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c342b000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1060973",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3435000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1060936",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3440000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ]
}

[root@node123 ~]# ceph daemon osd.1 connection dump hb_back_server
{
? ? "established connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c346d000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2010936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c343b000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976048000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.14",
? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705438",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97605e000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.2",
? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705344",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976054000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.20",
? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705519",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3430000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1060936",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3421000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2011059",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97608b000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.8",
? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705373",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3427000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1060973",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97604f000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2010961",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3462000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2011020",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ],
? ? "accepting connections": [],
? ? "deleted connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3427000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1060973",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3430000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1060936",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c343b000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ]
}

==========================================================================


[root@node123 ~]# lsblk
NAME ? ? ? ? ? ?MAJ:MIN RM ? SIZE RO TYPE MOUNTPOINT
sda ? ? ? ? ? ? ? 8:0 ? ?0 447.1G ?0 disk
????sda1 ? ? ? ? ? ?8:1 ? ?0 ? 200M ?0 part
????sda2 ? ? ? ? ? ?8:2 ? ?0 ? ? 1G ?0 part
????sda3 ? ? ? ? ? ?8:3 ? ?0 ? 446G ?0 part
? ????centos-swap 253:0 ? ?0 ? ? 4G ?0 lvm
? ????centos-home 253:1 ? ?0 ? 392G ?0 lvm
? ????centos-root 253:2 ? ?0 ? ?50G ?0 lvm
sdb ? ? ? ? ? ? ? 8:16 ? 0 447.1G ?0 disk
????sdb1 ? ? ? ? ? ?8:17 ? 0 ? 512M ?0 part /boot/efi
????sdb2 ? ? ? ? ? ?8:18 ? 0 ? ? 1G ?0 part /boot
????sdb3 ? ? ? ? ? ?8:19 ? 0 ? ?50G ?0 part /var/log
????sdb4 ? ? ? ? ? ?8:20 ? 0 ? ? 2G ?0 part
????sdb5 ? ? ? ? ? ?8:21 ? 0 ? ? 2M ?0 part
????sdb6 ? ? ? ? ? ?8:22 ? 0 393.6G ?0 part /
nvme5n1 ? ? ? ? 259:0 ? ?0 931.5G ?0 disk /corefile
nvme4n1 ? ? ? ? 259:1 ? ?0 931.5G ?0 disk
????nvme4n1p1 ? ? 259:34 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-13
????nvme4n1p2 ? ? 259:35 ? 0 ? 831G ?0 part
????nvme4n1p3 ? ? 259:36 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-16
????nvme4n1p4 ? ? 259:37 ? 0 ? 100G ?0 part
nvme0n1 ? ? ? ? 259:6 ? ?0 931.5G ?0 disk
????nvme0n1p1 ? ? 259:22 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-7
????nvme0n1p2 ? ? 259:23 ? 0 ? 831G ?0 part
????nvme0n1p3 ? ? 259:24 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-10
????nvme0n1p4 ? ? 259:25 ? 0 ? 100G ?0 part
nvme3n1 ? ? ? ? 259:7 ? ?0 931.5G ?0 disk
nvme2n1 ? ? ? ? 259:12 ? 0 931.5G ?0 disk
????nvme2n1p1 ? ? 259:26 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-1
????nvme2n1p2 ? ? 259:27 ? 0 ? 831G ?0 part
????nvme2n1p3 ? ? 259:28 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-4
????nvme2n1p4 ? ? 259:29 ? 0 ? 100G ?0 part
nvme1n1 ? ? ? ? 259:13 ? 0 931.5G ?0 disk
????nvme1n1p1 ? ? 259:30 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-19
????nvme1n1p2 ? ? 259:31 ? 0 ? 831G ?0 part
????nvme1n1p3 ? ? 259:32 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-22
????nvme1n1p4 ? ? 259:33 ? 0 ? 100G ?0 part[root@node123 ~]# ceph daemon dse.$(hostname) csd 22 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "osd.22",
? ? ? ? "addr": "192.168.156.123:6806/1058487",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "client": {
? ? ? ? "name": "osd.22",
? ? ? ? "addr": "172.16.156.123:6817/1058487",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 29,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.22",
? ? ? ? "addr": "172.16.156.123:0/1058487",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.22",
? ? ? ? "addr": "192.168.156.123:0/1058487",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.22",
? ? ? ? "addr": "172.16.156.123:6818/1058487",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.22",
? ? ? ? "addr": "192.168.156.123:6807/1058487",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}
[root@node123 ~]# ps -efL | grep 1058487
ceph ? ? 1058464 ? ? ? 1 1058487 ?0 ?310 13:50 ? ? ? ? ?00:00:00 /opt/h3c/bin/dse -f --cluster ceph --id node123 --setuser ceph --setgroup ceph
root ? ? 1267164 3511408 1267164 ?0 ? ?1 14:19 pts/0 ? ?00:00:00 grep --color=auto 1058487
[root@node123 ~]#

[root@node123 ~]# ceph daemon dse.$(hostname) csd 22 connection_dump
# "cluster"
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ecbf000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.23",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6814/3705358",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e3cf000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.17",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6812/3705352",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e3b3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.11",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6810/3705346",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 3
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5b3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.16",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:6804/1058481",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 3
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b901000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "unknown.0",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:6802/1058475",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 3
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e54d000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.21",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6806/2008360",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5b7000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.4",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:6800/1058469",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 3
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e63f000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.3",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6800/2008342",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 3
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e639000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.15",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6804/2008354",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e3e5000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.5",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6808/3705340",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e781000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.9",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6802/2008348",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [],
? ? ? ? "deleted connections": []
? ? }
}
# client
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b573000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/30985474",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b56b000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/2650456294",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b56f000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/1393244720",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b561000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/4175774431",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b57b000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/1621943635",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b55d000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/1061568166",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b535000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/664356854",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b517000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/2275291650",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b553000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1083449978",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b51b000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/3533738144",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b521000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1647920866",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b507000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1681816379",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0e3000",
? ? ? ? ? ? ? ? "peer_type": "mgr",
? ? ? ? ? ? ? ? "peer_name": "mgr.70684394",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6809/3705389",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b567000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3013228352",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b50b000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/2157587208",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0e7000",
? ? ? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? ? ? "peer_name": "mon.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6789/0",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b52b000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1216331179",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0eb000",
? ? ? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? ? ? "peer_name": "mon.1",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:6789/0",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0f3000",
? ? ? ? ? ? ? ? "peer_type": "mgr",
? ? ? ? ? ? ? ? "peer_name": "mgr.69634228",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6827/3388246",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0ef000",
? ? ? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? ? ? "peer_name": "mon.2",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6789/0",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b52f000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1885133971",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b543000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1330139901",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b539000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/836624565",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b547000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2591584495",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b53f000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/394393686",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b54b000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1527811008",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b50f000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/2526918123",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b525000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/2081169342",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b557000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/1148027175",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b503000",
? ? ? ? ? ? ? ? "peer_type": "unknown",
? ? ? ? ? ? ? ? "peer_name": "unknown.0",
? ? ? ? ? ? ? ? "peer_addr": "-",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "deleted connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0e7000",
? ? ? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? ? ? "peer_name": "mon.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6789/0",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0ef000",
? ? ? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? ? ? "peer_name": "mon.2",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6789/0",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0f3000",
? ? ? ? ? ? ? ? "peer_type": "mgr",
? ? ? ? ? ? ? ? "peer_name": "mgr.69634228",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6827/3388246",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b503000",
? ? ? ? ? ? ? ? "peer_type": "unknown",
? ? ? ? ? ? ? ? "peer_name": "unknown.0",
? ? ? ? ? ? ? ? "peer_addr": "-",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? }
? ? ? ? ]
? ? }
}
# hb_front_client
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ec69000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.5",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6821/3705340",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ec35000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.17",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6825/3705352",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ec89000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.23",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6827/3705358",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ec1f000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.11",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6823/3705346",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e4fb000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.21",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6818/2008360",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6bf000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.15",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6816/2008354",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6d7000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.9",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6814/2008348",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6ef000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.3",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6812/2008342",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6cf000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.10",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:6814/1058475",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6b7000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.16",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:6816/1058481",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [],
? ? ? ? "deleted connections": []
? ? }
}
# hb_back_client
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e769000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.23",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6815/3705358",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ea33000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.21",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6807/2008360",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ec2d000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.17",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6813/3705352",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6f3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.3",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6801/2008342",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6db000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.9",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6803/2008348",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6d3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.10",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:6803/1058475",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ec51000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.11",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6811/3705346",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6c3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.15",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6805/2008354",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ec41000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.5",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6809/3705340",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6bb000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.16",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:6805/1058481",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [],
? ? ? ? "deleted connections": []
? ? }
}
# hb_front_server
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5df000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.23",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705358",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5cf000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.5",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705340",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5af000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.4",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1058469",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5a7000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.10",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1058475",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5d7000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.17",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705352",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b58f000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.3",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2008342",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5ab000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.16",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1058481",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b593000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.15",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2008354",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5bf000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.21",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2008360",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b597000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.9",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2008348",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5c7000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.11",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705346",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [],
? ? ? ? "deleted connections": []
? ? }
}
# hb_back_server
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5db000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.23",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705358",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b59f000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.16",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1058481",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5d3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.17",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705352",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b59b000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.10",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1058475",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b58b000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.9",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2008348",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b583000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.3",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2008342",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b587000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.15",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2008354",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5cb000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.5",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705340",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5a3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.4",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1058469",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5bb000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.21",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2008360",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5c3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.11",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705346",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [],
? ? ? ? "deleted connections": []
? ? }
}


===========================================================================

hostip : 172.16.156.122
?engine.65539.0 engine_create_state: done
?engine.65539.1 engine_create_state: done
?engine.65539.2 engine_create_state: done
?engine.65539.3 engine_create_state: done
?engine.65542.0 engine_create_state: done
?engine.65542.1 engine_create_state: done
?engine.65542.2 engine_create_state: done
?engine.65542.3 engine_create_state: done
hostip : 172.16.156.123
?engine.65539.4 engine_create_state: done
?engine.65539.5 engine_create_state: done
?engine.65539.6 engine_create_state: done
?engine.65539.7 engine_create_state: done
?engine.65542.4 engine_create_state: done
?engine.65542.5 engine_create_state: done
?engine.65542.6 engine_create_state: done
?engine.65542.7 engine_create_state: done
hostip : 172.16.156.124
?engine.65539.8 engine_create_state: done
?engine.65539.9 engine_create_state: done
?engine.65539.a engine_create_state: done
?engine.65539.b engine_create_state: done
?engine.65542.8 engine_create_state: done
?engine.65542.9 engine_create_state: done
?engine.65542.a engine_create_state: done
?engine.65542.b engine_create_state: done

[root@node123 ~]# ceph daemon dse.$(hostname) engine 65542.7 messenger_dump
{
? ? "cluster": { ? [注] dse2dse_msgr
? ? ? ? "name": "dse.0",
? ? ? ? "addr": "172.16.156.123:6809/1058464",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 4,
? ? ? ? "number of accepting connection": 2,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "public": {
? ? ? ? "name": "dse.0",
? ? ? ? "addr": "172.16.156.123:6808/1058464",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "objecter": {
? ? ? ? "name": "dse.70684099",
? ? ? ? "addr": "172.16.156.123:6810/1058464",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 14,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? }
}

[root@node123 ~]# ps -ef | grep 1058464
ceph ? ? 1058464 ? ? ? 1 24 13:50 ? ? ? ? ?00:08:01 /opt/h3c/bin/dse -f --cluster ceph --id node123 --setuser ceph --setgroup ceph
root ? ? 1294093 3511408 ?0 14:23 pts/0 ? ?00:00:00 grep --color=auto 1058464
[root@node123 ~]#

[root@node123 ~]# ceph daemon dse.$(hostname) engine 65542.7 connection_dump
# "cluster": [注] dse2dse_msgr
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2a9000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "dse.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6818/3705334",
? ? ? ? ? ? ? ? "state": "STATE_STANDBY",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2ed000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "dse.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6817/3386390",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2ad000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "dse.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6809/2008338",
? ? ? ? ? ? ? ? "state": "STATE_STANDBY",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2f1000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "dse.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6817/1534398",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b48d000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "unknown.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6809/2008338",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b7e7000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "unknown.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6818/3705334",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "deleted connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2ed000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "dse.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6817/3386390",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2f1000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "dse.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6817/1534398",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b48d000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "unknown.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6809/2008338",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b7e7000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "unknown.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6818/3705334",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? }
? ? ? ? ]
? ? }
}
# public
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2662861000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707860",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1339674865",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2662869000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707857",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1071731267",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 7
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b361000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707869",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/3299471168",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 5
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b365000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707866",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/3207142384",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 6
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b319000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707851",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1079114638",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 4
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f266285d000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707826",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/76342377",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b343000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707853",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/419404416",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 6
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2662865000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707854",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/4161971061",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b325000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707863",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1016312339",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 7
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b333000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707872",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/941002412",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [],
? ? ? ? "deleted connections": []
? ? }
}
# objecter
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6edfd000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.14",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6804/3705438",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 3
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e205000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.1",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:6819/1060851",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e209000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6819/2010936",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 7
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2b1000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6825/2011059",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 3
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2d9000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6823/2011020",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2b5000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.20",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6806/3705519",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 6
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2637105000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6801/1530530",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 4
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e743000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:6821/1060879",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e183000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6821/2010961",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2dd000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6805/1530602",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2c5000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:6823/1060936",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 5
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e089000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.8",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6802/3705373",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 4
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2bd000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:6825/1060973",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2b9000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.2",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6800/3705344",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [],
? ? ? ? "deleted connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2637105000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6801/1530530",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 4
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2dd000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6805/1530602",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? }
? ? ? ? ]
? ? }
}

========================================================================================

其他OSD

[root@node124 26]# ceph daemon osd.18 messenger dump
{
? ? "cluster": {
? ? ? ? "name": "osd.18",
? ? ? ? "addr": "192.168.156.124:6814/2011059",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 3,
? ? ? ? "number of deleted connection": 3
? ? },
? ? "client": {
? ? ? ? "name": "osd.18",
? ? ? ? "addr": "172.16.156.124:6825/2011059",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 7,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "ms_objecter": {
? ? ? ? "name": "osd.18",
? ? ? ? "addr": "-",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 0,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.18",
? ? ? ? "addr": "172.16.156.124:0/2011059",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.18",
? ? ? ? "addr": "192.168.156.124:0/2011059",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.18",
? ? ? ? "addr": "172.16.156.124:6826/2011059",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.18",
? ? ? ? "addr": "192.168.156.124:6815/2011059",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}
[root@node124 26]#

[root@node123 26]# ceph daemon osd.7 messenger dump
{
? ? "cluster": {
? ? ? ? "name": "osd.7",
? ? ? ? "addr": "192.168.156.123:6810/1060879",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "client": {
? ? ? ? "name": "osd.7",
? ? ? ? "addr": "172.16.156.123:6821/1060879",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 8,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 3
? ? },
? ? "ms_objecter": {
? ? ? ? "name": "osd.7",
? ? ? ? "addr": "-",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 0,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.7",
? ? ? ? "addr": "172.16.156.123:0/1060879",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 14,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.7",
? ? ? ? "addr": "192.168.156.123:0/1060879",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 14,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.7",
? ? ? ? "addr": "172.16.156.123:6822/1060879",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.7",
? ? ? ? "addr": "192.168.156.123:6811/1060879",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? }
}
[root@node123 26]#

[root@node122 26]# ceph daemon osd.2 messenger dump
{
? ? "cluster": {
? ? ? ? "name": "osd.2",
? ? ? ? "addr": "192.168.156.122:6800/3705344",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "client": {
? ? ? ? "name": "osd.2",
? ? ? ? "addr": "172.16.156.122:6800/3705344",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 7,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "ms_objecter": {
? ? ? ? "name": "osd.2",
? ? ? ? "addr": "-",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 0,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.2",
? ? ? ? "addr": "172.16.156.122:0/3705344",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.2",
? ? ? ? "addr": "192.168.156.122:0/3705344",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.2",
? ? ? ? "addr": "172.16.156.122:6801/3705344",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 3
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.2",
? ? ? ? "addr": "192.168.156.122:6801/3705344",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 3
? ? }
}
[root@node122 26]#

# 其他CSD

[root@node122 26]# ceph daemon dse.$(hostname) csd 23 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "osd.23",
? ? ? ? "addr": "192.168.156.122:6814/3705358",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "client": {
? ? ? ? "name": "osd.23",
? ? ? ? "addr": "172.16.156.122:6826/3705358",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 12,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.23",
? ? ? ? "addr": "172.16.156.122:0/3705358",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.23",
? ? ? ? "addr": "192.168.156.122:0/3705358",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.23",
? ? ? ? "addr": "172.16.156.122:6827/3705358",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 8,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.23",
? ? ? ? "addr": "192.168.156.122:6815/3705358",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 8,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}

[root@node122 26]# ceph daemon dse.$(hostname) csd 17 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "192.168.156.122:6812/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "client": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "172.16.156.122:6824/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 12,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "172.16.156.122:0/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "192.168.156.122:0/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "172.16.156.122:6825/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "192.168.156.122:6813/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}
[root@node122 26]#

[root@node123 26]# ceph daemon dse.$(hostname) csd 16 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "osd.16",
? ? ? ? "addr": "192.168.156.123:6804/1058481",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "client": {
? ? ? ? "name": "osd.16",
? ? ? ? "addr": "172.16.156.123:6815/1058481",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 29,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 3
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.16",
? ? ? ? "addr": "172.16.156.123:0/1058481",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.16",
? ? ? ? "addr": "192.168.156.123:0/1058481",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.16",
? ? ? ? "addr": "172.16.156.123:6816/1058481",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.16",
? ? ? ? "addr": "192.168.156.123:6805/1058481",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}
[root@node123 26]#

[root@node124 26]# ceph daemon dse.$(hostname) csd 21 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "osd.21",
? ? ? ? "addr": "192.168.156.124:6806/2008360",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 2,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "client": {
? ? ? ? "name": "osd.21",
? ? ? ? "addr": "172.16.156.124:6817/2008360",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 29,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.21",
? ? ? ? "addr": "172.16.156.124:0/2008360",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.21",
? ? ? ? "addr": "192.168.156.124:0/2008360",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.21",
? ? ? ? "addr": "172.16.156.124:6818/2008360",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.21",
? ? ? ? "addr": "192.168.156.124:6807/2008360",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 4,
? ? ? ? "number of deleted connection": 4
? ? }
}
[root@node124 26]#

[root@node122 26]# ceph daemon dse.$(hostname) csd 5 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "osd.5",
? ? ? ? "addr": "192.168.156.122:6808/3705340",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "client": {
? ? ? ? "name": "osd.5",
? ? ? ? "addr": "172.16.156.122:6820/3705340",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 12,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.5",
? ? ? ? "addr": "172.16.156.122:0/3705340",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.5",
? ? ? ? "addr": "192.168.156.122:0/3705340",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.5",
? ? ? ? "addr": "172.16.156.122:6821/3705340",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.5",
? ? ? ? "addr": "192.168.156.122:6809/3705340",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}
[root@node122 26]#

[root@node122 26]# ceph daemon dse.$(hostname) csd 17 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "192.168.156.122:6812/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "client": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "172.16.156.122:6824/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 12,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "172.16.156.122:0/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "192.168.156.122:0/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "172.16.156.122:6825/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "192.168.156.122:6813/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}

[root@node122 26]# ceph daemon dse.$(hostname) engine 65539.0 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "dse.0",
? ? ? ? "addr": "172.16.156.122:6818/3705334",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 2,
? ? ? ? "number of accepting connection": 2,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "public": {
? ? ? ? "name": "dse.0",
? ? ? ? "addr": "172.16.156.122:6810/3705334",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 1,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "objecter": {
? ? ? ? "name": "dse.70684427",
? ? ? ? "addr": "172.16.156.122:6819/3705334",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 13,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? }
}
[root@node122 26]#

[root@node124 26]# ceph daemon dse.$(hostname) engine 65539.8 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "dse.0",
? ? ? ? "addr": "172.16.156.124:6809/2008338",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 4,
? ? ? ? "number of accepting connection": 2,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "public": {
? ? ? ? "name": "dse.0",
? ? ? ? "addr": "172.16.156.124:6801/2008338",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 2,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "objecter": {
? ? ? ? "name": "dse.70684199",
? ? ? ? "addr": "172.16.156.124:6810/2008338",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 12,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}
[root@node124 26]#

ceph 網絡問題常用排查手段

原文鏈接:https://blog.csdn.net/underzerotem/article/details/106577334


檢測Ceph環境中是否存在網絡問題,常用方法使用及總結如下:
Iperf3:IPerf3使用過程中會將網絡壓滿,會影響業務,只能和技服充分溝通后再使用

服務端:iperf3 -s -p 4000 -f M
iperf3 -s(服務端) -p 4000(端口號) -f 開關指定生成報告的數據格式類型

客戶端:
iperf3 -c 192.168.26.51 -f K
iperf3 -c 192.168.26.51(服務端的ip) -f K -i 1(1s 刷新1次) -t 60(運行60s) -p (port)

iperf3 -c 192.168.26.51 -f K -w 200K
-w 設置窗口大小和套接字緩沖區的大小

在服務器發送和客戶端接收的反向模式下運行,可以添加-R開關
iperf3 -c 192.168.26.51 -f K -w 200K -R

雙向運行測試,意味著我們要同時測量兩個方向上的寬帶 -d:
iperf3 -c 192.168.26.51 -f K -w 200K -d

如果要在客戶端輸出中獲取服務器結果,可以使用“–get-server-output”選項,此時我們便會在客戶端192.168.26.131主機上獲取兩份數據。
iperf3 -c 192.168.26.51 -f K -w 200K --get-server-output

使用-P選項設置并行客戶端流的數量,它們同時運行
iperf3 -c 192.168.26.51 -f K -w 200K -P 2

1、可以看到帶寬不穩,波動較大
2、Retr過高,重傳意味著丟包,tcp發生丟包會嚴重影響通信性能
3、窗口值過小,還沒有到1MB就開始重傳,滑動窗口太小,會降低性能

2、查詢ethX網口收發包統計,注意-S為大寫
ethtool -S eth2 | grep errors
[root@node1 lfl]# ethtool -S eth2 | grep errors
rx_crc_errors: 0
rx_missed_errors: 0
tx_aborted_errors: 0
tx_carrier_errors: 0
tx_window_errors: 0
rx_long_length_errors: 0
rx_short_length_errors: 0
rx_align_errors: 0
rx_errors: 0
tx_errors: 0
rx_length_errors: 0
rx_over_errors: 0
rx_frame_errors: 0
rx_fifo_errors: 0
tx_fifo_errors: 0
tx_heartbeat_errors: 0
排查bond2(業務網口)的各個網口是否存在錯誤信息。

3、netstat -i | column –t 查看網口接口信息

主要觀察RX-ERR 和 TX-ERR項
相關各項解釋如下:
Iface:網絡接口名稱
MTU:最大傳輸單元
RX-OK:接收時,正確的數據包數
RX-ERR:接收時,產生錯誤的數據包數
RX-DRP:接收時,丟棄的數據包數
RX-OVR:接收時,由于過速而丟失的數據包數
TX-OK:發送時,正確的數據包數
TX-ERR:發送時,產生錯誤的數據包數
TX-DRP:發送時,丟棄的數據包數
TX-OVR:發送時,由于過速而丟失的數據包數

4、
watch “cat /proc/net/snmp | grep Tcp | awk ‘{print $13,$14,$16}’| column -t”

InCsumErrors - 接收的帶有校驗和錯誤的報文數
TCP 接收的錯誤報文數
TCP 接收的目前所有建立連接的錯誤報文數
標紅的各項不停的幾十幾十的漲說明網絡存在問題

5、tcpdump分析抓取相關網口的cap包,抓取后拖入wireshark中進行分析
Tcpdump抓取相關包的方法如下:
抓取相關包:
tcpdump -i eth0 -s 0 -w file.pcap
可以指定端口進行抓包:tcpdump -i eth0 port 22
讀取抓包文件:
tcpdump -r file.pcap

總結

以上是生活随笔為你收集整理的【ceph】ceph 网络问题和工具的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

日日躁夜夜躁xxxxaaaa | 日日夜夜天天久久 | 98福利在线| 国产一级二级在线观看 | 色中射 | 在线免费观看黄色小说 | 国产精品久久久久久久久费观看 | 久久亚洲福利视频 | 欧美黑人xxxx猛性大交 | 999国内精品永久免费视频 | 92中文资源在线 | 成人激情开心网 | 天天干天天操天天操 | 久久久久久久久电影 | 97超碰超碰久久福利超碰 | 免费视频成人 | 日韩精品一区二区免费视频 | 狠狠操精品 | 在线观看免费视频你懂的 | 欧美aa在线| 亚洲高清91 | 婷婷激情五月综合 | 欧美午夜理伦三级在线观看 | 日韩精品一区在线播放 | 亚洲女欲精品久久久久久久18 | 2024国产在线| av官网在线 | 国产精成人品免费观看 | 三级小视频在线观看 | 91精品国产福利在线观看 | 日韩av中文字幕在线 | 看av在线| 在线观看视频免费大全 | 天天色天天射天天综合网 | 久久精品一区二区三区中文字幕 | av在线最新 | 国产精品中文字幕在线播放 | 午夜久久影视 | 国产黄在线看 | 中文字幕首页 | 亚洲天堂激情 | 91久久一区二区 | 欧美成人h版在线观看 | 五月婷婷六月综合 | 又黄又爽的视频在线观看网站 | 国产精品乱码久久久久久1区2区 | 四虎影视精品永久在线观看 | 中文字幕在线不卡国产视频 | 成人午夜性影院 | 国产无遮挡又黄又爽馒头漫画 | 97超碰免费在线观看 | 在线免费观看国产 | 91爱在线| 中日韩三级视频 | 国产亚洲在 | 色妞色视频一区二区三区四区 | 久久av影视 | 国产亚洲精品xxoo | www毛片com| 欧美色道 | av电影免费在线 | 亚洲精品网页 | 婷婷深爱网 | 成人黄大片 | 91丝袜美腿| 韩国精品福利一区二区三区 | 2018精品视频 | 日日干网址 | 五月天亚洲婷婷 | 国产精品久久久久久久久久新婚 | 久久国内视频 | 欧美日韩不卡一区二区三区 | 国产视频综合在线 | 成年人网站免费在线观看 | 成人av电影在线 | 美女国产| 免费观看国产成人 | 九九电影在线 | 色婷五月| 91黄色小视频 | 国产99爱 | 久久超级碰视频 | 久草免费资源 | 伊人宗合网 | 国产成人av电影在线观看 | 日韩在线观看高清 | 99 色| 免费看的黄网站软件 | 麻花豆传媒mv在线观看 | 最近中文字幕免费观看 | 黄污网站在线观看 | 欧美一区二区三区免费看 | 18久久久 | 91av官网| 国产黑丝一区二区三区 | 免费高清国产 | 国产99久久久国产精品免费看 | 国产在线观看不卡 | 亚洲国产精品久久久久婷婷884 | 在线观看一级视频 | 97精品国产91久久久久久久 | 99热超碰在线 | 免费亚洲视频在线观看 | 国产小视频在线观看 | 久久精品二区 | 亚洲人片在线观看 | 美女久久久久久久 | 波多野结衣小视频 | 亚洲国产精久久久久久久 | 日韩高清久久 | 欧美成人黄色 | 午夜91在线| 中文字幕在线播放第一页 | 91精品视频在线观看免费 | 久久久亚洲网站 | 免费网站色 | 久久一级电影 | 夜夜躁狠狠燥 | 国产精品成人av在线 | 看黄色.com | 在线观看一区二区视频 | 在线 高清 中文字幕 | 久草视频在线资源 | 久久色亚洲 | 一本到在线 | 美女精品国产 | 人人超在线公开视频 | 日日操日日操 | 人人藻人人澡人人爽 | 2022中文字幕在线观看 | 欧美精品一区二区性色 | 国产一级免费在线观看 | 激情婷婷色 | 日韩一级片观看 | 国内久久精品视频 | 日韩剧| 狠狠狠狠狠狠天天爱 | 国产黄色一级大片 | 天堂av最新网址 | 国产高清精品在线 | 日日插日日干 | 激情综合网在线观看 | 国内精品久久久久久久久久久 | 九草在线视频 | 免费在线国产精品 | 五月婷香 | 国产精品久久久久久爽爽爽 | 久久久久成人精品亚洲国产 | 免费在线黄色av | 亚洲精品美女在线 | 国产尤物在线 | 不卡av在线免费观看 | 午夜视频免费在线观看 | 国产亚洲视频在线 | 国产精品午夜免费福利视频 | 日韩欧美视频一区 | h视频在线看 | 午夜电影中文字幕 | 成人黄大片视频在线观看 | 亚洲精品一区二区精华 | 天天操狠狠操夜夜操 | 色综合久久综合中文综合网 | 日本精品一区二区三区在线观看 | 久草色在线观看 | 成人免费在线播放 | 狠狠五月婷婷 | 中文字幕91在线 | 91丝袜美腿| 亚洲人成影院在线 | 亚洲成年人在线播放 | 精品综合久久久 | 国产高清视频网 | 久久久99久久 | 九七视频在线 | 国产精品久久二区 | 日韩av线观看 | 看av免费| 国产一级片在线播放 | 久久精品成人 | 99久久久久国产精品免费 | 伊甸园永久入口www 99热 精品在线 | 麻豆免费看片 | 亚洲精品视频在线观看网站 | 亚洲乱亚洲乱亚洲 | 国产精品久久久网站 | 四虎在线免费观看视频 | 色老板在线视频 | 成人国产一区 | 日本一区二区三区免费观看 | 久久躁日日躁aaaaxxxx | 操操操人人 | 91精品啪在线观看国产线免费 | 欧美淫aaa免费观看 日韩激情免费视频 | 国产1区2区3区在线 亚洲自拍偷拍色图 | 91精品国产99久久久久 | 日韩字幕在线观看 | 日韩在线无| 天天爽夜夜爽精品视频婷婷 | 精品综合久久 | 在线亚洲播放 | 91在线精品一区二区 | 久草国产视频 | 在线观看网站你懂的 | 夜夜夜夜夜夜操 | 久久免费看视频 | 日韩高清 一区 | 久久久久久久久久久久国产精品 | 久久网站免费 | www激情com| 欧美日本中文字幕 | 久久精品电影 | 黄色网址国产 | 欧美成人精品欧美一级乱黄 | 国产精品高清免费在线观看 | www.色午夜,com| 国产精品毛片一区二区在线看 | 在线播放 亚洲 | 国模精品一区二区三区 | 一级成人网 | 蜜臀av性久久久久av蜜臀三区 | 欧美日一级片 | 在线观看免费视频你懂的 | 国产白浆视频 | 不卡中文字幕av | 一区二区伦理 | 中文字幕一区二区三区四区视频 | 麻豆传媒电影在线观看 | 婷婷伊人网 | 中文字幕第一页在线视频 | 天天干 夜夜操 | 欧美日韩一级久久久久久免费看 | 亚洲成av人片在线观看香蕉 | 一级黄色片在线播放 | 国产精品99免费看 | 中文字幕在线一区二区三区 | 国产精品一区二区 91 | 日本在线观看中文字幕无线观看 | 天堂久久电影网 | 精品国产一区二区在线 | 日韩欧美一区二区在线观看 | 亚洲天天综合 | 欧美视频xxx | 日日夜夜操操操操 | 久章草在线 | 国产大尺度视频 | 色婷婷成人网 | 亚洲一区二区三区miaa149 | 91成熟丰满女人少妇 | 久99久中文字幕在线 | 欧美夫妻生活视频 | 免费成人在线观看 | 国产精品99久久久久久久久久久久 | 国产精品久久久久久久久久久久久 | 久久超级碰 | 日韩中文在线字幕 | 91精品久久久久久综合乱菊 | 中文字幕中文中文字幕 | 三级黄色片子 | 天天操网| 91在线视频免费观看 | 最近中文字幕高清字幕在线视频 | 色综合天天综合 | 成人午夜精品 | 亚洲视频电影在线 | 在线免费观看视频你懂的 | 久草视频在线免费播放 | 伊人影院av| 中文字幕色站 | 视频一区二区在线 | 手机在线小视频 | 免费在线色 | av综合 日韩 | 亚洲免费高清视频 | av高清网站在线观看 | 亚洲成a人片77777kkkk1在线观看 | 久草在线在线视频 | 国产一级免费观看视频 | 奇米影视777四色米奇影院 | 欧美a在线看 | 久久男女视频 | 日本成人中文字幕在线观看 | 亚洲免费在线 | 在线免费观看黄网站 | 91麻豆文化传媒在线观看 | 婷婷深爱五月 | 日韩 在线a | 国产精品av免费在线观看 | 久久婷婷一区二区三区 | 天天艹天天爽 | 一区二区三区四区精品视频 | 久久久久国产精品午夜一区 | 91精品久久久久久久91蜜桃 | 午夜精品久久久久久中宇69 | 天天综合天天综合 | 91精品视频免费看 | 婷婷激情在线 | 久久久久久久久影院 | avlulu久久精品 | 久久天天拍 | 亚洲国产片色 | 91麻豆传媒 | 国产一级精品在线观看 | 俺要去色综合狠狠 | 天天做天天爱夜夜爽 | 久久不卡国产精品一区二区 | 日韩免费av在线 | 91香蕉视频黄 | 成人在线播放av | 亚洲国产精品小视频 | 国产精品区一区 | 最近久乱中文字幕 | 香蕉在线视频播放网站 | 国产精品乱码一区二区视频 | 久久刺激视频 | 综合久久2023 | 天天综合天天综合 | 成人免费网站视频 | 在线91视频 | 久久涩视频 | 欧美日韩成人一区 | 成人一区二区三区在线观看 | 国语对白少妇爽91 | 国产精品成人在线观看 | 91在线免费公开视频 | 久久免费国产电影 | 日日夜夜添| 最近中文字幕在线中文高清版 | 人人干人人搞 | 欧美日韩国产综合一区二区 | 久久久久国产成人免费精品免费 | 91女人18片女毛片60分钟 | 视频三区在线 | 西西人体www444 | 在线观看av大片 | 91视频一8mav | 永久免费毛片 | 最近免费中文字幕mv在线视频3 | 亚洲 欧美 精品 | 国产视频1区2区3区 久久夜视频 | 激情深爱五月 | 天天草天天 | 天天射天天舔天天干 | 最新极品jizzhd欧美 | 最近免费在线观看 | 久久不卡日韩美女 | 91成人破解版 | 顶级bbw搡bbbb搡bbbb | 中文字幕日韩在线播放 | 99在线观看视频 | 亚洲少妇久久 | 中文字幕精品www乱入免费视频 | 午夜色影院 | 99精品在线直播 | 国产一区免费在线 | 国产亚洲一级高清 | 久久精视频 | 日韩av影片在线观看 | 天天操夜夜操天天射 | 国产99在线免费 | 手机在线日韩视频 | 中文在线8新资源库 | 国产精品激情偷乱一区二区∴ | 亚洲精品观看 | 99久久综合精品五月天 | 久久久久久美女 | 国产高清在线a视频大全 | 美女黄久久 | 超碰97公开 | 91麻豆视频 | 久久99偷拍视频 | 白丝av在线 | 色综合五月 | 成人亚洲精品久久久久 | 亚洲91精品在线观看 | 黄免费网站 | 狠狠狠狠狠色综合 | 欧美夫妻性生活电影 | av资源中文字幕 | 欧美一级日韩三级 | 精品国产免费av | 91桃色在线播放 | 天天操夜夜爱 | 永久免费的av电影 | 日韩在线视频一区二区三区 | 欧美最猛性xxx | 激情九九 | 国产玖玖精品视频 | 草在线视频 | 一区二区三区高清不卡 | 国产精品久久久久久影院 | 91亚洲永久精品 | 久久午夜精品视频 | 成人黄色小说在线观看 | 99精品视频在线看 | 日本激情视频中文字幕 | 久久精品理论 | 亚洲视频 视频在线 | 久久久亚洲麻豆日韩精品一区三区 | 成片免费| 亚洲综合视频在线观看 | 日韩在线 一区二区 | 91人人干| 综合国产视频 | 国产欧美精品一区二区三区四区 | 国产精品一级视频 | 99热这里精品 | 在线小视频国产 | 国产小视频在线观看 | 日日干日日色 | 欧美a在线免费观看 | 天天插一插 | 一区二区三区视频网站 | 91久久爱热色涩涩 | 天天做天天爱天天爽综合网 | 91视频 - v11av| 亚洲四虎在线 | 91精品国产欧美一区二区成人 | 九九欧美 | 丝袜+亚洲+另类+欧美+变态 | 五月天久久激情 | 日韩精品一区二区三区免费观看 | 毛片网站免费 | 男女视频国产 | 一区二区在线不卡 | 久久午夜剧场 | 久久久久综合 | 久久久高清一区二区三区 | 国产视频精品网 | 在线中文字幕视频 | 91人人澡人人爽 | 国产精品剧情在线亚洲 | 又紧又大又爽精品一区二区 | 五月婷婷黄色 | 色亚洲网 | 亚洲精品九九 | 国产精品免费久久 | 亚洲第一区在线观看 | 又黄又刺激| 成人动漫一区二区三区 | 亚洲九九九在线观看 | 天天躁日日 | 国产玖玖在线 | 五月婷婷激情六月 | 亚洲国产精品日韩 | 国产精品va在线观看入 | 国产福利在线免费观看 | 欧美日韩一区二区三区视频 | 国产在线高清视频 | 久久精品91久久久久久再现 | 久久伦理影院 | 成片免费观看视频大全 | 97成人免费 | 99国产情侣在线播放 | 久久福利剧场 | 日韩av高潮 | 丁香久久婷婷 | 久精品视频在线观看 | 午夜.dj高清免费观看视频 | 91经典在线| 射射色| 色天天综合网 | 国产日女人| 免费成人黄色 | 免费看三级黄色片 | 大胆欧美gogo免费视频一二区 | 亚洲午夜久久久影院 | 香蕉视频18 | 欧美日韩精品在线观看 | 一本一道久久a久久精品蜜桃 | 黄色影院在线免费观看 | 精品视频www | 久久精品艹 | 国产黄色免费看 | 最近中文字幕第一页 | 黄色毛片大全 | 在线精品视频免费播放 | 夜夜躁天天躁很躁波 | 天堂v中文 | 国产午夜精品理论片在线 | 免费三级黄色 | 久久精品永久免费 | 国产成人精品一区二区三区福利 | 久久久久久久久电影 | 最新国产在线观看 | 精品国产一区二区三区日日嗨 | 一区二区三区精品在线视频 | 日韩av一区二区三区四区 | 成人av免费看 | 久草视频手机在线 | 久草视频网| 亚洲精品在线播放视频 | 国产欧美在线一区二区三区 | 国产区精品在线观看 | 欧美日韩中文在线视频 | 欧美日韩中文国产一区发布 | www.五月婷 | 色婷婷六月| 亚洲精欧美一区二区精品 | 超碰人人99 | 日本爽妇网 | 一级a毛片高清视频 | 成人毛片a | 久久午夜色播影院免费高清 | 一级精品视频在线观看宜春院 | 99精品免费久久久久久久久 | 99这里有精品 | 欧美日韩不卡一区二区三区 | 911精品美国片911久久久 | 国产精品永久免费观看 | 中文字幕第一页在线播放 | 91成品人影院 | 永久av免费在线观看 | 久久99深爱久久99精品 | 国产青春久久久国产毛片 | 国产精品黑丝在线观看 | 国产精品久久久久久久妇 | 激情综合国产 | 99久久成人 | 中文字幕一区在线 | 精品高清美女精品国产区 | 国产精品ssss在线亚洲 | 日韩精品久久一区二区三区 | 狠狠色伊人亚洲综合网站色 | 91丨九色丨蝌蚪丰满 | 中文字幕人成乱码在线观看 | 91精品婷婷国产综合久久蝌蚪 | 亚洲好视频 | 国产精品久久一区二区三区, | 国产成人三级一区二区在线观看一 | 三级av免费观看 | av中文字幕网址 | 国产精品av免费观看 | 免费看黄色大全 | 国产日产精品一区二区三区四区的观看方式 | 99精品乱码国产在线观看 | 亚洲成成品网站 | 中文字幕色播 | 免费观看一级成人毛片 | 日韩有码第一页 | 国产在线播放一区二区 | 五月香婷| 国产96av | 亚洲综合小说电影qvod | 人人插人人澡 | 日韩视频在线播放 | 国产精品理论片在线观看 | 欧美久久久久久 | 蜜臀久久99精品久久久无需会员 | 久久 在线| 天天色天天骑天天射 | 麻花豆传媒一二三产区 | 亚洲综合色网站 | 手机av观看| av千婊在线免费观看 | 色综合久久久久久久久五月 | 992tv在线观看网站 | 超碰99在线 | 国产美女无遮挡永久免费 | 国产精品伦一区二区三区视频 | 夜夜干天天操 | 久久成人国产精品一区二区 | 中文国产在线观看 | 午夜少妇一区二区三区 | 亚洲精品中文字幕在线观看 | 色的网站在线观看 | 亚洲精品国产日韩 | 国产视频二区三区 | 干亚洲少妇| 久久久久国产精品一区 | 国产视频二区三区 | 97人人澡人人爽人人模亚洲 | 免费观看久久久 | www.色com| 国产成人久久久久 | 四虎在线影视 | 久久久久久看片 | 中文字幕a在线 | 亚洲精品在线观看av | 久久艹国产 | 91av原创| 日韩综合视频在线观看 | 国产成人精品av在线 | 精品视频久久久 | 免费中文字幕视频 | 久久综合色播五月 | 亚洲情婷婷 | 天天摸天天操天天爽 | 日韩在线视频网址 | 中文字幕视频 | 国产一级h| 久久成人午夜视频 | 久久久久国产精品一区二区 | 99久精品视频 | 日韩在线在线 | 香蕉久久国产 | 久久精品久久99 | 亚洲少妇自拍 | 一区二区三区久久 | 亚洲精品黄| 欧美另类重口 | 欧美成人tv | 国产精品中文久久久久久久 | 欧美日韩国产一二 | 丁香国产视频 | 中文字幕高清在线 | aav在线| 最新av免费在线 | 婷婷爱五月天 | 97人人网 | 特级西西人体444是什么意思 | 免费日韩一区二区三区 | 精品国产99 | 久久久久亚洲a | 韩国精品福利一区二区三区 | 欧美精品一区二区蜜臀亚洲 | 永久中文字幕 | 精品国产乱码久久久久久1区二区 | 欧美性久久久 | 视频在线日韩 | 天堂va在线高清一区 | 精品国产免费观看 | 波多野结衣在线观看一区 | 亚洲最新在线 | 狠狠色丁香婷婷综合欧美 | 中文字幕在线视频一区二区三区 | 国产成人精品一区二区三区网站观看 | 国产亚洲日本 | 国产在线精品福利 | 91成人精品在线 | 久久久91精品国产一区二区精品 | 在线va视频 | 涩五月婷婷 | 人人爽人人片 | 精品欧美一区二区在线观看 | 欧美另类tv | 国产一级免费片 | 久操视频在线播放 | 天天操夜夜逼 | 成人av片免费观看app下载 | 久久综合在线 | 亚洲一级电影在线观看 | 丁香婷婷社区 | 天天色宗合 | 免费碰碰 | 久久伊人五月天 | 成人丁香花 | 成人羞羞免费 | 91在线看免费| 国产在线观看一区 | 又黄又刺激视频 | 亚洲精品免费在线视频 | 奇米7777狠狠狠琪琪视频 | 在线黄频 | 最近中文字幕国语免费av | 成 人 黄 色 视频免费播放 | 97国产在线视频 | 69av免费视频 | 韩国精品一区二区三区六区色诱 | 国产黄色在线网站 | 免费av片在线 | 国产高清视频在线播放一区 | 国产一区二区免费在线观看 | 女人18精品一区二区三区 | 国产中年夫妇高潮精品视频 | 六月丁香社区 | 一区二区影院 | 亚洲另类人人澡 | 免费在线播放黄色 | 久久久久久久久久免费视频 | 天天玩天天操天天射 | 美女网站视频色 | 久久视频网 | 午夜性福利 | 国产精品欧美久久久久无广告 | 一区二区国产精品 | 国产在线久久久 | 国色天香在线 | 精品国产精品国产偷麻豆 | 久久久不卡影院 | 日韩av成人| 婷婷色网 | 91网页版免费观看 | 久久久影院一区二区三区 | 中文字幕精| 国产精品乱码久久 | 免费黄色网址大全 | 免费视频97| 色婷婷五 | 日韩在线高清视频 | 欧美另类色图 | 国产精品激情 | 国产亚洲精品久久久网站好莱 | 91在线看黄 | 久久综合免费 | 97在线播放 | 91福利试看 | 999久久久久久久久6666 | av官网| 在线观看亚洲电影 | 欧美一级xxxx | 日日夜夜操操操操 | 国产精品6999成人免费视频 | 久久区二区 | 国产a级片免费观看 | 91久久偷偷做嫩草影院 | 欧美久草视频 | 国产精品久久一区二区三区不卡 | 不卡视频一区二区三区 | 中文字幕乱偷在线 | 五月激情在线 | 国产精品久久久久久久久久免费看 | 精品字幕在线 | 精品久久网 | 91精品导航 | 亚洲在线视频网站 | 丝袜美腿av | 欧美极品在线播放 | 亚洲综合激情 | 国产黄色大片免费看 | 日韩一区二区三区免费视频 | 国产精品视频 | 激情五月婷婷激情 | 91精彩视频在线观看 | 精品福利视频在线 | 国产久草在线 | 亚洲婷婷伊人 | 91精品国产乱码久久桃 | 亚洲精品视频免费在线 | 国产一区免费 | 欧洲精品视频一区二区 | 国产精品久久久久久久久久了 | 黄色av成人在线 | 亚洲欧美成人综合 | 在线成人短视频 | 4p变态网欧美系列 | 91完整版观看 | 国产午夜麻豆影院在线观看 | 99精品小视频| 91av电影在线观看 | 看v片 | 亚洲午夜精品久久久 | 国产精品亚洲人在线观看 | 中国一级片在线播放 | 视频91| 日日色综合 | 最近免费中文字幕mv在线视频3 | 免费日韩电影 | 18久久久 | 99精品视频中文字幕 | 粉嫩av一区二区三区免费 | 国产黄色一级片在线 | 色婷婷视频在线 | 人人澡人 | 500部大龄熟乱视频 欧美日本三级 | 中国一级特黄毛片大片久久 | 久久精品之 | 高清av免费观看 | 一区二区电影网 | 色网站在线看 | 国产成人免费网站 | 国产二区视频在线 | 综合色中色 | 国产精品亚洲视频 | 国产永久免费高清在线观看视频 | 狠狠的操你 | 最新日韩电影 | 一级黄色毛片 | 亚洲国产精品久久久久久 | 国产日韩中文字幕 | 最近日本mv字幕免费观看 | 精品国产自 | 欧美日韩精品影院 | 国产精品福利视频 | 成人精品国产 | 国产伦精品一区二区三区在线 | 免费a级黄色毛片 | 婷婷久久五月天 | 亚洲成人中文在线 | 色综合在| 日韩伦理片hd | 国产免费区 | 91精品免费 | 日韩毛片精品 | 久久国产香蕉视频 | 91av免费看 | www操操| 日本狠狠色 | 亚洲黑丝少妇 | www蜜桃视频| 丁香婷婷久久久综合精品国产 | 国产九九精品视频 | 日日爱av | www色综合| 久久久精品国产一区二区三区 | 成人黄色一级视频 | 天天干天天做 | 亚洲精品成人免费 | 国产精品久久久久久久久久三级 | 日本中文乱码卡一卡二新区 | 福利一区二区三区四区 | 三级在线视频播放 | 精品久久久久免费极品大片 | 免费中文字幕在线观看 | 亚洲国产精彩中文乱码av | 日韩精品无 | 久草热久草视频 | 在线观看一级视频 | 久久久久欠精品国产毛片国产毛生 | 久久久亚洲国产精品麻豆综合天堂 | 中文字幕一区二区三区久久蜜桃 | 99热超碰 | 97精品超碰一区二区三区 | 免费看的av片 | 在线看毛片网站 | 91大神精品视频在线观看 | 欧美日bb | av中文字幕亚洲 | 2021国产精品 | 91av视屏| 99精品视频在线免费观看 | www.色国产 | 在线亚洲成人 | 99精品视频免费观看视频 | 在线观看视频h | av一本久道久久波多野结衣 | 精品自拍网 | 国产精品18久久久 | 久久久久激情视频 | 99精品国产成人一区二区 | 国产精品久久久久免费 | 亚洲人人射 | 国产精品久久久久一区二区三区共 | 五月天色婷婷丁香 | 久久精品日产第一区二区三区乱码 | 精品黄色片 | 97成人精品区在线播放 | 久久久久久久久久影视 | 国产成人精品一区二区三区免费 | 色综合天天狠狠 | 久久不卡免费视频 | 中文字幕在线看视频 | 久久久免费观看视频 | 亚洲一级片在线观看 | 精品久久一二三区 | 麻豆影视在线播放 | 亚洲天堂va| 99在线精品视频观看 | 亚洲美女精品区人人人人 | 黄在线 | 国产精品欧美 | 男女免费视频观看 | 丝袜av一区 | 91成人在线观看喷潮 | 91av亚洲| 国产精久久 | 久久超碰网 | 亚洲高清精品在线 | free,性欧美| 日韩在线视频一区 | 日本久久久久久久久久久 | av在线看片| 综合av在线 | 91在线精品视频 | 精品国产一区二区三区久久久蜜臀 | 日本中文字幕在线播放 | 国产三级视频 | 亚洲最大成人网4388xx | 玖玖在线播放 | 国产成人一区二区三区 | 久草视频在线观 | 欧美一级片在线观看视频 | 亚洲精品中文字幕在线 | 亚洲.www| 超碰人人av | 亚洲欧美日韩精品久久奇米一区 | 日韩理论片 | 国产亚洲精品美女久久 | 欧美日韩一区久久 | 成人一级在线 | 91色一区二区三区 | 伊人色**天天综合婷婷 | 欧美在线视频精品 | 亚洲高清av | 久久艹国产视频 | 国产一区福利 | 欧美成人高清 | 国产一区免费 | 国产精品精品国产色婷婷 | 国产精品美女久久久网av | 欧美在线视频不卡 | 色中色综合 | 免费日韩 精品中文字幕视频在线 | 国产女教师精品久久av | 日韩欧美电影在线 | 国产一区自拍视频 | 久久艹艹 | 美女网站黄在线观看 | 日韩网| 国产无限资源在线观看 | 麻豆传媒在线免费看 | 欧美精品在线观看免费 | 亚洲精品国精品久久99热 | 国产精品一级视频 | 久久精品aaa | 中文字幕在线观 | 黄色片毛片 | 精品99在线视频 | 国产成人精品网站 | 伊人国产在线观看 | 精品99久久| 成年人在线免费视频观看 | 深夜国产福利 | 日韩中文字幕视频在线 | 亚洲精品乱码久久久久久 | 中文理论片 | 国产很黄很色的视频 | 麻花天美星空视频 | 国产精品video爽爽爽爽 | 欧美日韩精品在线视频 | 天天射天天干天天操 | 色资源在线 | 人人爽人人爽人人片av | 久久天堂影院 | 国产精品美女999 | 一区二区三区av在线 | 999在线视频 | 成人黄色大片在线观看 | 青青河边草观看完整版高清 | 黄色片软件网站 | 国产成人在线播放 | 丝袜美腿在线视频 | 精品久久久久久国产91 | 日韩精品一区二区三区视频播放 | 在线观看一级 | 国产一级久久久 | 久久男女视频 | 亚洲国产三级在线 | av久久久| 在线小视频你懂的 | a黄色| 日韩在线观看视频免费 | 天天干天天操天天拍 | 国产精品第72页 | 亚洲精品久久久久58 | 亚洲国产精品va在线看黑人动漫 | 欧美一级淫片videoshd | 日韩欧美亚州 | 九九免费精品视频在线观看 | 麻豆国产网站 | 正在播放国产91 | 中文在线中文资源 | 欧美福利在线播放 | 人人爱爱 | 欧美一级性 | 婷婷色av | 久久久一本精品99久久精品66 | 国产精品久久久久久久久久不蜜月 | 99久久久久久久 | 国产一区二区久久精品 | 在线视频观看你懂的 | 91激情视频在线 | 免费观看日韩av | 日韩精品免费一区二区三区 | 日韩1级片 | 在线精品观看国产 | 日日狠狠 | 国产日韩精品在线观看 | 成人在线一区二区三区 | 久久久av电影 | 日韩色高清 | 在线观看免费一级片 | 欧亚久久 | 在线国产能看的 | www免费网站在线观看 | av 在线观看 | 免费在线播放黄色 | 日本aa在线 | 久久乐九色婷婷综合色狠狠182 | 97夜夜澡人人爽人人免费 | 麻豆va一区二区三区久久浪 | 99色在线观看视频 | 久久亚洲精品国产亚洲老地址 | 美女在线观看av | 国产精品成人免费精品自在线观看 | 国产成人精品午夜在线播放 | 日韩av综合网站 | 久久看片网| 国产自制av | 久久久午夜精品理论片中文字幕 | 亚洲精品久久久久999中文字幕 | 亚洲国内精品 | av电影一区二区 | 久久中文网 | 亚洲 成人 欧美 | 超碰av在线免费观看 | 久久精品欧美一 | 天天搞天天干 | 国产亚洲精品久久久久久网站 |