久久精品国产精品国产精品污,男人扒开添女人下部免费视频,一级国产69式性姿势免费视频,夜鲁夜鲁很鲁在线视频 视频,欧美丰满少妇一区二区三区,国产偷国产偷亚洲高清人乐享,中文 在线 日韩 亚洲 欧美,熟妇人妻无乱码中文字幕真矢织江,一区二区三区人妻制服国产

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

【ceph】ceph 网络问题和工具

發布時間:2024/1/1 编程问答 22 豆豆
生活随笔 收集整理的這篇文章主要介紹了 【ceph】ceph 网络问题和工具 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

yum?install -y net-tools

?netstat -anp|grep ganesha.nfsd

? ceph daemon /var/run/ceph/ceph-client.admin.1114156.139819448467456.asok config get xxx

?查看socket

netstat -lnxp

unix STREAM LISTENING 84402953 2946130/rados /var/run/ceph/ceph-admin.2946130.94651089703712.asok unix STREAM LISTENING 336026461 2807156/rados /var/run/ceph/ceph-admin.2807156.94357368345376.asok unix STREAM LISTENING 186741342 3320797/rados /var/run/ceph/ceph-admin.3320797.94106476679968.asok unix STREAM LISTENING 97390990 690481/rados /var/run/ceph/ceph-admin.690481.94219819733792.asok unix STREAM LISTENING 111978 1/systemd /run/systemd/private unix STREAM LISTENING 343380102 1831050/rados /var/run/ceph/ceph-admin.1831050.94326674244384.asok unix STREAM LISTENING 224768569 3726894/rados /var/run/ceph/ceph-admin.3726894.94886983721760.asok unix STREAM LISTENING 150163438 3744464/rados /var/run/ceph/ceph-admin.3744464.93915040211744.asok unix STREAM LISTENING 111987 1/systemd /run/lvm/lvmetad.socket unix STREAM LISTENING 74050952 2166906/rados /var/run/ceph/ceph-admin.2166906.93862492377888.asok unix STREAM LISTENING 69560405 21215/rados /var/run/ceph/ceph-admin.21215.94443882525472.asok unix STREAM LISTENING 380506858 1926693/rados /var/run/ceph/ceph-admin.1926693.94827481985824.asok unix STREAM LISTENING 241625897 2794366/rados /var/run/ceph/ceph-admin.2794366.94245238936352.asok

ceph daemon /var/run/ceph/ceph-admin.2794366.94245238936352.asok ?status

ceph --admin-daemon ceph-osd.1.asok config show

ceph --admin-daemon ceph-mon.node1.asok config show

[root@rdma55 system]# ceph daemon /var/run/ceph/ceph-admin.2794366.94245238936352.asok help
{
? ? "config diff": "dump diff of current config and default config",
? ? "config diff get": "dump diff get <field>: dump diff of current and default config setting <field>",
? ? "config get": "config get <field>: get the config value",
? ? "config help": "get config setting schema and descriptions",
? ? "config set": "config set <field> <val> [<val> ...]: set a config variable",
? ? "config show": "dump current config settings",
? ? "get_command_descriptions": "list available commands",
? ? "git_version": "get git sha1",
? ? "help": "list available commands",
? ? "log dump": "dump recent log entries to log file",
? ? "log flush": "flush log entries to log file",
? ? "log reopen": "reopen log file",
? ? "perf dump": "dump perfcounters value",
? ? "perf histogram dump": "dump perf histogram values",
? ? "perf histogram schema": "dump perf histogram schema",
? ? "perf reset": "perf reset <name>: perf reset all or one perfcounter name",
? ? "perf schema": "dump perfcounters schema",
? ? "version": "get ceph version"
}

[root@rdma55 system]# ceph daemon /var/run/ceph/ceph-admin.2794366.94245238936352.asok version
{"version":"12.2.1-UniStorOS_V100R001B62","release":"luminous","release_type":"stable"}[root@rdma55 system]#?

ceph鏈接查看


public_addr = 172.16.156.123
manage_addr = 172.16.31.123
cluster_addr = 192.168.156.123

[root@node123 ~]# ceph osd tree
ID ?CLASS WEIGHT ?TYPE NAME ? ? ? ? ? ? ? ? ? ? ?STATUS REWEIGHT PRI-AFF
-11 ? ? ? ? ? ? 0 root maintain
-10 ? ? ? 1.17224 root dcache-d1
-17 ? ? ? 1.17224 ? ? rack r1.dcache-d1
-21 ? ? ? 0.39075 ? ? ? ? host node122.dcache-d1
? 5 ? ? ? 0.09769 ? ? ? ? ? ? osd.5 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
?11 ? ? ? 0.09769 ? ? ? ? ? ? osd.11 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?17 ? ? ? 0.09769 ? ? ? ? ? ? osd.17 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?23 ? ? ? 0.09769 ? ? ? ? ? ? osd.23 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
-23 ? ? ? 0.39075 ? ? ? ? host node123.dcache-d1
? 4 ? ? ? 0.09769 ? ? ? ? ? ? osd.4 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
?10 ? ? ? 0.09769 ? ? ? ? ? ? osd.10 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?16 ? ? ? 0.09769 ? ? ? ? ? ? osd.16 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?22 ? ? ? 0.09769 ? ? ? ? ? ? osd.22 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
-25 ? ? ? 0.39075 ? ? ? ? host node124.dcache-d1
? 3 ? ? ? 0.09769 ? ? ? ? ? ? osd.3 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
? 9 ? ? ? 0.09769 ? ? ? ? ? ? osd.9 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
?15 ? ? ? 0.09769 ? ? ? ? ? ? osd.15 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?21 ? ? ? 0.09769 ? ? ? ? ? ? osd.21 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?-9 ? ? ? 9.73792 root d1
-12 ? ? ? 9.73792 ? ? rack r1.d1
-19 ? ? ? 3.24597 ? ? ? ? host node122.d1
? 2 ?nvme 0.81149 ? ? ? ? ? ? osd.2 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
? 8 ?nvme 0.81149 ? ? ? ? ? ? osd.8 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
?14 ?nvme 0.81149 ? ? ? ? ? ? osd.14 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?20 ?nvme 0.81149 ? ? ? ? ? ? osd.20 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?-7 ? ? ? 3.24597 ? ? ? ? host node123.d1
? 1 ?nvme 0.81149 ? ? ? ? ? ? osd.1 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
? 7 ?nvme 0.81149 ? ? ? ? ? ? osd.7 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
?13 ?nvme 0.81149 ? ? ? ? ? ? osd.13 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?19 ?nvme 0.81149 ? ? ? ? ? ? osd.19 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?-4 ? ? ? 3.24597 ? ? ? ? host node124.d1
? 0 ?nvme 0.81149 ? ? ? ? ? ? osd.0 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
? 6 ?nvme 0.81149 ? ? ? ? ? ? osd.6 ? ? ? ? ? ? ? ? ?up ?1.00000 1.00000
?12 ?nvme 0.81149 ? ? ? ? ? ? osd.12 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?18 ?nvme 0.81149 ? ? ? ? ? ? osd.18 ? ? ? ? ? ? ? ? up ?1.00000 1.00000
?-1 ? ? ? ? ? ? 0 root default[root@node123 ~]# ceph daemon osd.1 messenger dump
{
? ? "cluster": {
? ? ? ? "name": "osd.1",
? ? ? ? "addr": "192.168.156.123:6808/1060851",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 12,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "client": {
? ? ? ? "name": "osd.1",
? ? ? ? "addr": "172.16.156.123:6819/1060851",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 7,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "ms_objecter": {
? ? ? ? "name": "osd.1",
? ? ? ? "addr": "-",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 0,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.1",
? ? ? ? "addr": "172.16.156.123:0/1060851",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 14,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.1",
? ? ? ? "addr": "192.168.156.123:0/1060851",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 14,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.1",
? ? ? ? "addr": "172.16.156.123:6820/1060851",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 3
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.1",
? ? ? ? "addr": "192.168.156.123:6809/1060851",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 3
? ? }
}
[root@node123 ~]# ps -ef | grep 1060851
ceph ? ? 1060851 ? ? ? 1 ?1 13:51 ? ? ? ? ?00:00:25 /opt/h3c/bin/ceph-osd --cluster=ceph -i 1 -f --setuser ceph --setgroup ceph
root ? ? 1217911 3511408 ?0 14:13 pts/0 ? ?00:00:00 grep --color=auto 1060851
[root@node123 ~]#

[root@node123 ~]# ceph daemon osd.1 connection dump cluster
{
? ? "established connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98dd8e000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6814/2011059",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c344f000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "192.168.156.123:6810/1060879",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 1
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98c8d1000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6808/2010936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 1
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3454000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? "peer_addr": "192.168.156.123:6812/1060936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9a1474000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6806/1530644",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa999f3b000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.8",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6802/3705373",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98dc8e000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.20",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6806/3705519",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98c8dc000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.2",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6800/3705344",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3458000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? "peer_addr": "192.168.156.123:6814/1060973",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 1
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa999f88000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.14",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6804/3705438",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 1
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa99ac4c000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6810/2010961",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98dc9a000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6812/2011020",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ],
? ? "accepting connections": [],
? ? "deleted connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9a1474000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6806/1530644",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? }
? ? ]
}
[root@node123 ~]#

[root@node123 ~]# ceph daemon osd.1 connection dump client
{
? ? "established connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98c891000",
? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? "peer_name": "dse.70684427",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6819/3705334",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c5840000",
? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? "peer_name": "dse.70684199",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6810/2008338",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97647e000",
? ? ? ? ? ? "peer_type": "mgr",
? ? ? ? ? ? "peer_name": "mgr.70684394",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6809/3705389",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 1
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98dd68000",
? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? "peer_name": "dse.70684099",
? ? ? ? ? ? "peer_addr": "172.16.156.123:6810/1058464",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9a740a000",
? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? "peer_name": "mon.1",
? ? ? ? ? ? "peer_addr": "172.16.156.123:6789/0",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9a7243000",
? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? "peer_name": "mon.0",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6789/0",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 1
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9a71d4000",
? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? "peer_name": "mon.2",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6789/0",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ],
? ? "accepting connections": [],
? ? "deleted connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9a7243000",
? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? "peer_name": "mon.0",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6789/0",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 1
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9a740a000",
? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? "peer_name": "mon.1",
? ? ? ? ? ? "peer_addr": "172.16.156.123:6789/0",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? "worker_id": 2
? ? ? ? }
? ? ]
}
[root@node123 ~]#

[root@node123 ~]# ceph daemon osd.1 connection dump ms_objecter
{
? ? "established connections": [],
? ? "accepting connections": [],
? ? "deleted connections": []
}
[root@node123 ~]#

[root@node123 ~]# ceph daemon osd.1 connection dump hb_front_client
{
? ? "established connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760f8000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6822/2010961",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760e4000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6826/2011059",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760d9000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6820/2010936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa99ad2d000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.20",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6807/3705519",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa999f6f000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.8",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6803/3705373",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98dd66000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.14",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6805/3705438",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa999f9f000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.2",
? ? ? ? ? ? "peer_addr": "172.16.156.122:6801/3705344",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976068000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6808/1530644",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976072000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6804/1530563",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa99ace1000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? "peer_addr": "172.16.156.123:6826/1060973",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760ee000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6824/2011020",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97609a000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "172.16.156.123:6822/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760a4000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? "peer_addr": "172.16.156.123:6824/1060936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976086000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6806/1530602",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ],
? ? "accepting connections": [],
? ? "deleted connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976068000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6808/1530644",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976072000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6804/1530563",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976086000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "172.16.156.124:6806/1530602",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97609a000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "172.16.156.123:6822/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ]
}
[root@node123 ~]#

[root@node123 ~]# ceph daemon osd.1 connection dump hb_back_client
{
? ? "established connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760e9000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6813/2011020",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760de000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6815/2011059",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760d4000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6809/2010936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa99ad34000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.2",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6801/3705344",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98dd24000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? "peer_addr": "192.168.156.123:6815/1060973",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9760f3000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6811/2010961",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98dd39000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.14",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6805/3705438",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97606d000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6803/1530563",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976063000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6807/1530644",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa98c925000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.20",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6807/3705519",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976081000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6805/1530602",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976095000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "192.168.156.123:6811/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa99ad1e000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.8",
? ? ? ? ? ? "peer_addr": "192.168.156.122:6803/3705373",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97609f000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? "peer_addr": "192.168.156.123:6813/1060936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ],
? ? "accepting connections": [],
? ? "deleted connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976063000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6807/1530644",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97606d000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6803/1530563",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976081000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "192.168.156.124:6805/1530602",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976095000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "192.168.156.123:6811/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ]
}

[root@node123 ~]# ceph daemon osd.1 connection dump hb_front_server
{
? ? "established connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3471000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2010936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c342b000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1060973",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3435000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1060936",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3440000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976043000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.20",
? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705519",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976077000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.8",
? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705373",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97607c000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.2",
? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705344",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976059000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2010961",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976090000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.14",
? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705438",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c345e000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2011059",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3469000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2011020",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ],
? ? "accepting connections": [],
? ? "deleted connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c342b000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1060973",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3435000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1060936",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3440000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ]
}

[root@node123 ~]# ceph daemon osd.1 connection dump hb_back_server
{
? ? "established connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c346d000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2010936",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c343b000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976048000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.14",
? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705438",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97605e000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.2",
? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705344",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa976054000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.20",
? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705519",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3430000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1060936",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3421000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2011059",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97608b000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.8",
? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705373",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3427000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1060973",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa97604f000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2010961",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3462000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2011020",
? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ],
? ? "accepting connections": [],
? ? "deleted connections": [
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3427000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1060973",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c3430000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1060936",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? },
? ? ? ? {
? ? ? ? ? ? "conn": "0x7fa9c343b000",
? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1060879",
? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? "worker_id": 0
? ? ? ? }
? ? ]
}

==========================================================================


[root@node123 ~]# lsblk
NAME ? ? ? ? ? ?MAJ:MIN RM ? SIZE RO TYPE MOUNTPOINT
sda ? ? ? ? ? ? ? 8:0 ? ?0 447.1G ?0 disk
????sda1 ? ? ? ? ? ?8:1 ? ?0 ? 200M ?0 part
????sda2 ? ? ? ? ? ?8:2 ? ?0 ? ? 1G ?0 part
????sda3 ? ? ? ? ? ?8:3 ? ?0 ? 446G ?0 part
? ????centos-swap 253:0 ? ?0 ? ? 4G ?0 lvm
? ????centos-home 253:1 ? ?0 ? 392G ?0 lvm
? ????centos-root 253:2 ? ?0 ? ?50G ?0 lvm
sdb ? ? ? ? ? ? ? 8:16 ? 0 447.1G ?0 disk
????sdb1 ? ? ? ? ? ?8:17 ? 0 ? 512M ?0 part /boot/efi
????sdb2 ? ? ? ? ? ?8:18 ? 0 ? ? 1G ?0 part /boot
????sdb3 ? ? ? ? ? ?8:19 ? 0 ? ?50G ?0 part /var/log
????sdb4 ? ? ? ? ? ?8:20 ? 0 ? ? 2G ?0 part
????sdb5 ? ? ? ? ? ?8:21 ? 0 ? ? 2M ?0 part
????sdb6 ? ? ? ? ? ?8:22 ? 0 393.6G ?0 part /
nvme5n1 ? ? ? ? 259:0 ? ?0 931.5G ?0 disk /corefile
nvme4n1 ? ? ? ? 259:1 ? ?0 931.5G ?0 disk
????nvme4n1p1 ? ? 259:34 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-13
????nvme4n1p2 ? ? 259:35 ? 0 ? 831G ?0 part
????nvme4n1p3 ? ? 259:36 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-16
????nvme4n1p4 ? ? 259:37 ? 0 ? 100G ?0 part
nvme0n1 ? ? ? ? 259:6 ? ?0 931.5G ?0 disk
????nvme0n1p1 ? ? 259:22 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-7
????nvme0n1p2 ? ? 259:23 ? 0 ? 831G ?0 part
????nvme0n1p3 ? ? 259:24 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-10
????nvme0n1p4 ? ? 259:25 ? 0 ? 100G ?0 part
nvme3n1 ? ? ? ? 259:7 ? ?0 931.5G ?0 disk
nvme2n1 ? ? ? ? 259:12 ? 0 931.5G ?0 disk
????nvme2n1p1 ? ? 259:26 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-1
????nvme2n1p2 ? ? 259:27 ? 0 ? 831G ?0 part
????nvme2n1p3 ? ? 259:28 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-4
????nvme2n1p4 ? ? 259:29 ? 0 ? 100G ?0 part
nvme1n1 ? ? ? ? 259:13 ? 0 931.5G ?0 disk
????nvme1n1p1 ? ? 259:30 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-19
????nvme1n1p2 ? ? 259:31 ? 0 ? 831G ?0 part
????nvme1n1p3 ? ? 259:32 ? 0 ? 100M ?0 part /var/lib/ceph/osd/ceph-22
????nvme1n1p4 ? ? 259:33 ? 0 ? 100G ?0 part[root@node123 ~]# ceph daemon dse.$(hostname) csd 22 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "osd.22",
? ? ? ? "addr": "192.168.156.123:6806/1058487",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "client": {
? ? ? ? "name": "osd.22",
? ? ? ? "addr": "172.16.156.123:6817/1058487",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 29,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.22",
? ? ? ? "addr": "172.16.156.123:0/1058487",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.22",
? ? ? ? "addr": "192.168.156.123:0/1058487",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.22",
? ? ? ? "addr": "172.16.156.123:6818/1058487",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.22",
? ? ? ? "addr": "192.168.156.123:6807/1058487",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}
[root@node123 ~]# ps -efL | grep 1058487
ceph ? ? 1058464 ? ? ? 1 1058487 ?0 ?310 13:50 ? ? ? ? ?00:00:00 /opt/h3c/bin/dse -f --cluster ceph --id node123 --setuser ceph --setgroup ceph
root ? ? 1267164 3511408 1267164 ?0 ? ?1 14:19 pts/0 ? ?00:00:00 grep --color=auto 1058487
[root@node123 ~]#

[root@node123 ~]# ceph daemon dse.$(hostname) csd 22 connection_dump
# "cluster"
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ecbf000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.23",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6814/3705358",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e3cf000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.17",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6812/3705352",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e3b3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.11",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6810/3705346",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 3
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5b3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.16",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:6804/1058481",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 3
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b901000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "unknown.0",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:6802/1058475",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 3
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e54d000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.21",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6806/2008360",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5b7000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.4",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:6800/1058469",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 3
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e63f000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.3",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6800/2008342",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 3
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e639000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.15",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6804/2008354",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e3e5000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.5",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6808/3705340",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e781000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.9",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6802/2008348",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cc-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [],
? ? ? ? "deleted connections": []
? ? }
}
# client
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b573000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/30985474",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b56b000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/2650456294",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b56f000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/1393244720",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b561000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/4175774431",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b57b000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/1621943635",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b55d000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/1061568166",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b535000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/664356854",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b517000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/2275291650",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b553000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1083449978",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b51b000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/3533738144",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b521000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1647920866",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b507000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1681816379",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0e3000",
? ? ? ? ? ? ? ? "peer_type": "mgr",
? ? ? ? ? ? ? ? "peer_name": "mgr.70684394",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6809/3705389",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b567000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3013228352",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b50b000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/2157587208",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0e7000",
? ? ? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? ? ? "peer_name": "mon.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6789/0",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b52b000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1216331179",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0eb000",
? ? ? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? ? ? "peer_name": "mon.1",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:6789/0",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0f3000",
? ? ? ? ? ? ? ? "peer_type": "mgr",
? ? ? ? ? ? ? ? "peer_name": "mgr.69634228",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6827/3388246",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0ef000",
? ? ? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? ? ? "peer_name": "mon.2",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6789/0",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b52f000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1885133971",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b543000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1330139901",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b539000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/836624565",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b547000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2591584495",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b53f000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/394393686",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b54b000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1527811008",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b50f000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/2526918123",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b525000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/2081169342",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b557000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.?",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/1148027175",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b503000",
? ? ? ? ? ? ? ? "peer_type": "unknown",
? ? ? ? ? ? ? ? "peer_name": "unknown.0",
? ? ? ? ? ? ? ? "peer_addr": "-",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "deleted connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0e7000",
? ? ? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? ? ? "peer_name": "mon.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6789/0",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0ef000",
? ? ? ? ? ? ? ? "peer_type": "mon",
? ? ? ? ? ? ? ? "peer_name": "mon.2",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6789/0",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b0f3000",
? ? ? ? ? ? ? ? "peer_type": "mgr",
? ? ? ? ? ? ? ? "peer_name": "mgr.69634228",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6827/3388246",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b503000",
? ? ? ? ? ? ? ? "peer_type": "unknown",
? ? ? ? ? ? ? ? "peer_name": "unknown.0",
? ? ? ? ? ? ? ? "peer_addr": "-",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "cp-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? }
? ? ? ? ]
? ? }
}
# hb_front_client
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ec69000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.5",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6821/3705340",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ec35000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.17",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6825/3705352",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ec89000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.23",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6827/3705358",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ec1f000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.11",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6823/3705346",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e4fb000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.21",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6818/2008360",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6bf000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.15",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6816/2008354",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6d7000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.9",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6814/2008348",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6ef000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.3",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6812/2008342",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6cf000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.10",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:6814/1058475",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6b7000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.16",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:6816/1058481",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [],
? ? ? ? "deleted connections": []
? ? }
}
# hb_back_client
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e769000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.23",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6815/3705358",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ea33000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.21",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6807/2008360",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ec2d000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.17",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6813/3705352",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6f3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.3",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6801/2008342",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6db000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.9",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6803/2008348",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6d3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.10",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:6803/1058475",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ec51000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.11",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6811/3705346",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6c3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.15",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:6805/2008354",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6ec41000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.5",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:6809/3705340",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e6bb000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.16",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:6805/1058481",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [],
? ? ? ? "deleted connections": []
? ? }
}
# hb_front_server
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5df000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.23",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705358",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5cf000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.5",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705340",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5af000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.4",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1058469",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5a7000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.10",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1058475",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5d7000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.17",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705352",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b58f000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.3",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2008342",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5ab000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.16",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:0/1058481",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b593000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.15",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2008354",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5bf000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.21",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2008360",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b597000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.9",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/2008348",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5c7000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.11",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:0/3705346",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [],
? ? ? ? "deleted connections": []
? ? }
}
# hb_back_server
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5db000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.23",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705358",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b59f000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.16",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1058481",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5d3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.17",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705352",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b59b000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.10",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1058475",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b58b000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.9",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2008348",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b583000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.3",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2008342",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b587000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.15",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2008354",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5cb000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.5",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705340",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5a3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.4",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.123:0/1058469",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5bb000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.21",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.124:0/2008360",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b5c3000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.11",
? ? ? ? ? ? ? ? "peer_addr": "192.168.156.122:0/3705346",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "hb-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [],
? ? ? ? "deleted connections": []
? ? }
}


===========================================================================

hostip : 172.16.156.122
?engine.65539.0 engine_create_state: done
?engine.65539.1 engine_create_state: done
?engine.65539.2 engine_create_state: done
?engine.65539.3 engine_create_state: done
?engine.65542.0 engine_create_state: done
?engine.65542.1 engine_create_state: done
?engine.65542.2 engine_create_state: done
?engine.65542.3 engine_create_state: done
hostip : 172.16.156.123
?engine.65539.4 engine_create_state: done
?engine.65539.5 engine_create_state: done
?engine.65539.6 engine_create_state: done
?engine.65539.7 engine_create_state: done
?engine.65542.4 engine_create_state: done
?engine.65542.5 engine_create_state: done
?engine.65542.6 engine_create_state: done
?engine.65542.7 engine_create_state: done
hostip : 172.16.156.124
?engine.65539.8 engine_create_state: done
?engine.65539.9 engine_create_state: done
?engine.65539.a engine_create_state: done
?engine.65539.b engine_create_state: done
?engine.65542.8 engine_create_state: done
?engine.65542.9 engine_create_state: done
?engine.65542.a engine_create_state: done
?engine.65542.b engine_create_state: done

[root@node123 ~]# ceph daemon dse.$(hostname) engine 65542.7 messenger_dump
{
? ? "cluster": { ? [注] dse2dse_msgr
? ? ? ? "name": "dse.0",
? ? ? ? "addr": "172.16.156.123:6809/1058464",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 4,
? ? ? ? "number of accepting connection": 2,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "public": {
? ? ? ? "name": "dse.0",
? ? ? ? "addr": "172.16.156.123:6808/1058464",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "objecter": {
? ? ? ? "name": "dse.70684099",
? ? ? ? "addr": "172.16.156.123:6810/1058464",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 14,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? }
}

[root@node123 ~]# ps -ef | grep 1058464
ceph ? ? 1058464 ? ? ? 1 24 13:50 ? ? ? ? ?00:08:01 /opt/h3c/bin/dse -f --cluster ceph --id node123 --setuser ceph --setgroup ceph
root ? ? 1294093 3511408 ?0 14:23 pts/0 ? ?00:00:00 grep --color=auto 1058464
[root@node123 ~]#

[root@node123 ~]# ceph daemon dse.$(hostname) engine 65542.7 connection_dump
# "cluster": [注] dse2dse_msgr
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2a9000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "dse.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6818/3705334",
? ? ? ? ? ? ? ? "state": "STATE_STANDBY",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2ed000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "dse.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6817/3386390",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2ad000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "dse.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6809/2008338",
? ? ? ? ? ? ? ? "state": "STATE_STANDBY",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2f1000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "dse.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6817/1534398",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b48d000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "unknown.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6809/2008338",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b7e7000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "unknown.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6818/3705334",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "deleted connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2ed000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "dse.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6817/3386390",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2f1000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "dse.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6817/1534398",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b48d000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "unknown.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6809/2008338",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b7e7000",
? ? ? ? ? ? ? ? "peer_type": "dse",
? ? ? ? ? ? ? ? "peer_name": "unknown.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6818/3705334",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "io-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? }
? ? ? ? ]
? ? }
}
# public
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2662861000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707860",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1339674865",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2662869000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707857",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1071731267",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 7
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b361000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707869",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/3299471168",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 5
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b365000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707866",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/3207142384",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 6
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b319000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707851",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1079114638",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 4
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f266285d000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707826",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/76342377",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b343000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707853",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/419404416",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 6
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2662865000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707854",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/4161971061",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b325000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707863",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/1016312339",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 7
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b333000",
? ? ? ? ? ? ? ? "peer_type": "client",
? ? ? ? ? ? ? ? "peer_name": "client.70707872",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:0/941002412",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "eng-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [],
? ? ? ? "deleted connections": []
? ? }
}
# objecter
{
? ? "connections": {
? ? ? ? "established connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6edfd000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.14",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6804/3705438",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 3
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e205000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.1",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:6819/1060851",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e209000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6819/2010936",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 7
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2b1000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.18",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6825/2011059",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 3
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2d9000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6823/2011020",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2b5000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.20",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6806/3705519",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 6
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2637105000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6801/1530530",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 4
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e743000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.7",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:6821/1060879",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e183000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.6",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6821/2010961",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2dd000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6805/1530602",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2c5000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.13",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:6823/1060936",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 5
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a6e089000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.8",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6802/3705373",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 4
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2bd000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.19",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.123:6825/1060973",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 0
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2b9000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.2",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.122:6800/3705344",
? ? ? ? ? ? ? ? "state": "STATE_OPEN",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 1
? ? ? ? ? ? }
? ? ? ? ],
? ? ? ? "accepting connections": [],
? ? ? ? "deleted connections": [
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2637105000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.0",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6801/1530530",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 4
? ? ? ? ? ? },
? ? ? ? ? ? {
? ? ? ? ? ? ? ? "conn": "0x7f2a4b2dd000",
? ? ? ? ? ? ? ? "peer_type": "osd",
? ? ? ? ? ? ? ? "peer_name": "osd.12",
? ? ? ? ? ? ? ? "peer_addr": "172.16.156.124:6805/1530602",
? ? ? ? ? ? ? ? "state": "STATE_CLOSED",
? ? ? ? ? ? ? ? "worker_name": "osdc-worker",
? ? ? ? ? ? ? ? "worker_id": 2
? ? ? ? ? ? }
? ? ? ? ]
? ? }
}

========================================================================================

其他OSD

[root@node124 26]# ceph daemon osd.18 messenger dump
{
? ? "cluster": {
? ? ? ? "name": "osd.18",
? ? ? ? "addr": "192.168.156.124:6814/2011059",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 3,
? ? ? ? "number of deleted connection": 3
? ? },
? ? "client": {
? ? ? ? "name": "osd.18",
? ? ? ? "addr": "172.16.156.124:6825/2011059",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 7,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "ms_objecter": {
? ? ? ? "name": "osd.18",
? ? ? ? "addr": "-",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 0,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.18",
? ? ? ? "addr": "172.16.156.124:0/2011059",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.18",
? ? ? ? "addr": "192.168.156.124:0/2011059",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.18",
? ? ? ? "addr": "172.16.156.124:6826/2011059",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.18",
? ? ? ? "addr": "192.168.156.124:6815/2011059",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}
[root@node124 26]#

[root@node123 26]# ceph daemon osd.7 messenger dump
{
? ? "cluster": {
? ? ? ? "name": "osd.7",
? ? ? ? "addr": "192.168.156.123:6810/1060879",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "client": {
? ? ? ? "name": "osd.7",
? ? ? ? "addr": "172.16.156.123:6821/1060879",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 8,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 3
? ? },
? ? "ms_objecter": {
? ? ? ? "name": "osd.7",
? ? ? ? "addr": "-",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 0,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.7",
? ? ? ? "addr": "172.16.156.123:0/1060879",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 14,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.7",
? ? ? ? "addr": "192.168.156.123:0/1060879",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 14,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.7",
? ? ? ? "addr": "172.16.156.123:6822/1060879",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.7",
? ? ? ? "addr": "192.168.156.123:6811/1060879",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? }
}
[root@node123 26]#

[root@node122 26]# ceph daemon osd.2 messenger dump
{
? ? "cluster": {
? ? ? ? "name": "osd.2",
? ? ? ? "addr": "192.168.156.122:6800/3705344",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "client": {
? ? ? ? "name": "osd.2",
? ? ? ? "addr": "172.16.156.122:6800/3705344",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 7,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "ms_objecter": {
? ? ? ? "name": "osd.2",
? ? ? ? "addr": "-",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 0,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.2",
? ? ? ? "addr": "172.16.156.122:0/3705344",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.2",
? ? ? ? "addr": "192.168.156.122:0/3705344",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.2",
? ? ? ? "addr": "172.16.156.122:6801/3705344",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 3
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.2",
? ? ? ? "addr": "192.168.156.122:6801/3705344",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 3
? ? }
}
[root@node122 26]#

# 其他CSD

[root@node122 26]# ceph daemon dse.$(hostname) csd 23 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "osd.23",
? ? ? ? "addr": "192.168.156.122:6814/3705358",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "client": {
? ? ? ? "name": "osd.23",
? ? ? ? "addr": "172.16.156.122:6826/3705358",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 12,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.23",
? ? ? ? "addr": "172.16.156.122:0/3705358",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.23",
? ? ? ? "addr": "192.168.156.122:0/3705358",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.23",
? ? ? ? "addr": "172.16.156.122:6827/3705358",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 8,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.23",
? ? ? ? "addr": "192.168.156.122:6815/3705358",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 8,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}

[root@node122 26]# ceph daemon dse.$(hostname) csd 17 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "192.168.156.122:6812/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "client": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "172.16.156.122:6824/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 12,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "172.16.156.122:0/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "192.168.156.122:0/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "172.16.156.122:6825/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "192.168.156.122:6813/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}
[root@node122 26]#

[root@node123 26]# ceph daemon dse.$(hostname) csd 16 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "osd.16",
? ? ? ? "addr": "192.168.156.123:6804/1058481",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "client": {
? ? ? ? "name": "osd.16",
? ? ? ? "addr": "172.16.156.123:6815/1058481",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 29,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 3
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.16",
? ? ? ? "addr": "172.16.156.123:0/1058481",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.16",
? ? ? ? "addr": "192.168.156.123:0/1058481",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.16",
? ? ? ? "addr": "172.16.156.123:6816/1058481",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.16",
? ? ? ? "addr": "192.168.156.123:6805/1058481",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}
[root@node123 26]#

[root@node124 26]# ceph daemon dse.$(hostname) csd 21 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "osd.21",
? ? ? ? "addr": "192.168.156.124:6806/2008360",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 2,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "client": {
? ? ? ? "name": "osd.21",
? ? ? ? "addr": "172.16.156.124:6817/2008360",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 29,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.21",
? ? ? ? "addr": "172.16.156.124:0/2008360",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.21",
? ? ? ? "addr": "192.168.156.124:0/2008360",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.21",
? ? ? ? "addr": "172.16.156.124:6818/2008360",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.21",
? ? ? ? "addr": "192.168.156.124:6807/2008360",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 4,
? ? ? ? "number of deleted connection": 4
? ? }
}
[root@node124 26]#

[root@node122 26]# ceph daemon dse.$(hostname) csd 5 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "osd.5",
? ? ? ? "addr": "192.168.156.122:6808/3705340",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "client": {
? ? ? ? "name": "osd.5",
? ? ? ? "addr": "172.16.156.122:6820/3705340",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 12,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.5",
? ? ? ? "addr": "172.16.156.122:0/3705340",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.5",
? ? ? ? "addr": "192.168.156.122:0/3705340",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.5",
? ? ? ? "addr": "172.16.156.122:6821/3705340",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.5",
? ? ? ? "addr": "192.168.156.122:6809/3705340",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}
[root@node122 26]#

[root@node122 26]# ceph daemon dse.$(hostname) csd 17 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "192.168.156.122:6812/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 1,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "client": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "172.16.156.122:6824/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 12,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "hb_front_client": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "172.16.156.122:0/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_client": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "192.168.156.122:0/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 10,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_front_server": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "172.16.156.122:6825/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? },
? ? "hb_back_server": {
? ? ? ? "name": "osd.17",
? ? ? ? "addr": "192.168.156.122:6813/3705352",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 11,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}

[root@node122 26]# ceph daemon dse.$(hostname) engine 65539.0 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "dse.0",
? ? ? ? "addr": "172.16.156.122:6818/3705334",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 2,
? ? ? ? "number of accepting connection": 2,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "public": {
? ? ? ? "name": "dse.0",
? ? ? ? "addr": "172.16.156.122:6810/3705334",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 1,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? },
? ? "objecter": {
? ? ? ? "name": "dse.70684427",
? ? ? ? "addr": "172.16.156.122:6819/3705334",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 13,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 1
? ? }
}
[root@node122 26]#

[root@node124 26]# ceph daemon dse.$(hostname) engine 65539.8 messenger_dump
{
? ? "cluster": {
? ? ? ? "name": "dse.0",
? ? ? ? "addr": "172.16.156.124:6809/2008338",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 4,
? ? ? ? "number of accepting connection": 2,
? ? ? ? "number of deleted connection": 4
? ? },
? ? "public": {
? ? ? ? "name": "dse.0",
? ? ? ? "addr": "172.16.156.124:6801/2008338",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 2,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 2
? ? },
? ? "objecter": {
? ? ? ? "name": "dse.70684199",
? ? ? ? "addr": "172.16.156.124:6810/2008338",
? ? ? ? "network stack type": "posix",
? ? ? ? "number of established connection": 12,
? ? ? ? "number of accepting connection": 0,
? ? ? ? "number of deleted connection": 0
? ? }
}
[root@node124 26]#

ceph 網絡問題常用排查手段

原文鏈接:https://blog.csdn.net/underzerotem/article/details/106577334


檢測Ceph環境中是否存在網絡問題,常用方法使用及總結如下:
Iperf3:IPerf3使用過程中會將網絡壓滿,會影響業務,只能和技服充分溝通后再使用

服務端:iperf3 -s -p 4000 -f M
iperf3 -s(服務端) -p 4000(端口號) -f 開關指定生成報告的數據格式類型

客戶端:
iperf3 -c 192.168.26.51 -f K
iperf3 -c 192.168.26.51(服務端的ip) -f K -i 1(1s 刷新1次) -t 60(運行60s) -p (port)

iperf3 -c 192.168.26.51 -f K -w 200K
-w 設置窗口大小和套接字緩沖區的大小

在服務器發送和客戶端接收的反向模式下運行,可以添加-R開關
iperf3 -c 192.168.26.51 -f K -w 200K -R

雙向運行測試,意味著我們要同時測量兩個方向上的寬帶 -d:
iperf3 -c 192.168.26.51 -f K -w 200K -d

如果要在客戶端輸出中獲取服務器結果,可以使用“–get-server-output”選項,此時我們便會在客戶端192.168.26.131主機上獲取兩份數據。
iperf3 -c 192.168.26.51 -f K -w 200K --get-server-output

使用-P選項設置并行客戶端流的數量,它們同時運行
iperf3 -c 192.168.26.51 -f K -w 200K -P 2

1、可以看到帶寬不穩,波動較大
2、Retr過高,重傳意味著丟包,tcp發生丟包會嚴重影響通信性能
3、窗口值過小,還沒有到1MB就開始重傳,滑動窗口太小,會降低性能

2、查詢ethX網口收發包統計,注意-S為大寫
ethtool -S eth2 | grep errors
[root@node1 lfl]# ethtool -S eth2 | grep errors
rx_crc_errors: 0
rx_missed_errors: 0
tx_aborted_errors: 0
tx_carrier_errors: 0
tx_window_errors: 0
rx_long_length_errors: 0
rx_short_length_errors: 0
rx_align_errors: 0
rx_errors: 0
tx_errors: 0
rx_length_errors: 0
rx_over_errors: 0
rx_frame_errors: 0
rx_fifo_errors: 0
tx_fifo_errors: 0
tx_heartbeat_errors: 0
排查bond2(業務網口)的各個網口是否存在錯誤信息。

3、netstat -i | column –t 查看網口接口信息

主要觀察RX-ERR 和 TX-ERR項
相關各項解釋如下:
Iface:網絡接口名稱
MTU:最大傳輸單元
RX-OK:接收時,正確的數據包數
RX-ERR:接收時,產生錯誤的數據包數
RX-DRP:接收時,丟棄的數據包數
RX-OVR:接收時,由于過速而丟失的數據包數
TX-OK:發送時,正確的數據包數
TX-ERR:發送時,產生錯誤的數據包數
TX-DRP:發送時,丟棄的數據包數
TX-OVR:發送時,由于過速而丟失的數據包數

4、
watch “cat /proc/net/snmp | grep Tcp | awk ‘{print $13,$14,$16}’| column -t”

InCsumErrors - 接收的帶有校驗和錯誤的報文數
TCP 接收的錯誤報文數
TCP 接收的目前所有建立連接的錯誤報文數
標紅的各項不停的幾十幾十的漲說明網絡存在問題

5、tcpdump分析抓取相關網口的cap包,抓取后拖入wireshark中進行分析
Tcpdump抓取相關包的方法如下:
抓取相關包:
tcpdump -i eth0 -s 0 -w file.pcap
可以指定端口進行抓包:tcpdump -i eth0 port 22
讀取抓包文件:
tcpdump -r file.pcap

總結

以上是生活随笔為你收集整理的【ceph】ceph 网络问题和工具的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

久热国产vs视频在线观看 | 国内精品九九久久久精品 | 成人片黄网站色大片免费观看 | 99国产精品白浆在线观看免费 | 无码国模国产在线观看 | 国产suv精品一区二区五 | 欧美色就是色 | 国产深夜福利视频在线 | 国产性生交xxxxx无码 | 国产综合在线观看 | 亚洲精品一区二区三区四区五区 | 精品国产国产综合精品 | 性欧美牲交xxxxx视频 | 久久99国产综合精品 | 小sao货水好多真紧h无码视频 | 亚洲成a人片在线观看无码3d | 日本在线高清不卡免费播放 | 亚洲国产欧美国产综合一区 | а√天堂www在线天堂小说 | 一本一道久久综合久久 | 青青久在线视频免费观看 | 中国大陆精品视频xxxx | 露脸叫床粗话东北少妇 | 永久免费观看国产裸体美女 | 国产成人一区二区三区在线观看 | 超碰97人人射妻 | 97资源共享在线视频 | 日本www一道久久久免费榴莲 | 亚洲一区二区三区 | 国产一区二区三区影院 | 国产精品无码一区二区桃花视频 | 性欧美疯狂xxxxbbbb | 在线天堂新版最新版在线8 | 日韩精品久久久肉伦网站 | 国产97人人超碰caoprom | 国产在线aaa片一区二区99 | 免费观看激色视频网站 | 欧美成人高清在线播放 | 午夜免费福利小电影 | 免费国产黄网站在线观看 | 国产在线aaa片一区二区99 | 女人被爽到呻吟gif动态图视看 | 日日橹狠狠爱欧美视频 | 亚洲成av人片在线观看无码不卡 | 免费国产黄网站在线观看 | 青青久在线视频免费观看 | 久久国语露脸国产精品电影 | 亚洲成色在线综合网站 | 丰满护士巨好爽好大乳 | 亚洲国产欧美在线成人 | 久久人妻内射无码一区三区 | 一本无码人妻在中文字幕免费 | 日韩精品a片一区二区三区妖精 | 一个人看的视频www在线 | 激情人妻另类人妻伦 | 亚洲国产精品美女久久久久 | 无码帝国www无码专区色综合 | 亚洲小说春色综合另类 | 蜜桃视频韩日免费播放 | 久久天天躁狠狠躁夜夜免费观看 | 一本久久a久久精品vr综合 | 偷窥村妇洗澡毛毛多 | 久久久www成人免费毛片 | 国产精品a成v人在线播放 | 野外少妇愉情中文字幕 | 国产人妻精品一区二区三区不卡 | 久久综合香蕉国产蜜臀av | 一本无码人妻在中文字幕免费 | 熟妇人妻中文av无码 | 亚洲精品一区三区三区在线观看 | 大地资源网第二页免费观看 | 乱码午夜-极国产极内射 | 漂亮人妻洗澡被公强 日日躁 | 日韩亚洲欧美精品综合 | 男女性色大片免费网站 | 亚洲精品中文字幕久久久久 | 亚洲色欲久久久综合网东京热 | 国产极品美女高潮无套在线观看 | 国产激情无码一区二区 | 午夜精品久久久内射近拍高清 | 麻花豆传媒剧国产免费mv在线 | 国产精品久久久一区二区三区 | 小泽玛莉亚一区二区视频在线 | 国产亚洲人成a在线v网站 | 色综合久久88色综合天天 | 动漫av一区二区在线观看 | 久久精品99久久香蕉国产色戒 | 国模大胆一区二区三区 | 欧美老人巨大xxxx做受 | 99久久久国产精品无码免费 | 女人和拘做爰正片视频 | 青青草原综合久久大伊人精品 | 麻豆md0077饥渴少妇 | 亚洲国产av美女网站 | 欧美精品无码一区二区三区 | 丝袜足控一区二区三区 | 亚洲精品中文字幕久久久久 | 久久久久99精品国产片 | 欧美大屁股xxxxhd黑色 | 男人的天堂2018无码 | 国内精品人妻无码久久久影院 | 欧美人与禽zoz0性伦交 | 4hu四虎永久在线观看 | 日本丰满护士爆乳xxxx | 中文字幕无码免费久久99 | 国产亚洲精品久久久久久大师 | 国内精品一区二区三区不卡 | 亚洲欧美日韩成人高清在线一区 | 国产色xx群视频射精 | 欧美 亚洲 国产 另类 | 亚洲国产av精品一区二区蜜芽 | 亚洲码国产精品高潮在线 | 国产亚洲精品久久久久久国模美 | 性欧美熟妇videofreesex | 野外少妇愉情中文字幕 | 久久久无码中文字幕久... | 亚洲午夜无码久久 | 免费播放一区二区三区 | 国产精品无码mv在线观看 | 免费无码午夜福利片69 | 精品乱码久久久久久久 | 丰满人妻一区二区三区免费视频 | 少妇人妻大乳在线视频 | 成人性做爰aaa片免费看 | 成人性做爰aaa片免费看不忠 | 日本熟妇人妻xxxxx人hd | 久久99久久99精品中文字幕 | 99麻豆久久久国产精品免费 | 免费中文字幕日韩欧美 | 亚洲一区二区三区播放 | 性生交片免费无码看人 | 夫妻免费无码v看片 | www一区二区www免费 | 欧美性生交xxxxx久久久 | 精品国偷自产在线视频 | 激情综合激情五月俺也去 | 人妻少妇精品无码专区二区 | 无码精品人妻一区二区三区av | 性开放的女人aaa片 | 亚洲一区二区三区 | 性色av无码免费一区二区三区 | 少妇性荡欲午夜性开放视频剧场 | 无码av中文字幕免费放 | 成人影院yy111111在线观看 | 熟妇女人妻丰满少妇中文字幕 | 狂野欧美性猛交免费视频 | 久久久久99精品国产片 | 乌克兰少妇xxxx做受 | 成在人线av无码免费 | 国内丰满熟女出轨videos | 精品人妻人人做人人爽夜夜爽 | 亚洲最大成人网站 | 特黄特色大片免费播放器图片 | 国产乱码精品一品二品 | 水蜜桃av无码 | 青青草原综合久久大伊人精品 | 久久久亚洲欧洲日产国码αv | 免费观看激色视频网站 | 四虎影视成人永久免费观看视频 | 欧美人与物videos另类 | 中文字幕av日韩精品一区二区 | 伊人久久大香线蕉亚洲 | 激情综合激情五月俺也去 | 日欧一片内射va在线影院 | 男女爱爱好爽视频免费看 | 国产又爽又黄又刺激的视频 | 色综合久久久无码中文字幕 | 好屌草这里只有精品 | 日韩精品无码一区二区中文字幕 | 性色av无码免费一区二区三区 | 欧美丰满少妇xxxx性 | 蜜桃av抽搐高潮一区二区 | 日本丰满熟妇videos | 欧美人与物videos另类 | 一个人免费观看的www视频 | 国产精品嫩草久久久久 | 乌克兰少妇xxxx做受 | 精品人人妻人人澡人人爽人人 | 给我免费的视频在线观看 | 装睡被陌生人摸出水好爽 | 久久无码人妻影院 | 1000部夫妻午夜免费 | 欧美人妻一区二区三区 | 久久久久国色av免费观看性色 | 亚洲男人av天堂午夜在 | 国产无av码在线观看 | 亚洲色成人中文字幕网站 | 又色又爽又黄的美女裸体网站 | 国产97在线 | 亚洲 | 大肉大捧一进一出好爽视频 | 美女黄网站人色视频免费国产 | 网友自拍区视频精品 | 日产精品99久久久久久 | 久久久成人毛片无码 | 久久精品一区二区三区四区 | 性色欲网站人妻丰满中文久久不卡 | 久久亚洲中文字幕精品一区 | 久久人人爽人人爽人人片av高清 | 日韩亚洲欧美精品综合 | 国产一精品一av一免费 | 精品久久8x国产免费观看 | 性做久久久久久久免费看 | 免费中文字幕日韩欧美 | 风流少妇按摩来高潮 | 国产精品福利视频导航 | 学生妹亚洲一区二区 | 精品久久8x国产免费观看 | 国产成人一区二区三区别 | 4hu四虎永久在线观看 | 国产精品欧美成人 | 最新国产乱人伦偷精品免费网站 | 色综合视频一区二区三区 | 欧美丰满少妇xxxx性 | 亚洲欧洲日本综合aⅴ在线 | 小泽玛莉亚一区二区视频在线 | 亚洲人成影院在线无码按摩店 | 成人无码影片精品久久久 | 免费网站看v片在线18禁无码 | 全球成人中文在线 | 2019午夜福利不卡片在线 | 亚洲精品综合一区二区三区在线 | 综合人妻久久一区二区精品 | 久久亚洲日韩精品一区二区三区 | 99久久人妻精品免费二区 | 麻豆国产人妻欲求不满谁演的 | 精品一二三区久久aaa片 | 麻豆蜜桃av蜜臀av色欲av | 丝袜人妻一区二区三区 | 亚洲精品国偷拍自产在线麻豆 | 国产欧美精品一区二区三区 | 99久久精品午夜一区二区 | 国内揄拍国内精品少妇国语 | 无遮挡国产高潮视频免费观看 | 娇妻被黑人粗大高潮白浆 | 亚洲最大成人网站 | 国产欧美亚洲精品a | 国产精品办公室沙发 | 久在线观看福利视频 | 亚洲精品国产精品乱码不卡 | 亚洲国产午夜精品理论片 | 国产suv精品一区二区五 | 丰满人妻一区二区三区免费视频 | 欧美国产日产一区二区 | 成人毛片一区二区 | 亚洲欧洲日本综合aⅴ在线 | 动漫av网站免费观看 | 成人欧美一区二区三区 | 久久这里只有精品视频9 | 中文字幕无码人妻少妇免费 | 久久久久成人精品免费播放动漫 | 中文精品无码中文字幕无码专区 | 中文无码伦av中文字幕 | 国语自产偷拍精品视频偷 | 国产av一区二区精品久久凹凸 | 又紧又大又爽精品一区二区 | 久久久久久九九精品久 | 国产av无码专区亚洲a∨毛片 | 小泽玛莉亚一区二区视频在线 | 性色av无码免费一区二区三区 | 无码国产乱人伦偷精品视频 | 国产精品自产拍在线观看 | 无码av中文字幕免费放 | 婷婷六月久久综合丁香 | 国产又粗又硬又大爽黄老大爷视 | 国产国语老龄妇女a片 | 欧美第一黄网免费网站 | 久久亚洲中文字幕精品一区 | 自拍偷自拍亚洲精品被多人伦好爽 | 亚洲精品午夜国产va久久成人 | 成人精品天堂一区二区三区 | 成人三级无码视频在线观看 | 久久精品国产亚洲精品 | 人妻无码久久精品人妻 | 偷窥日本少妇撒尿chinese | 国产艳妇av在线观看果冻传媒 | 亚洲天堂2017无码 | 国产精品亚洲а∨无码播放麻豆 | 99精品久久毛片a片 | www一区二区www免费 | 色偷偷av老熟女 久久精品人妻少妇一区二区三区 | 人妻尝试又大又粗久久 | 亚洲国产日韩a在线播放 | 中文字幕无码免费久久99 | 国产在线精品一区二区高清不卡 | 久久婷婷五月综合色国产香蕉 | 精品国偷自产在线视频 | 激情内射日本一区二区三区 | 男人的天堂2018无码 | 网友自拍区视频精品 | 国产精品久久久久久亚洲影视内衣 | 超碰97人人做人人爱少妇 | 一二三四在线观看免费视频 | 国产精品igao视频网 | 日本高清一区免费中文视频 | 久久视频在线观看精品 | 亚洲欧美中文字幕5发布 | 亚洲大尺度无码无码专区 | 人妻体内射精一区二区三四 | 九九综合va免费看 | 狂野欧美性猛xxxx乱大交 | 日韩成人一区二区三区在线观看 | 日韩人妻系列无码专区 | 国产av无码专区亚洲awww | 一个人看的www免费视频在线观看 | 婷婷五月综合缴情在线视频 | 精品人妻人人做人人爽夜夜爽 | 中文字幕+乱码+中文字幕一区 | 亚洲色欲色欲天天天www | 内射爽无广熟女亚洲 | 自拍偷自拍亚洲精品被多人伦好爽 | 亚洲欧美日韩国产精品一区二区 | 中文字幕乱码亚洲无线三区 | 亚洲色www成人永久网址 | 荫蒂添的好舒服视频囗交 | 亚洲色大成网站www国产 | 中文字幕无码免费久久9一区9 | 女高中生第一次破苞av | 中文字幕人妻无码一区二区三区 | 久久伊人色av天堂九九小黄鸭 | 无码毛片视频一区二区本码 | 亚洲色无码一区二区三区 | 性色欲网站人妻丰满中文久久不卡 | 国产精品丝袜黑色高跟鞋 | 亚洲男女内射在线播放 | 好屌草这里只有精品 | 奇米影视888欧美在线观看 | 久久久久久九九精品久 | 99久久久无码国产精品免费 | 色狠狠av一区二区三区 | 成年美女黄网站色大免费视频 | 亚洲色大成网站www国产 | 国产欧美精品一区二区三区 | 国产人妻精品午夜福利免费 | 狂野欧美激情性xxxx | 亚洲区小说区激情区图片区 | 国产sm调教视频在线观看 | 欧美丰满少妇xxxx性 | 中文字幕 亚洲精品 第1页 | 国产精品久久久一区二区三区 | 永久黄网站色视频免费直播 | 亚洲国产精品美女久久久久 | 377p欧洲日本亚洲大胆 | 国产在线无码精品电影网 | 久久久无码中文字幕久... | 亚洲天堂2017无码中文 | 女人高潮内射99精品 | 麻豆人妻少妇精品无码专区 | 高潮毛片无遮挡高清免费 | av小次郎收藏 | 国产莉萝无码av在线播放 | 中国大陆精品视频xxxx | 亚洲国产成人a精品不卡在线 | 国产精品美女久久久久av爽李琼 | 中文字幕无码av波多野吉衣 | 97se亚洲精品一区 | 麻豆精产国品 | 丝袜足控一区二区三区 | 免费中文字幕日韩欧美 | 四虎影视成人永久免费观看视频 | 精品偷拍一区二区三区在线看 | 婷婷丁香五月天综合东京热 | 日本熟妇人妻xxxxx人hd | 激情爆乳一区二区三区 | 77777熟女视频在线观看 а天堂中文在线官网 | 国产va免费精品观看 | 亚洲欧洲日本综合aⅴ在线 | 亚洲国产欧美在线成人 | 亚洲中文字幕无码一久久区 | 99久久99久久免费精品蜜桃 | 亚洲精品一区二区三区婷婷月 | 久久天天躁狠狠躁夜夜免费观看 | av无码久久久久不卡免费网站 | 色婷婷欧美在线播放内射 | 人妻aⅴ无码一区二区三区 | 性欧美牲交xxxxx视频 | 亚洲国产精品无码一区二区三区 | 亚洲精品一区二区三区在线观看 | 国产乱人伦app精品久久 国产在线无码精品电影网 国产国产精品人在线视 | 女人和拘做爰正片视频 | 中文字幕无码日韩欧毛 | 亚洲精品鲁一鲁一区二区三区 | 国产亚洲美女精品久久久2020 | 巨爆乳无码视频在线观看 | 未满小14洗澡无码视频网站 | 国产无遮挡吃胸膜奶免费看 | 国产在线aaa片一区二区99 | 色欲久久久天天天综合网精品 | 久久久亚洲欧洲日产国码αv | 精品一二三区久久aaa片 | 欧美xxxxx精品 | 在线亚洲高清揄拍自拍一品区 | 国产亚洲欧美在线专区 | 色情久久久av熟女人妻网站 | 欧美成人午夜精品久久久 | 人人爽人人爽人人片av亚洲 | 国产又粗又硬又大爽黄老大爷视 | 国产精品久久久av久久久 | 精品久久久久久人妻无码中文字幕 | 成人三级无码视频在线观看 | 精品久久综合1区2区3区激情 | 无码人妻精品一区二区三区下载 | 99久久亚洲精品无码毛片 | 99久久精品日本一区二区免费 | 久久99精品久久久久婷婷 | 人人妻人人澡人人爽欧美一区九九 | 亚洲综合另类小说色区 | 亚洲の无码国产の无码影院 | 久久久久久国产精品无码下载 | 亚洲 欧美 激情 小说 另类 | 少妇无码av无码专区在线观看 | 丰满人妻一区二区三区免费视频 | 97夜夜澡人人双人人人喊 | 又大又硬又爽免费视频 | 久久久精品成人免费观看 | 国产精品高潮呻吟av久久 | 久久人人爽人人爽人人片av高清 | 老子影院午夜精品无码 | www一区二区www免费 | 国产明星裸体无码xxxx视频 | 无码中文字幕色专区 | 美女黄网站人色视频免费国产 | 67194成是人免费无码 | 国产明星裸体无码xxxx视频 | 亚洲精品成a人在线观看 | 国产精品99久久精品爆乳 | 成年美女黄网站色大免费视频 | 自拍偷自拍亚洲精品10p | 人人澡人人透人人爽 | 国产人妻精品一区二区三区不卡 | 国精产品一品二品国精品69xx | 2019午夜福利不卡片在线 | 蜜桃av蜜臀av色欲av麻 999久久久国产精品消防器材 | 2019午夜福利不卡片在线 | 亚洲精品国产品国语在线观看 | 精品成人av一区二区三区 | 欧美国产日韩久久mv | 日韩精品无码免费一区二区三区 | 成人精品视频一区二区三区尤物 | 99在线 | 亚洲 | 亚洲一区二区三区 | 内射老妇bbwx0c0ck | 成人无码影片精品久久久 | 亚洲七七久久桃花影院 | 无套内谢的新婚少妇国语播放 | 欧美日韩精品 | 人人妻人人澡人人爽精品欧美 | 国产成人无码av在线影院 | 国产成人精品一区二区在线小狼 | 300部国产真实乱 | 99久久精品午夜一区二区 | 99久久久国产精品无码免费 | 成人av无码一区二区三区 | 中文字幕无码日韩专区 | 日韩欧美成人免费观看 | 天天躁日日躁狠狠躁免费麻豆 | 鲁一鲁av2019在线 | 窝窝午夜理论片影院 | 久久精品国产精品国产精品污 | 中文字幕色婷婷在线视频 | 色五月丁香五月综合五月 | 丰满妇女强制高潮18xxxx | 国内精品九九久久久精品 | 亚洲中文无码av永久不收费 | 香港三级日本三级妇三级 | 国产真实乱对白精彩久久 | 亚洲熟妇色xxxxx亚洲 | 色一情一乱一伦一视频免费看 | 男人和女人高潮免费网站 | 免费无码午夜福利片69 | 红桃av一区二区三区在线无码av | 亚洲精品久久久久久一区二区 | 男女超爽视频免费播放 | 久久精品人人做人人综合试看 | 国产高潮视频在线观看 | 樱花草在线社区www | 精品无码国产一区二区三区av | 国产无av码在线观看 | 欧美熟妇另类久久久久久不卡 | 蜜桃视频插满18在线观看 | 黑人巨大精品欧美黑寡妇 | 人妻无码αv中文字幕久久琪琪布 | 欧美xxxxx精品 | 九九在线中文字幕无码 | 天天摸天天碰天天添 | 精品偷自拍另类在线观看 | 久久久国产一区二区三区 | 亚洲精品www久久久 | 精品久久久久香蕉网 | 97夜夜澡人人爽人人喊中国片 | 色狠狠av一区二区三区 | 波多野结衣aⅴ在线 | 亚洲精品国产精品乱码视色 | 欧美 丝袜 自拍 制服 另类 | 精品国产麻豆免费人成网站 | 野外少妇愉情中文字幕 | 午夜精品久久久久久久久 | 色诱久久久久综合网ywww | 撕开奶罩揉吮奶头视频 | 日日夜夜撸啊撸 | 国产在线精品一区二区高清不卡 | 久久久亚洲欧洲日产国码αv | 男女下面进入的视频免费午夜 | 久久久久久久久蜜桃 | 亚洲国产日韩a在线播放 | 亚洲综合精品香蕉久久网 | 久久综合给合久久狠狠狠97色 | 青青青爽视频在线观看 | 欧美老妇与禽交 | 六月丁香婷婷色狠狠久久 | 亚洲精品欧美二区三区中文字幕 | 乱人伦人妻中文字幕无码 | 国产精品久久久久久亚洲毛片 | 双乳奶水饱满少妇呻吟 | 天堂在线观看www | 免费人成在线观看网站 | 欧美 日韩 亚洲 在线 | 夜精品a片一区二区三区无码白浆 | 欧美精品免费观看二区 | 内射后入在线观看一区 | 精品少妇爆乳无码av无码专区 | 久久精品国产99久久6动漫 | 国产亚av手机在线观看 | 图片区 小说区 区 亚洲五月 | 亚洲热妇无码av在线播放 | 亚洲の无码国产の无码步美 | 一个人看的视频www在线 | 性做久久久久久久久 | 撕开奶罩揉吮奶头视频 | 亚洲精品综合五月久久小说 | 国产suv精品一区二区五 | 麻豆果冻传媒2021精品传媒一区下载 | 一本久道久久综合婷婷五月 | 久久97精品久久久久久久不卡 | 国产熟女一区二区三区四区五区 | 国产av无码专区亚洲a∨毛片 | 亚洲 另类 在线 欧美 制服 | 国产成人无码一二三区视频 | 久久精品国产99精品亚洲 | 狂野欧美激情性xxxx | 色婷婷欧美在线播放内射 | 国产成人综合美国十次 | 日韩精品无码一本二本三本色 | 精品无码国产一区二区三区av | 亚洲熟妇色xxxxx亚洲 | 日本大乳高潮视频在线观看 | 久久国产36精品色熟妇 | 国产精品久久久久久久9999 | 麻豆蜜桃av蜜臀av色欲av | 高中生自慰www网站 | 欧美人与善在线com | 日产国产精品亚洲系列 | 久久久精品欧美一区二区免费 | 亚洲天堂2017无码 | 亚洲国产精品成人久久蜜臀 | 国产 精品 自在自线 | 人妻天天爽夜夜爽一区二区 | 国产一区二区三区精品视频 | 亚洲人成影院在线观看 | 露脸叫床粗话东北少妇 | 一本大道久久东京热无码av | 免费无码一区二区三区蜜桃大 | 色婷婷综合中文久久一本 | 国产女主播喷水视频在线观看 | 国产舌乚八伦偷品w中 | 日韩av无码一区二区三区 | 色综合久久久久综合一本到桃花网 | 国产精品无码成人午夜电影 | 免费国产成人高清在线观看网站 | 乱码av麻豆丝袜熟女系列 | 亚洲国产精华液网站w | 大乳丰满人妻中文字幕日本 | 熟女少妇在线视频播放 | 啦啦啦www在线观看免费视频 | 国产成人无码av在线影院 | 精品乱子伦一区二区三区 | 日欧一片内射va在线影院 | 亚洲中文无码av永久不收费 | 男女作爱免费网站 | 免费乱码人妻系列无码专区 | 国产免费观看黄av片 | 激情爆乳一区二区三区 | 亚洲成av人影院在线观看 | 婷婷综合久久中文字幕蜜桃三电影 | 午夜福利试看120秒体验区 | 欧美日韩久久久精品a片 | 少妇无码吹潮 | 帮老师解开蕾丝奶罩吸乳网站 | 国产人妻人伦精品1国产丝袜 | 欧洲熟妇精品视频 | 午夜男女很黄的视频 | 久久久国产精品无码免费专区 | 久久综合网欧美色妞网 | 超碰97人人做人人爱少妇 | 精品人妻人人做人人爽 | 久久人人爽人人人人片 | 久久99热只有频精品8 | 国产精品久久久午夜夜伦鲁鲁 | 狠狠色丁香久久婷婷综合五月 | 国产精品无码永久免费888 | 男女超爽视频免费播放 | 日本www一道久久久免费榴莲 | 国产av剧情md精品麻豆 | 又湿又紧又大又爽a视频国产 | 久久久久久av无码免费看大片 | 中文无码精品a∨在线观看不卡 | 中文无码成人免费视频在线观看 | 玩弄人妻少妇500系列视频 | 国产女主播喷水视频在线观看 | 女人高潮内射99精品 | 久久综合网欧美色妞网 | 欧洲精品码一区二区三区免费看 | 中文无码伦av中文字幕 | 欧美丰满老熟妇xxxxx性 | 日韩人妻无码中文字幕视频 | 蜜桃视频插满18在线观看 | 色婷婷av一区二区三区之红樱桃 | 婷婷色婷婷开心五月四房播播 | 午夜精品久久久久久久 | 亚洲国产精品一区二区美利坚 | a在线观看免费网站大全 | 精品乱码久久久久久久 | 精品 日韩 国产 欧美 视频 | 青青青手机频在线观看 | 中文无码伦av中文字幕 | 国产热a欧美热a在线视频 | 欧美35页视频在线观看 | 玩弄少妇高潮ⅹxxxyw | 少妇人妻偷人精品无码视频 | 色欲av亚洲一区无码少妇 | 丰满妇女强制高潮18xxxx | 亚洲天堂2017无码 | 日韩少妇内射免费播放 | 国产精品人妻一区二区三区四 | 国语自产偷拍精品视频偷 | 亚洲一区二区三区偷拍女厕 | 人人妻人人澡人人爽人人精品浪潮 | 永久免费精品精品永久-夜色 | 在线播放免费人成毛片乱码 | 男女猛烈xx00免费视频试看 | 久久综合九色综合97网 | 国产精品对白交换视频 | 夜夜夜高潮夜夜爽夜夜爰爰 | 偷窥日本少妇撒尿chinese | 中文字幕无码av波多野吉衣 | 色婷婷综合激情综在线播放 | 色婷婷欧美在线播放内射 | 亚洲成熟女人毛毛耸耸多 | 四虎影视成人永久免费观看视频 | 无码国产激情在线观看 | 中文字幕+乱码+中文字幕一区 | 老司机亚洲精品影院 | 18精品久久久无码午夜福利 | 欧美老人巨大xxxx做受 | 强辱丰满人妻hd中文字幕 | 丰腴饱满的极品熟妇 | 亚洲精品久久久久久久久久久 | 一本久道高清无码视频 | 强奷人妻日本中文字幕 | 东京热一精品无码av | 日本丰满熟妇videos | 牲交欧美兽交欧美 | 无码成人精品区在线观看 | 日日躁夜夜躁狠狠躁 | 99久久精品无码一区二区毛片 | 亚洲一区二区三区无码久久 | 99久久无码一区人妻 | 免费无码午夜福利片69 | 久久综合香蕉国产蜜臀av | 澳门永久av免费网站 | 成熟人妻av无码专区 | 人妻尝试又大又粗久久 | 乌克兰少妇性做爰 | 午夜无码人妻av大片色欲 | 人妻少妇精品视频专区 | 无码av最新清无码专区吞精 | 无码免费一区二区三区 | 国产亚洲欧美日韩亚洲中文色 | 精品一区二区三区波多野结衣 | 中文字幕人成乱码熟女app | 色情久久久av熟女人妻网站 | 高清国产亚洲精品自在久久 | 久久综合给合久久狠狠狠97色 | 亚洲欧美国产精品专区久久 | 欧美 丝袜 自拍 制服 另类 | 97无码免费人妻超级碰碰夜夜 | 国产真实夫妇视频 | 日韩av激情在线观看 | 永久免费观看国产裸体美女 | 又大又硬又爽免费视频 | 国产一区二区三区精品视频 | 色婷婷综合激情综在线播放 | 国产suv精品一区二区五 | 99精品久久毛片a片 | 成人试看120秒体验区 | 久久精品国产亚洲精品 | 大肉大捧一进一出视频出来呀 | 国产乱人偷精品人妻a片 | 99久久精品无码一区二区毛片 | 国产区女主播在线观看 | 午夜福利不卡在线视频 | 欧美猛少妇色xxxxx | 久久久中文久久久无码 | 无码吃奶揉捏奶头高潮视频 | 精品国产福利一区二区 | 国产成人无码一二三区视频 | 国产一精品一av一免费 | 午夜男女很黄的视频 | 国产xxx69麻豆国语对白 | 精品国产精品久久一区免费式 | 99久久无码一区人妻 | 成 人影片 免费观看 | 国产亚av手机在线观看 | 日韩亚洲欧美中文高清在线 | 欧美精品国产综合久久 | 日日橹狠狠爱欧美视频 | 久久综合久久自在自线精品自 | 国产网红无码精品视频 | 国产区女主播在线观看 | 亚洲欧洲日本综合aⅴ在线 | 欧美老妇交乱视频在线观看 | 国产 浪潮av性色四虎 | 亚洲人成无码网www | 国产精品国产自线拍免费软件 | 国产熟妇另类久久久久 | 国产手机在线αⅴ片无码观看 | www国产亚洲精品久久久日本 | 夜夜夜高潮夜夜爽夜夜爰爰 | 在线播放免费人成毛片乱码 | 国产精品亚洲专区无码不卡 | 在教室伦流澡到高潮hnp视频 | 国产精品成人av在线观看 | 色情久久久av熟女人妻网站 | 国产高潮视频在线观看 | 国产乡下妇女做爰 | 最新国产乱人伦偷精品免费网站 | 成人无码精品1区2区3区免费看 | 高潮毛片无遮挡高清免费视频 | 国产猛烈高潮尖叫视频免费 | 国产性猛交╳xxx乱大交 国产精品久久久久久无码 欧洲欧美人成视频在线 | 成人试看120秒体验区 | 国产两女互慰高潮视频在线观看 | 国产精品对白交换视频 | 国产无套内射久久久国产 | 日本www一道久久久免费榴莲 | 老熟女乱子伦 | 欧美激情一区二区三区成人 | 在线成人www免费观看视频 | 色爱情人网站 | 欧美三级a做爰在线观看 | 国产电影无码午夜在线播放 | 久久亚洲中文字幕精品一区 | 亚洲欧美国产精品久久 | 亚洲小说春色综合另类 | 亚洲中文字幕在线无码一区二区 | 2020最新国产自产精品 | 国产午夜无码视频在线观看 | 国产精品久久国产三级国 | 亚洲欧美日韩综合久久久 | 日韩av无码一区二区三区 | 亚洲一区二区三区含羞草 | 色五月丁香五月综合五月 | 偷窥村妇洗澡毛毛多 | 欧美成人免费全部网站 | 亚洲熟女一区二区三区 | 中文字幕中文有码在线 | 欧美熟妇另类久久久久久多毛 | 无码乱肉视频免费大全合集 | 色妞www精品免费视频 | 青青青爽视频在线观看 | 国产福利视频一区二区 | 成人av无码一区二区三区 | 欧美黑人巨大xxxxx | 一本久久伊人热热精品中文字幕 | 日本一卡2卡3卡四卡精品网站 | 久久亚洲精品成人无码 | 久久天天躁狠狠躁夜夜免费观看 | 亚洲精品一区二区三区大桥未久 | 国产高潮视频在线观看 | 国产在线精品一区二区高清不卡 | 国产精品人妻一区二区三区四 | 国产精品嫩草久久久久 | 成人三级无码视频在线观看 | 亲嘴扒胸摸屁股激烈网站 | 97无码免费人妻超级碰碰夜夜 | 精品无码一区二区三区的天堂 | 永久免费精品精品永久-夜色 | 久久久久久国产精品无码下载 | 中文字幕无码人妻少妇免费 | 亚洲成色www久久网站 | 国内少妇偷人精品视频免费 | 日本一卡2卡3卡4卡无卡免费网站 国产一区二区三区影院 | 色婷婷欧美在线播放内射 | 国产一区二区三区精品视频 | 露脸叫床粗话东北少妇 | 奇米影视7777久久精品人人爽 | 久久精品女人天堂av免费观看 | 久久综合给合久久狠狠狠97色 | 国产亚洲精品久久久久久大师 | 性欧美大战久久久久久久 | 一本色道久久综合亚洲精品不卡 | 精品久久久久久亚洲精品 | 好男人www社区 | 日韩少妇内射免费播放 | 98国产精品综合一区二区三区 | 国产精品嫩草久久久久 | 久久天天躁夜夜躁狠狠 | 在线а√天堂中文官网 | 欧美人与禽zoz0性伦交 | 黑人巨大精品欧美黑寡妇 | 久久国产36精品色熟妇 | 国产又爽又黄又刺激的视频 | 欧美成人午夜精品久久久 | 国产成人一区二区三区在线观看 | 玩弄中年熟妇正在播放 | 精品久久综合1区2区3区激情 | 亚洲成熟女人毛毛耸耸多 | 蜜臀av在线播放 久久综合激激的五月天 | 亚洲成av人在线观看网址 | 亚洲日韩一区二区三区 | 精品少妇爆乳无码av无码专区 | 中文无码成人免费视频在线观看 | 国产乱人无码伦av在线a | 久久亚洲精品中文字幕无男同 | 久久精品无码一区二区三区 | 日韩人妻少妇一区二区三区 | 人妻少妇精品无码专区动漫 | 99久久精品午夜一区二区 | 内射爽无广熟女亚洲 | 欧美xxxx黑人又粗又长 | 性啪啪chinese东北女人 | 蜜桃av蜜臀av色欲av麻 999久久久国产精品消防器材 | 国产精品无码一区二区三区不卡 | 中文字幕无码视频专区 | 日韩欧美中文字幕公布 | 精品厕所偷拍各类美女tp嘘嘘 | 久久久国产一区二区三区 | 国产精品无码久久av | 久久久久免费精品国产 | 一本一道久久综合久久 | 麻豆国产人妻欲求不满谁演的 | 无码纯肉视频在线观看 | 波多野结衣高清一区二区三区 | 麻豆国产人妻欲求不满 | 久久99热只有频精品8 | 奇米影视7777久久精品人人爽 | 久久久久久av无码免费看大片 | 无码毛片视频一区二区本码 | 国产av无码专区亚洲a∨毛片 | 精品午夜福利在线观看 | 亚洲综合色区中文字幕 | 大屁股大乳丰满人妻 | 亚洲自偷自拍另类第1页 | 国产高潮视频在线观看 | 成人亚洲精品久久久久 | 人人澡人人妻人人爽人人蜜桃 | 樱花草在线播放免费中文 | 国产超碰人人爽人人做人人添 | 日本一区二区三区免费高清 | 色狠狠av一区二区三区 | 国产成人精品三级麻豆 | 亚洲国产日韩a在线播放 | 国产色视频一区二区三区 | 成人无码视频免费播放 | 中文字幕乱码人妻二区三区 | 色偷偷人人澡人人爽人人模 | 三上悠亚人妻中文字幕在线 | 奇米综合四色77777久久 东京无码熟妇人妻av在线网址 | 2020最新国产自产精品 | 激情人妻另类人妻伦 | 人人妻人人澡人人爽欧美精品 | 又大又黄又粗又爽的免费视频 | 日欧一片内射va在线影院 | 国产精品丝袜黑色高跟鞋 | 无码吃奶揉捏奶头高潮视频 | 色一情一乱一伦一区二区三欧美 | 亚洲日韩av片在线观看 | 国产精品久久久久9999小说 | 激情内射亚州一区二区三区爱妻 | 中文无码精品a∨在线观看不卡 | 久久久亚洲欧洲日产国码αv | 亚洲国产精品久久久久久 | 国产无av码在线观看 | 丁香花在线影院观看在线播放 | 狠狠噜狠狠狠狠丁香五月 | 国产精品毛多多水多 | 日本一卡2卡3卡四卡精品网站 | 国产一区二区三区精品视频 | 久久久久久久人妻无码中文字幕爆 | 亚洲人成网站在线播放942 | 成人亚洲精品久久久久 | 久久99精品国产麻豆 | 一本色道久久综合亚洲精品不卡 | 日本大香伊一区二区三区 | 乱码午夜-极国产极内射 | 国产在线一区二区三区四区五区 | 色诱久久久久综合网ywww | 性生交大片免费看l | 国产又粗又硬又大爽黄老大爷视 | 伊在人天堂亚洲香蕉精品区 | 巨爆乳无码视频在线观看 | 一本色道久久综合狠狠躁 | 妺妺窝人体色www婷婷 | 中文无码精品a∨在线观看不卡 | 国产精品欧美成人 | 国产乱人伦app精品久久 国产在线无码精品电影网 国产国产精品人在线视 | 国产成人一区二区三区在线观看 | 无码吃奶揉捏奶头高潮视频 | 精品人人妻人人澡人人爽人人 | 呦交小u女精品视频 | 人人澡人摸人人添 | 国产亚洲人成a在线v网站 | 日本一卡2卡3卡四卡精品网站 | 好男人社区资源 | 丰满少妇弄高潮了www | 好屌草这里只有精品 | 亚洲の无码国产の无码影院 | 亚洲中文字幕久久无码 | 六十路熟妇乱子伦 | 国产人妻人伦精品1国产丝袜 | 亚洲精品成人福利网站 | 中文字幕乱码亚洲无线三区 | 国产日产欧产精品精品app | 久久亚洲中文字幕无码 | 国产又爽又黄又刺激的视频 | 国产偷抇久久精品a片69 | 1000部夫妻午夜免费 | 熟妇人妻无码xxx视频 | 一本无码人妻在中文字幕免费 | 无码人妻丰满熟妇区五十路百度 | 国产无套粉嫩白浆在线 | 性欧美牲交在线视频 | 男女作爱免费网站 | 国产精品.xx视频.xxtv | 久久精品女人的天堂av | 丰满岳乱妇在线观看中字无码 | 樱花草在线社区www | 亚洲爆乳大丰满无码专区 | 久久精品国产99久久6动漫 | 亚洲aⅴ无码成人网站国产app | 国产亚洲欧美在线专区 | 99精品无人区乱码1区2区3区 | 日日摸天天摸爽爽狠狠97 | 久久久久99精品国产片 | 帮老师解开蕾丝奶罩吸乳网站 | 中文字幕无码日韩欧毛 | 日本一本二本三区免费 | 中文字幕无码视频专区 | 亚洲の无码国产の无码步美 | 4hu四虎永久在线观看 | 2020最新国产自产精品 | 欧美精品无码一区二区三区 | 成人免费视频一区二区 | 精品国产精品久久一区免费式 | 亚洲国产精品久久久天堂 | 99精品视频在线观看免费 | 国内老熟妇对白xxxxhd | 国产精品香蕉在线观看 | 国产av久久久久精东av | 无码人妻精品一区二区三区下载 | 少妇高潮一区二区三区99 | 国产内射老熟女aaaa | 又紧又大又爽精品一区二区 | 久久精品国产亚洲精品 | 亚洲精品一区二区三区在线观看 | 亚拍精品一区二区三区探花 | 东京无码熟妇人妻av在线网址 | 欧洲熟妇色 欧美 | 国产乱子伦视频在线播放 | 欧美日韩一区二区免费视频 | 精品偷拍一区二区三区在线看 | 国产suv精品一区二区五 | 日韩视频 中文字幕 视频一区 | 欧美性猛交内射兽交老熟妇 | 国产精品久久久 | 欧美亚洲国产一区二区三区 | 亚洲色欲久久久综合网东京热 | 四虎国产精品免费久久 | 亚洲无人区午夜福利码高清完整版 | 无码毛片视频一区二区本码 | 亚洲国产日韩a在线播放 | 乱码av麻豆丝袜熟女系列 | 色婷婷综合中文久久一本 | 免费无码av一区二区 | 精品国产成人一区二区三区 | 亚洲精品综合一区二区三区在线 | 熟妇人妻无码xxx视频 | 精品无码av一区二区三区 | 午夜成人1000部免费视频 | 清纯唯美经典一区二区 | 亚洲呦女专区 | 国产激情一区二区三区 | 亚洲呦女专区 | 成人无码精品一区二区三区 | 亚洲狠狠色丁香婷婷综合 | 亚洲区小说区激情区图片区 | 牲欲强的熟妇农村老妇女视频 | 欧洲欧美人成视频在线 | 午夜嘿嘿嘿影院 | 自拍偷自拍亚洲精品被多人伦好爽 | 精品一二三区久久aaa片 | www国产亚洲精品久久网站 | 99麻豆久久久国产精品免费 | v一区无码内射国产 | 最近的中文字幕在线看视频 | 天天摸天天透天天添 | 乌克兰少妇性做爰 | 好屌草这里只有精品 | 成 人 网 站国产免费观看 | 中文字幕乱妇无码av在线 | 色欲av亚洲一区无码少妇 | 日本丰满护士爆乳xxxx | 国产另类ts人妖一区二区 | 日韩av激情在线观看 | 红桃av一区二区三区在线无码av | 亚洲精品久久久久avwww潮水 | 久久久精品人妻久久影视 | 国产真实伦对白全集 | 全球成人中文在线 | 成人无码精品1区2区3区免费看 | 蜜桃视频韩日免费播放 | 精品少妇爆乳无码av无码专区 | 亚洲男女内射在线播放 | 好男人www社区 | 国产亚洲精品精品国产亚洲综合 | 在线观看免费人成视频 | 免费无码av一区二区 | 日本一区二区三区免费高清 | 精品国产一区av天美传媒 | 久久亚洲中文字幕无码 | 又粗又大又硬毛片免费看 | 成人免费视频一区二区 | 51国偷自产一区二区三区 | 亚洲s码欧洲m码国产av | 中文字幕av无码一区二区三区电影 | 成年美女黄网站色大免费全看 | 国产一区二区三区精品视频 | 婷婷色婷婷开心五月四房播播 | 日本爽爽爽爽爽爽在线观看免 | 波多野结衣一区二区三区av免费 | 久久亚洲精品中文字幕无男同 | 日韩精品a片一区二区三区妖精 | 日本爽爽爽爽爽爽在线观看免 | 亚洲色欲色欲欲www在线 | 国产亚av手机在线观看 | 黑人玩弄人妻中文在线 | 国产超碰人人爽人人做人人添 | 麻豆国产丝袜白领秘书在线观看 | 亲嘴扒胸摸屁股激烈网站 | 一本久久伊人热热精品中文字幕 | 国产舌乚八伦偷品w中 | 在线а√天堂中文官网 | 亚洲精品综合一区二区三区在线 | 精品亚洲成av人在线观看 | 久久99精品久久久久久 | 成 人影片 免费观看 | 97久久国产亚洲精品超碰热 | 国产精品福利视频导航 | 久久精品国产99精品亚洲 | 九月婷婷人人澡人人添人人爽 | 在线播放无码字幕亚洲 | 国产三级精品三级男人的天堂 | 又紧又大又爽精品一区二区 | 午夜精品一区二区三区在线观看 | 最近的中文字幕在线看视频 | 激情综合激情五月俺也去 | 国产免费久久精品国产传媒 | 久久久婷婷五月亚洲97号色 | 青青青手机频在线观看 | 久久99精品久久久久久动态图 | 无遮无挡爽爽免费视频 | 久久精品国产日本波多野结衣 | 亚洲精品一区二区三区大桥未久 | 国产成人综合色在线观看网站 | 国产精品国产自线拍免费软件 | 俺去俺来也在线www色官网 | 久久久久久久人妻无码中文字幕爆 | 国产精品美女久久久久av爽李琼 | 日韩少妇内射免费播放 | 无码国产激情在线观看 | 成人免费视频在线观看 | 国产两女互慰高潮视频在线观看 | 国产人妻精品午夜福利免费 | 精品人妻人人做人人爽夜夜爽 | 性欧美牲交在线视频 | 成熟女人特级毛片www免费 | 国产内射爽爽大片视频社区在线 | 日产精品高潮呻吟av久久 | 国产精品福利视频导航 | 久久精品中文字幕一区 | 无码福利日韩神码福利片 | 国产亚洲精品久久久久久国模美 | 亚洲の无码国产の无码影院 | 亚洲日本在线电影 | 久久精品国产一区二区三区 | 国产精品怡红院永久免费 | 在线a亚洲视频播放在线观看 | 精品欧美一区二区三区久久久 | 国产精品无码永久免费888 | 波多野结衣高清一区二区三区 | 中文亚洲成a人片在线观看 | 国产激情精品一区二区三区 | 国产精品福利视频导航 | 一本久久a久久精品vr综合 | 色情久久久av熟女人妻网站 | 精品无码国产自产拍在线观看蜜 | 亚洲精品一区三区三区在线观看 | 久久国产精品偷任你爽任你 | 奇米影视7777久久精品人人爽 | 国产特级毛片aaaaaaa高清 | 午夜福利不卡在线视频 | 国产在线aaa片一区二区99 | 老熟妇乱子伦牲交视频 | 中文字幕无码日韩专区 | 四虎国产精品免费久久 | 精品国产青草久久久久福利 | a国产一区二区免费入口 | 国产精品美女久久久网av | 久青草影院在线观看国产 | 亚洲国产精品一区二区第一页 | 亚洲精品午夜国产va久久成人 | 国产真实夫妇视频 | 久激情内射婷内射蜜桃人妖 | 亚洲色欲色欲天天天www | 大肉大捧一进一出视频出来呀 | 精品偷拍一区二区三区在线看 | 日韩视频 中文字幕 视频一区 | 久久人人97超碰a片精品 | 沈阳熟女露脸对白视频 | 欧美午夜特黄aaaaaa片 | 麻豆国产人妻欲求不满谁演的 | av香港经典三级级 在线 | 九九热爱视频精品 | 伊人色综合久久天天小片 | 国产熟妇另类久久久久 | 麻豆国产人妻欲求不满 | 亚洲色偷偷男人的天堂 | 欧美老妇交乱视频在线观看 | 亚洲一区av无码专区在线观看 | 国产亚洲日韩欧美另类第八页 | a在线观看免费网站大全 | 午夜精品一区二区三区在线观看 | 欧美怡红院免费全部视频 | 麻花豆传媒剧国产免费mv在线 | 久久综合网欧美色妞网 | 久久综合九色综合97网 | 国产色精品久久人妻 | 国产两女互慰高潮视频在线观看 | 亚洲 另类 在线 欧美 制服 | 无码人妻丰满熟妇区五十路百度 | 曰本女人与公拘交酡免费视频 | av无码不卡在线观看免费 | 99久久精品无码一区二区毛片 | 色一情一乱一伦一视频免费看 | 国产九九九九九九九a片 | 国产乱子伦视频在线播放 | 亚洲精品国产a久久久久久 | www成人国产高清内射 | 国产精品高潮呻吟av久久 | 欧美老妇与禽交 | 鲁一鲁av2019在线 | 国产精品美女久久久久av爽李琼 | 亚洲天堂2017无码中文 | 男女下面进入的视频免费午夜 | 青青青手机频在线观看 | 老子影院午夜伦不卡 | 亚洲精品综合一区二区三区在线 | 中文字幕人妻无码一夲道 | 波多野结衣av一区二区全免费观看 | 水蜜桃色314在线观看 | 蜜桃av蜜臀av色欲av麻 999久久久国产精品消防器材 | 无码午夜成人1000部免费视频 | 十八禁视频网站在线观看 | 人人澡人人妻人人爽人人蜜桃 | 丰满岳乱妇在线观看中字无码 | 好屌草这里只有精品 | 美女张开腿让人桶 | 久久久久免费精品国产 | 狂野欧美性猛xxxx乱大交 | 亚洲一区二区三区香蕉 | 成人免费视频视频在线观看 免费 | 国产情侣作爱视频免费观看 | 97色伦图片97综合影院 | 东京无码熟妇人妻av在线网址 | 成人精品天堂一区二区三区 | 国产精品国产三级国产专播 | 久久精品视频在线看15 | 亚洲国产欧美日韩精品一区二区三区 | 蜜臀av在线播放 久久综合激激的五月天 | 美女黄网站人色视频免费国产 | 久久久久99精品成人片 | 99精品国产综合久久久久五月天 | 国产欧美亚洲精品a | 男人的天堂av网站 | 亚洲gv猛男gv无码男同 | 免费国产成人高清在线观看网站 | 亚洲欧美日韩国产精品一区二区 | 无码一区二区三区在线观看 | 香港三级日本三级妇三级 | 久久97精品久久久久久久不卡 | 亚洲人交乣女bbw | 妺妺窝人体色www婷婷 | 欧美人与动性行为视频 | 国产免费久久久久久无码 | 无码精品国产va在线观看dvd | 人人澡人人妻人人爽人人蜜桃 | 任你躁在线精品免费 | 国产麻豆精品一区二区三区v视界 | 国产成人精品必看 | 亚洲精品国产a久久久久久 | 免费国产黄网站在线观看 | 亚拍精品一区二区三区探花 | 精品偷自拍另类在线观看 | 午夜精品一区二区三区的区别 | 中文字幕无码日韩欧毛 | 精品水蜜桃久久久久久久 | 丰满少妇弄高潮了www | 天堂无码人妻精品一区二区三区 | 在线a亚洲视频播放在线观看 | 国产性生大片免费观看性 | 日本乱偷人妻中文字幕 | 无码午夜成人1000部免费视频 | 中文字幕无码人妻少妇免费 | 日本熟妇大屁股人妻 | 成在人线av无码免观看麻豆 | 成人精品一区二区三区中文字幕 | 丰满人妻翻云覆雨呻吟视频 | 噜噜噜亚洲色成人网站 | 18无码粉嫩小泬无套在线观看 | 中文字幕中文有码在线 | 性欧美牲交xxxxx视频 | 亚洲欧美日韩国产精品一区二区 | 丰满人妻翻云覆雨呻吟视频 | 无码人妻丰满熟妇区毛片18 | 国产婷婷色一区二区三区在线 | 午夜嘿嘿嘿影院 | 亚洲国产精品美女久久久久 | 亚洲爆乳大丰满无码专区 | 无码播放一区二区三区 | 中文字幕av无码一区二区三区电影 | 全球成人中文在线 | 国产 浪潮av性色四虎 | 国产性猛交╳xxx乱大交 国产精品久久久久久无码 欧洲欧美人成视频在线 | 欧美精品国产综合久久 | 97久久超碰中文字幕 | 一个人看的视频www在线 | 久久人人爽人人人人片 | 国产精品久久久久9999小说 | 亚洲精品一区国产 | 亚洲成av人片天堂网无码】 | 精品一区二区三区波多野结衣 | 一二三四在线观看免费视频 | 无码国内精品人妻少妇 | 色狠狠av一区二区三区 | 中文字幕av无码一区二区三区电影 | 精品人妻人人做人人爽夜夜爽 | 国产性生交xxxxx无码 | 国产av无码专区亚洲a∨毛片 | 伊人色综合久久天天小片 | 亚洲一区av无码专区在线观看 | 国产精品亚洲一区二区三区喷水 | 亚洲精品久久久久avwww潮水 | 狂野欧美性猛交免费视频 | 亚洲日本一区二区三区在线 | 秋霞特色aa大片 | 女高中生第一次破苞av | 影音先锋中文字幕无码 | 黑人粗大猛烈进出高潮视频 | 亚洲中文无码av永久不收费 | 日本xxxx色视频在线观看免费 | 亚洲精品欧美二区三区中文字幕 | 中文字幕无码人妻少妇免费 | 狠狠色噜噜狠狠狠7777奇米 | 夫妻免费无码v看片 | 又粗又大又硬又长又爽 | 乱人伦人妻中文字幕无码 | 狠狠色丁香久久婷婷综合五月 | 色综合久久中文娱乐网 | 久精品国产欧美亚洲色aⅴ大片 | 综合人妻久久一区二区精品 | 国产在线一区二区三区四区五区 | 国产午夜手机精彩视频 | 一本加勒比波多野结衣 | 色妞www精品免费视频 | 国产国产精品人在线视 | 亚洲最大成人网站 | 天下第一社区视频www日本 | 中文字幕日韩精品一区二区三区 | 亚洲日韩精品欧美一区二区 | 亚洲春色在线视频 | 色一情一乱一伦一视频免费看 | 亚洲爆乳精品无码一区二区三区 | 人人妻人人澡人人爽欧美一区九九 | 亚洲日韩av一区二区三区中文 | 亚洲理论电影在线观看 | 精品国偷自产在线视频 | 久久精品女人的天堂av | 午夜丰满少妇性开放视频 | 最新国产麻豆aⅴ精品无码 | 精品aⅴ一区二区三区 | 东北女人啪啪对白 | 国产亚洲精品久久久ai换 | 福利一区二区三区视频在线观看 | v一区无码内射国产 | 亚洲 a v无 码免 费 成 人 a v | 粗大的内捧猛烈进出视频 | 国产精品-区区久久久狼 | 日日躁夜夜躁狠狠躁 | 色婷婷综合激情综在线播放 | 亚洲区小说区激情区图片区 | 亚洲s码欧洲m码国产av | 亚洲人成影院在线无码按摩店 | 色诱久久久久综合网ywww | 亚洲中文字幕无码中文字在线 | 99国产精品白浆在线观看免费 | 久久久中文字幕日本无吗 | 伊人色综合久久天天小片 | 国产在线无码精品电影网 | 99久久久无码国产精品免费 | 丁香花在线影院观看在线播放 | 国产偷国产偷精品高清尤物 | 性欧美大战久久久久久久 | 久久久av男人的天堂 | 天干天干啦夜天干天2017 | 久久综合久久自在自线精品自 | 强开小婷嫩苞又嫩又紧视频 | 国产乱人伦av在线无码 | 5858s亚洲色大成网站www | 色偷偷人人澡人人爽人人模 | 亚洲经典千人经典日产 | 婷婷丁香六月激情综合啪 | 日本熟妇大屁股人妻 | 激情综合激情五月俺也去 | 亚洲色成人中文字幕网站 | 国产av人人夜夜澡人人爽麻豆 | 黄网在线观看免费网站 | 国产深夜福利视频在线 | 天天拍夜夜添久久精品 | 欧美freesex黑人又粗又大 | 少妇愉情理伦片bd | 波多野42部无码喷潮在线 | 亚洲一区二区三区香蕉 | 欧美激情内射喷水高潮 | 久久精品国产日本波多野结衣 | 亚洲乱码中文字幕在线 | 小泽玛莉亚一区二区视频在线 | av人摸人人人澡人人超碰下载 | 无码精品人妻一区二区三区av | 欧美日韩久久久精品a片 | 青青久在线视频免费观看 | av在线亚洲欧洲日产一区二区 | 九九久久精品国产免费看小说 | 日本护士xxxxhd少妇 | 精品人妻中文字幕有码在线 | 精品 日韩 国产 欧美 视频 | 少妇性l交大片欧洲热妇乱xxx | 人妻少妇精品视频专区 | 国语精品一区二区三区 | 国产精品丝袜黑色高跟鞋 | 色妞www精品免费视频 | 老太婆性杂交欧美肥老太 | 国产人妻精品一区二区三区不卡 | 天天av天天av天天透 | 国产成人精品久久亚洲高清不卡 | 夫妻免费无码v看片 | 国语精品一区二区三区 | 男人的天堂av网站 | 日本一卡2卡3卡四卡精品网站 | 久久 国产 尿 小便 嘘嘘 | 麻豆国产人妻欲求不满谁演的 | 国产两女互慰高潮视频在线观看 | 丝袜 中出 制服 人妻 美腿 | 成人无码精品1区2区3区免费看 | 丝袜美腿亚洲一区二区 | 无码国产激情在线观看 | 丰满肥臀大屁股熟妇激情视频 | 人人妻人人澡人人爽欧美精品 | 一本精品99久久精品77 | 中文字幕 人妻熟女 | 亚洲国产一区二区三区在线观看 | 日日摸天天摸爽爽狠狠97 | 亚洲 另类 在线 欧美 制服 | 久久99精品国产麻豆蜜芽 | 99久久精品午夜一区二区 | 麻豆蜜桃av蜜臀av色欲av | 在线观看免费人成视频 | 亚洲一区二区三区无码久久 | 中文无码成人免费视频在线观看 | 丰满少妇弄高潮了www | 女人被爽到呻吟gif动态图视看 | 日本www一道久久久免费榴莲 | 国产明星裸体无码xxxx视频 | 无码人妻av免费一区二区三区 | 日日摸天天摸爽爽狠狠97 | 午夜嘿嘿嘿影院 | 免费无码av一区二区 | 亚洲国产精品无码久久久久高潮 | 97无码免费人妻超级碰碰夜夜 | 国产成人精品视频ⅴa片软件竹菊 | 麻豆成人精品国产免费 | 亚洲人成人无码网www国产 | 亚洲一区二区三区在线观看网站 | 亚洲一区二区三区无码久久 | 久久综合九色综合97网 | 亚洲码国产精品高潮在线 | 欧美性生交xxxxx久久久 | 亚洲一区二区三区含羞草 | 国产精品自产拍在线观看 | 亚洲一区二区三区无码久久 | 夜夜躁日日躁狠狠久久av | 7777奇米四色成人眼影 | 三级4级全黄60分钟 | 精品无码一区二区三区爱欲 | 国产情侣作爱视频免费观看 | 国产成人综合在线女婷五月99播放 | 亚洲国产精品无码久久久久高潮 | 亚洲毛片av日韩av无码 | 亚洲热妇无码av在线播放 | a国产一区二区免费入口 | 狂野欧美激情性xxxx | 成人无码视频免费播放 | 麻豆蜜桃av蜜臀av色欲av | 午夜福利试看120秒体验区 | 成人精品视频一区二区 | 亚洲精品美女久久久久久久 | 国产亚洲日韩欧美另类第八页 | 国产女主播喷水视频在线观看 | 亚洲 欧美 激情 小说 另类 | 精品国产一区av天美传媒 | 国产乱人伦app精品久久 国产在线无码精品电影网 国产国产精品人在线视 | 成人片黄网站色大片免费观看 | 日本在线高清不卡免费播放 | 久久99久久99精品中文字幕 | 日欧一片内射va在线影院 | 女人高潮内射99精品 | 中文无码成人免费视频在线观看 | a国产一区二区免费入口 | 亚洲国产精品久久人人爱 | 国产日产欧产精品精品app | 在线播放无码字幕亚洲 | 97se亚洲精品一区 | 日本xxxx色视频在线观看免费 | 国产精品久免费的黄网站 | 三级4级全黄60分钟 | 在线精品亚洲一区二区 | 亚洲精品成人福利网站 | 99麻豆久久久国产精品免费 | 久久国产精品精品国产色婷婷 | 国模大胆一区二区三区 | 久久精品中文闷骚内射 | 亚洲理论电影在线观看 | 又大又黄又粗又爽的免费视频 | 国产精品办公室沙发 | 67194成是人免费无码 | 午夜理论片yy44880影院 | 永久黄网站色视频免费直播 | 漂亮人妻洗澡被公强 日日躁 | 日产精品99久久久久久 | 少妇激情av一区二区 | 国精品人妻无码一区二区三区蜜柚 | 亚洲中文字幕无码中文字在线 | www国产精品内射老师 | 2020最新国产自产精品 | 在线精品国产一区二区三区 | 国产成人无码区免费内射一片色欲 | 国产xxx69麻豆国语对白 | 香港三级日本三级妇三级 | 国产成人精品无码播放 | 一区二区三区高清视频一 | 国产一区二区三区日韩精品 | 久久午夜无码鲁丝片午夜精品 | 麻豆av传媒蜜桃天美传媒 | 影音先锋中文字幕无码 | 久久视频在线观看精品 | 少女韩国电视剧在线观看完整 | 欧美日韩久久久精品a片 | 人妻少妇精品视频专区 | 国产成人综合美国十次 | 无码人妻丰满熟妇区毛片18 | 久久99精品国产麻豆蜜芽 | 精品熟女少妇av免费观看 | 秋霞特色aa大片 | 无码免费一区二区三区 | 色综合久久久久综合一本到桃花网 | 高清国产亚洲精品自在久久 | 久久久久成人精品免费播放动漫 | 久久久久久久人妻无码中文字幕爆 | 亚洲欧美中文字幕5发布 | 日欧一片内射va在线影院 | 色欲人妻aaaaaaa无码 | 国产精品无套呻吟在线 | 亚洲成在人网站无码天堂 | 亚洲成av人在线观看网址 | 国产精品-区区久久久狼 | 又湿又紧又大又爽a视频国产 | 成人性做爰aaa片免费看不忠 | 熟妇人妻无码xxx视频 | 国产莉萝无码av在线播放 | ass日本丰满熟妇pics | 娇妻被黑人粗大高潮白浆 | 午夜男女很黄的视频 | 久久99精品国产麻豆蜜芽 | 久久国产精品精品国产色婷婷 | 自拍偷自拍亚洲精品被多人伦好爽 | 人妻无码久久精品人妻 | 乱人伦人妻中文字幕无码 | 少妇无码一区二区二三区 | 亚洲 激情 小说 另类 欧美 | 免费国产成人高清在线观看网站 | 亚洲小说图区综合在线 | 激情综合激情五月俺也去 | 国产内射老熟女aaaa | 国产熟妇高潮叫床视频播放 | 国产性猛交╳xxx乱大交 国产精品久久久久久无码 欧洲欧美人成视频在线 | 东京热一精品无码av | 久久综合激激的五月天 | 日本大香伊一区二区三区 | 最新版天堂资源中文官网 | 日韩亚洲欧美精品综合 | 国产美女精品一区二区三区 | 精品国产一区av天美传媒 | 熟妇人妻无乱码中文字幕 | 香蕉久久久久久av成人 | 精品夜夜澡人妻无码av蜜桃 | 国产亚洲精品久久久久久久久动漫 | 午夜福利不卡在线视频 | 精品人人妻人人澡人人爽人人 | 欧美黑人乱大交 | 九九热爱视频精品 | 一本久道久久综合狠狠爱 | 宝宝好涨水快流出来免费视频 | 人妻夜夜爽天天爽三区 | √天堂资源地址中文在线 | 精品国产一区二区三区四区在线看 | 国产69精品久久久久app下载 | 久久这里只有精品视频9 | 300部国产真实乱 | 精品一区二区不卡无码av | 国产成人午夜福利在线播放 | 国产成人无码午夜视频在线观看 | 少妇太爽了在线观看 | 久久国产精品_国产精品 | 久久成人a毛片免费观看网站 | 丰满护士巨好爽好大乳 | 在线看片无码永久免费视频 | 国产熟妇另类久久久久 | 国产亚洲美女精品久久久2020 | 亚洲精品一区二区三区在线观看 | 久久99精品久久久久久动态图 | 成人无码精品一区二区三区 | 精品国产国产综合精品 | 亚洲欧洲无卡二区视頻 | 全黄性性激高免费视频 | 精品国产一区av天美传媒 | 久青草影院在线观看国产 | 国产一区二区三区四区五区加勒比 | 欧洲熟妇色 欧美 | 亚洲中文字幕成人无码 | 久久亚洲日韩精品一区二区三区 | 久久精品中文字幕大胸 | 色窝窝无码一区二区三区色欲 | 国产乱人伦app精品久久 国产在线无码精品电影网 国产国产精品人在线视 | 东京热一精品无码av | a国产一区二区免费入口 | 欧美丰满熟妇xxxx | 老熟女重囗味hdxx69 | 精品无码国产一区二区三区av | 午夜无码人妻av大片色欲 | 精品亚洲成av人在线观看 | 亚洲天堂2017无码中文 | 天天拍夜夜添久久精品 | 国产午夜福利亚洲第一 | 成人无码精品1区2区3区免费看 | 国产卡一卡二卡三 | 亚洲中文字幕在线观看 | 国产成人综合在线女婷五月99播放 | 夜夜影院未满十八勿进 | 国产色xx群视频射精 | 成人一在线视频日韩国产 | 乱人伦中文视频在线观看 | 亚洲精品综合五月久久小说 | 国产又爽又猛又粗的视频a片 | 久久久久久九九精品久 | 少女韩国电视剧在线观看完整 | 久久久久免费精品国产 | 国产口爆吞精在线视频 | 一本色道婷婷久久欧美 | 国产农村妇女aaaaa视频 撕开奶罩揉吮奶头视频 | 亚洲大尺度无码无码专区 | 国产疯狂伦交大片 | 中文字幕日产无线码一区 | 久热国产vs视频在线观看 | 波多野结衣乳巨码无在线观看 | 女人被男人躁得好爽免费视频 | 无码av最新清无码专区吞精 | 国产明星裸体无码xxxx视频 | 又黄又爽又色的视频 | 4hu四虎永久在线观看 | 又大又紧又粉嫩18p少妇 | 亚洲欧洲日本无在线码 | 少妇邻居内射在线 | 欧美喷潮久久久xxxxx | 国产精品无码mv在线观看 | 熟妇女人妻丰满少妇中文字幕 | 日本熟妇人妻xxxxx人hd | 色综合久久久无码中文字幕 | 国产成人无码一二三区视频 | 欧美人与动性行为视频 | 对白脏话肉麻粗话av | 免费观看又污又黄的网站 | 三级4级全黄60分钟 | 成在人线av无码免费 | 国产另类ts人妖一区二区 | 亚洲の无码国产の无码步美 | 成人无码精品一区二区三区 | 国产午夜无码精品免费看 | 亚洲欧美日韩成人高清在线一区 | 久久精品中文字幕大胸 | 色噜噜亚洲男人的天堂 | 国产亚洲精品久久久久久 | 午夜精品久久久内射近拍高清 | 亚洲高清偷拍一区二区三区 | 免费无码的av片在线观看 | av人摸人人人澡人人超碰下载 | 欧美成人高清在线播放 | 国产精品二区一区二区aⅴ污介绍 | 人妻无码久久精品人妻 | 少女韩国电视剧在线观看完整 | 老司机亚洲精品影院无码 | 99视频精品全部免费免费观看 | 成人欧美一区二区三区黑人 | 水蜜桃亚洲一二三四在线 | 国产精品欧美成人 | 免费无码av一区二区 | 中文字幕乱码中文乱码51精品 | 久热国产vs视频在线观看 | 内射巨臀欧美在线视频 | 狠狠亚洲超碰狼人久久 | 色欲综合久久中文字幕网 | 成人av无码一区二区三区 | 色综合久久中文娱乐网 | 天堂а√在线地址中文在线 | 欧美熟妇另类久久久久久多毛 | a在线亚洲男人的天堂 | 国内精品久久久久久中文字幕 | 欧美丰满老熟妇xxxxx性 | 国产午夜亚洲精品不卡 | 精品国产福利一区二区 | 亚洲精品国产精品乱码视色 | 欧美性色19p | 国产熟女一区二区三区四区五区 | 国产精品爱久久久久久久 | 国产欧美熟妇另类久久久 | 一二三四社区在线中文视频 | 5858s亚洲色大成网站www | 人人爽人人澡人人高潮 | 少妇无码一区二区二三区 | 日韩在线不卡免费视频一区 | 成人一区二区免费视频 | 午夜无码人妻av大片色欲 | 女人被男人爽到呻吟的视频 | 日日摸夜夜摸狠狠摸婷婷 | 无码精品国产va在线观看dvd | 国产偷国产偷精品高清尤物 | 国产手机在线αⅴ片无码观看 | 妺妺窝人体色www婷婷 | 久久久久久久久蜜桃 | 亚洲综合无码一区二区三区 | 亚洲va中文字幕无码久久不卡 | 日日鲁鲁鲁夜夜爽爽狠狠 | 女人被爽到呻吟gif动态图视看 | 国产精品无码一区二区桃花视频 | 亚洲午夜无码久久 | 欧美三级a做爰在线观看 | 欧美黑人性暴力猛交喷水 | 精品一区二区三区无码免费视频 | 一本久道高清无码视频 |