日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問(wèn) 生活随笔!

生活随笔

當(dāng)前位置: 首頁(yè) > 运维知识 > linux >内容正文

linux

linux服务器无网络确认,Linux服务器故障排查实用指南

發(fā)布時(shí)間:2025/3/20 linux 31 豆豆
生活随笔 收集整理的這篇文章主要介紹了 linux服务器无网络确认,Linux服务器故障排查实用指南 小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.

【2013年3月25日?51CTO外電頭條】由于造成網(wǎng)絡(luò)問(wèn)題的因素多種多樣,因此網(wǎng)絡(luò)故障排查技能就成了每位服務(wù)器或網(wǎng)絡(luò)服務(wù)負(fù)責(zé)人必不可少的重要素質(zhì)。Linux為我們提供了大量網(wǎng)絡(luò)故障排查工具,在本文中,我們將討論一些常見(jiàn)的網(wǎng)絡(luò)問(wèn)題,并介紹如何利用某些Linux工具追蹤意外狀況發(fā)生的根本原因。

問(wèn)題:服務(wù)器A無(wú)法與服務(wù)器B通信

可能大家在實(shí)際工作中最常見(jiàn)的網(wǎng)絡(luò)故障就是一臺(tái)服務(wù)器無(wú)法與另一臺(tái)網(wǎng)絡(luò)上的服務(wù)器進(jìn)行通信。本小節(jié)將通過(guò)實(shí)例講解具體處理辦法。在實(shí)例中,一臺(tái)名為dev1的服務(wù)器無(wú)法訪問(wèn)另一臺(tái)名為web1的服務(wù)器中的網(wǎng)絡(luò)服務(wù)(端口80)。導(dǎo)致這一現(xiàn)象的原因相當(dāng)繁雜,因此我們需要一步步測(cè)試操作活動(dòng),進(jìn)而通過(guò)排除法找到故障的根源。

一般說(shuō)來(lái),在對(duì)這樣的問(wèn)題進(jìn)行故障排查時(shí),大家可能會(huì)跳過(guò)某些初始步驟(例如檢查鏈接等),因?yàn)榻酉聛?lái)的某些測(cè)試環(huán)節(jié)能起到同樣的診斷作用。舉例來(lái)說(shuō),如果我們測(cè)試并確認(rèn)DNS能夠正常工作,那么就證明我們的主機(jī)是能夠與本地網(wǎng)絡(luò)進(jìn)行通信的。但在本次實(shí)例解析中,我們將本著謹(jǐn)慎的態(tài)度執(zhí)行每一個(gè)步驟,借以理解各個(gè)級(jí)別的不同測(cè)試方式。

問(wèn)題出在客戶機(jī)還是服務(wù)器端?

大家可以利用一項(xiàng)快速測(cè)試縮小造成故障的范圍,即通過(guò)同一網(wǎng)絡(luò)中的另一臺(tái)主機(jī)嘗試訪問(wèn)對(duì)應(yīng)服務(wù)器。在本實(shí)例中,我們姑且將另一臺(tái)與dev1同處一套網(wǎng)絡(luò)環(huán)境下的服務(wù)器命名為dev2,并嘗試通過(guò)它訪問(wèn)web1。如果dev2也不能正常訪問(wèn)web1,那么顯然問(wèn)題很可能出在web1或者是dev1、dev2及web1之間的網(wǎng)絡(luò)身上。如果dev2能夠正常訪問(wèn)web1,那么我們就可以斷定dev1出問(wèn)題的機(jī)率較大。首先,我們假設(shè)dev2能夠訪問(wèn)web1,因此我們開(kāi)始將故障排查的重點(diǎn)放在dev1這邊。

線纜插好了嗎?

故障排查的***步要在客戶機(jī)上進(jìn)行。大家首先要確認(rèn)自己客戶機(jī)的網(wǎng)絡(luò)連接沒(méi)有問(wèn)題。要做到這一點(diǎn),我們可以使用ethtool程序(通過(guò)ethtool工具包安裝)對(duì)鏈接(即以太網(wǎng)設(shè)備與網(wǎng)絡(luò)構(gòu)成物理連接)情況加以檢測(cè)。如果大家無(wú)法確定自己使用的是哪個(gè)端口,那么請(qǐng)運(yùn)行/sbin/ifconfig命令將所有可用的網(wǎng)絡(luò)端口及其設(shè)定列出。我們假設(shè)自己的以太網(wǎng)設(shè)備在eth0端口上,那么:

$ sudo ethtool eth0

Settings for eth0:

Supported ports: [ TP ]

Supported link modes: 10baseT/Half 10baseT/Full

100baseT/Half 100baseT/Full

1000baseT/Half 1000baseT/Full

Supports auto-negotiation: Yes

Advertised link modes: 10baseT/Half 10baseT/Full

100baseT/Half 100baseT/Full

1000baseT/Half 1000baseT/Full

Advertised auto-negotiation: Yes

Speed: 100Mb/s

Duplex: Full

Port: Twisted Pair

PHYAD: 0

Transceiver: internal

Auto-negotiation: on

Supports Wake-on: pg

Wake-on: d

Current message level: 0x000000ff (255)

Link detected: yes

在***一行中,大家可以看到檢測(cè)結(jié)果顯示鏈接設(shè)置為“yes”,所以dev1已經(jīng)與網(wǎng)絡(luò)構(gòu)成物理連接。如果這項(xiàng)檢測(cè)的結(jié)果為“no”,那么我們需要親自檢查dev1的網(wǎng)絡(luò)連接,并將線纜插實(shí)到位。在確定物理連接沒(méi)有問(wèn)題之后,執(zhí)行下面的步驟。

注意:ethtool絕不僅僅是一款用于檢測(cè)鏈接狀況的工具,它還能夠診斷并糾正雙工問(wèn)題。當(dāng)Linux服務(wù)器與網(wǎng)絡(luò)連通時(shí),通常會(huì)與網(wǎng)絡(luò)自動(dòng)協(xié)商以獲取傳輸速度信息以及該網(wǎng)絡(luò)是否支持全雙工。在本實(shí)例中,傳輸速度經(jīng)ethtool檢測(cè)為100Mb/秒,且該網(wǎng)絡(luò)支持全雙工機(jī)制。如果大家發(fā)現(xiàn)主機(jī)的網(wǎng)絡(luò)傳輸速度緩慢,那么速度及雙工設(shè)定是首先需要關(guān)注的重點(diǎn)。如前文所示運(yùn)行ethtool,若大家發(fā)現(xiàn)雙工被設(shè)定為一半,則運(yùn)行以下命令:

$ sudo ethtool -s eth0 autoneg off duplex full

意思是利用自己的以太網(wǎng)設(shè)備代替eth0。

端口正常嗎?

一旦確認(rèn)了服務(wù)器與網(wǎng)絡(luò)之間物理連接的完好性,接下來(lái)就是判斷主機(jī)上的網(wǎng)絡(luò)端口是否配置正確。在這方面,***的檢查方式就是運(yùn)行ifconfig命令并將端口作為參數(shù)后綴。因此要測(cè)試eth0的設(shè)置,大家應(yīng)該運(yùn)行以下內(nèi)容:

$ sudo ifconfig eth0

eth0 Link encap:Ethernet HWaddr 00:17:42:1f:18:be

inet addr:10.1.1.7 Bcast:10.1.1.255 Mask:255.255.255.0

inet6 addr: fe80::217:42ff:fe1f:18be/64 Scope:Link

UP BROADCAST MULTICAST MTU:1500 Metric:1

RX packets:1 errors:0 dropped:0 overruns:0 frame:0

TX packets:11 errors:0 dropped:0 overruns:0 carrier:0

collisions:0 txqueuelen:1000

RX bytes:229 (229.0 B) TX bytes:2178 (2.1 KB)

Interrupt:10

在上述輸出結(jié)果中,第二行可能最值得我們關(guān)注,因?yàn)槠鋬?nèi)容是解釋我們的主機(jī)已經(jīng)被配置了一套IP地址(10.1.1.7)與子網(wǎng)掩碼(255.255.255.0)。現(xiàn)在,大家需要確認(rèn)這樣的設(shè)置結(jié)果是否正確。如果端口未受配置,請(qǐng)嘗試運(yùn)行sudo ifup eth0,然后再次運(yùn)行ifconfig重新檢查端口是否出現(xiàn)。如果設(shè)置錯(cuò)誤或端口未出現(xiàn),則檢查/etc/network/interfaces路徑(Debian系統(tǒng))或/etc/-sysconfig/-network_scripts/ifcfg-路徑(紅帽系統(tǒng))。在這些文件中,大家可以修正網(wǎng)絡(luò)設(shè)置中存在的所有錯(cuò)誤。現(xiàn)在如果主機(jī)通過(guò)DHCP獲得自身IP,我們則需要將故障排查轉(zhuǎn)移到DHCP主機(jī)處,找出為什么我們沒(méi)有正確獲得IP租用周期。

問(wèn)題出在本地網(wǎng)絡(luò)中嗎?

排除了端口出現(xiàn)的問(wèn)題之后,接下來(lái)我們就該檢查默認(rèn)網(wǎng)關(guān)是否被設(shè)置及我們能否對(duì)其進(jìn)行訪問(wèn)。route命令將顯示出我們當(dāng)前的路由表,包括默認(rèn)網(wǎng)關(guān):

$ sudo route -n

Kernel IP routing table

Destination Gateway Genmask Flags Metric Ref Use Iface

10.1.1.0 * 255.255.255.0 U 0 0 0 eth0

default 10.1.1.1 0.0.0.0 UG 100 0 0 eth0

以上內(nèi)容中值得關(guān)注的在于***一行,也就是default那段內(nèi)容。在這里,大家可以看到主機(jī)網(wǎng)關(guān)為10.1.1.1.請(qǐng)注意,由于我們?cè)趓oute命令后添加了-n選項(xiàng),所以命令不會(huì)嘗試將這些IP地址解析為實(shí)際主機(jī)名稱。這種方式能讓命令的運(yùn)行更迅速,但更重要的是,我們不希望故障排查工作受到任何潛在DNS錯(cuò)誤的影響。如果大家沒(méi)有在這里看到經(jīng)過(guò)配置的默認(rèn)網(wǎng)關(guān),而我們想要檢查的主機(jī)處于另一子網(wǎng)之下(例如web1為10.1.2.5),那么問(wèn)題很可能就出在這里。要將其解決,大家一定要確保網(wǎng)關(guān)設(shè)置要么處于Debian系統(tǒng)的/etc/network/interfaces路徑下、要么是在紅帽系統(tǒng)的/etc/-sysconfig/network_scripts/ifcfg-路徑下;如果IP是由DHCP所分配,則確保網(wǎng)關(guān)在DHCP服務(wù)器中被正確設(shè)置。在Debian系統(tǒng)中,我們運(yùn)行如下命令進(jìn)行端口重置:

$ sudo service networking restart

而在紅帽系統(tǒng)中我們需要運(yùn)行如下命令進(jìn)行端口重置:

$ sudo service network restart

請(qǐng)大家注意,即使是如此基本的操作命令在不同的系統(tǒng)發(fā)行版中也存在著差異。

一旦確認(rèn)網(wǎng)關(guān)配置完成,我們可以利用ping命令來(lái)確認(rèn)與網(wǎng)關(guān)的通信效果:

$ ping -c 5 10.1.1.1

PING 10.1.1.1 (10.1.1.1) 56(84) bytes of data.

64 bytes from 10.1.1.1: icmp_seq=1 ttl=64 time=3.13 ms

64 bytes from 10.1.1.1: icmp_seq=2 ttl=64 time=1.43 ms

64 bytes from 10.1.1.1: icmp_seq=3 ttl=64 time=1.79 ms

64 bytes from 10.1.1.1: icmp_seq=5 ttl=64 time=1.50 ms

--- 10.1.1.1 ping statistics ---

5 packets transmitted, 4 received, 20% packet loss, time 4020ms

rtt min/avg/max/mdev = 1.436/1.966/3.132/0.686 ms

如大家所見(jiàn),我們已經(jīng)能夠正確ping通網(wǎng)關(guān),這至少意味著大家與10.1.1.0網(wǎng)絡(luò)能夠進(jìn)行通信。如果無(wú)法ping通網(wǎng)關(guān),那么原因可能分以下幾種。首先,這可能表示我們的網(wǎng)關(guān)自動(dòng)阻斷ICMP數(shù)據(jù)包。如果是這樣,請(qǐng)告訴網(wǎng)絡(luò)管理員阻斷ICMP是種討厭的壞習(xí)慣,由此帶來(lái)的安全收益也微乎其微。然后嘗試ping同一子網(wǎng)下的另一臺(tái)Linux主機(jī)。如果ICMP沒(méi)有被阻斷,那么可能是主機(jī)交換機(jī)端口的VLAN設(shè)置有誤,所以我們需要進(jìn)一步檢查接入的交換機(jī)。

DNS能正常工作嗎?

一旦確認(rèn)了與網(wǎng)關(guān)之間的通信能力,下面要做的就是測(cè)試DNS功能是否正常。nslookup與dig兩款工具都能用于排查DNS方面的問(wèn)題,但由于在本實(shí)例中大家只需要進(jìn)行一基礎(chǔ)測(cè)試,因此我們建議使用nslookup命令可查看服務(wù)器能否將web1正確解析為IP地址:

$ nslookup web1

Server: 10.1.1.3

Address: 10.1.1.3#53

Name: web1.example.net

Address: 10.1.2.5

如上所示,實(shí)例中的DNS服務(wù)器能夠正常工作。web1主機(jī)擴(kuò)展為web1.example.net且被解析為10.1.2.5地址。當(dāng)然,大家別忘了確認(rèn)解析出的IP地址與web1應(yīng)該使用的IP地址相匹配。在本實(shí)例中,因?yàn)镈NS沒(méi)有問(wèn)題,所以我們可以直接跳到下一部分;但有時(shí)候DNS也可能出現(xiàn)問(wèn)題。

沒(méi)有配置過(guò)的名稱服務(wù)器或無(wú)法訪問(wèn)名稱服務(wù)器

如果大家看到如下錯(cuò)誤,這可能意味著要么我們的主機(jī)沒(méi)有配置過(guò)的名稱服務(wù)器,要么這些服務(wù)器無(wú)法進(jìn)行訪問(wèn):

$ nslookup web1

;; connection timed out; no servers could be reached

在這兩種情況下,我們都需要檢查/etc/resolv.conf文件以確認(rèn)是否存在已配置的名稱服務(wù)器。如果我們?cè)谶@里找不到任何已配置的IP地址,則需要在文件中添加一個(gè)名稱服務(wù)器。相反,如果我們看到如下所示的內(nèi)容,則需要通過(guò)ping命令對(duì)主機(jī)與名稱服務(wù)器之間的連接進(jìn)行排查:

search example.net

nameserver 10.1.1.3

如果無(wú)法ping通名稱服務(wù)器,且其IP地址與我們的主機(jī)處于同一子網(wǎng)下(在本實(shí)例中,10.1.1.3代表處于同一子網(wǎng)下),則代表名稱服務(wù)器本身可能已經(jīng)崩潰。如果無(wú)法ping通名稱服務(wù)器且其IP地址與我們的主機(jī)處于不同子網(wǎng)下,則直接跳轉(zhuǎn)至"我能路由至遠(yuǎn)程主機(jī)嗎?"章節(jié),選擇其中與名稱服務(wù)器IP故障排查相關(guān)的內(nèi)容加以執(zhí)行。如果通過(guò)ping通名稱服務(wù)器但對(duì)方無(wú)響應(yīng),則跳轉(zhuǎn)至"遠(yuǎn)程端口是否打開(kāi)?”章節(jié)。

缺少搜索路徑或名稱服務(wù)器的問(wèn)題

在運(yùn)行nslookup命令后,我們還可能得到以下錯(cuò)誤信息:

$ nslookup web1

Server: 10.1.1.3

Address: 10.1.1.3#53

** server can't find web1: NXDOMAIN

在這里大家可以看到服務(wù)器沒(méi)有響應(yīng),因?yàn)樗o出的回應(yīng)表明:服務(wù)器無(wú)法找到web1。這可能意味著兩種可能性:***,這可能代表web1這一域名并不在DNS搜索路徑當(dāng)中。這部分搜索設(shè)置內(nèi)容位于/etc/resolv.conf文件當(dāng)中。推薦一種比較好的測(cè)試方式,即執(zhí)行同樣的nslookup命令,但只使用全稱域名(在本實(shí)例中為web1.example.net)。如果能夠被正確解析,則要么在命令中始終使用全稱域名,要么在/etc/resolv.conf中將主機(jī)名稱添加到搜索路徑當(dāng)中(如果大家懶得重復(fù)輸入)。

如果連全稱域名也不能奏效,那么問(wèn)題肯定出在名稱服務(wù)器上。這里我們匯總了一些DNS問(wèn)題的故障排查指南。如果名稱服務(wù)器保存有記錄,則需要對(duì)其配置進(jìn)行檢查。如果使用的是遞歸名稱服務(wù)器,我們則必須通過(guò)查找其它一些域來(lái)測(cè)試名稱服務(wù)器的遞歸機(jī)制是否正常。如果其它域都能被正確列出,我們就要看看問(wèn)題是不是出在包含上述區(qū)域的遠(yuǎn)程名稱服務(wù)器端。

我能路由至遠(yuǎn)程主機(jī)嗎?

在排除了DNS問(wèn)題并看到web1被正確解析為IP 10.1.2.5之后,大家需要測(cè)試自己能否路由至遠(yuǎn)程主機(jī)。假如我們的網(wǎng)絡(luò)啟用了ICMP,那么最快捷的測(cè)試辦法是ping web1。如果該主機(jī)能被ping通,我們就知道數(shù)據(jù)包已經(jīng)被路由至目的地,這樣的話可以直接跳轉(zhuǎn)至"遠(yuǎn)程端口打開(kāi)了嗎?"章節(jié)。如果無(wú)法ping通web1,則嘗試與網(wǎng)絡(luò)中的另一臺(tái)主機(jī)通信看看能否ping通。如果我們無(wú)法在遠(yuǎn)程網(wǎng)絡(luò)中ping通任何主機(jī),就說(shuō)明數(shù)據(jù)包無(wú)法被正確路由。***的路由問(wèn)題測(cè)試工具這一就是traceroute。一旦與一臺(tái)主機(jī)建立起路由追蹤,它會(huì)測(cè)試我們與主機(jī)之間的每一次數(shù)據(jù)包跳轉(zhuǎn)。舉例來(lái)說(shuō),dev1與web1之間的一次成功路由追蹤流程將如下所示:

$ traceroute 10.1.2.5

traceroute to 10.1.2.5 (10.1.2.5), 30 hops max, 40 byte packets

1 10.1.1.1 (10.1.1.1) 5.432 ms 5.206 ms 5.472 ms

2 web1 (10.1.2.5) 8.039 ms 8.348 ms 8.643 ms

這里我們會(huì)看到數(shù)據(jù)包從dev1到達(dá)其網(wǎng)關(guān)(10.1.1.1),然后再跳轉(zhuǎn)至web1。這代表著起始位置與目標(biāo)主機(jī)可能都采用10.1.1.1網(wǎng)關(guān)。如果大家的操作環(huán)境中存在更多路由中轉(zhuǎn)點(diǎn),那么顯示的結(jié)果可能與上述內(nèi)容有所不同。如果無(wú)法ping通web1,那么輸入結(jié)果將如下所示:

$ traceroute 10.1.2.5

traceroute to 10.1.2.5 (10.1.2.5), 30 hops max, 40 byte packets

1 10.1.1.1 (10.1.1.1) 5.432 ms 5.206 ms 5.472 ms

2 * * *

3 * * *

一旦我們?cè)谳敵鼋Y(jié)果中看到星號(hào),就說(shuō)明問(wèn)題出在網(wǎng)關(guān)方面。大家需要從路由器著手,看看為什么它無(wú)法在兩套網(wǎng)絡(luò)之間路由數(shù)據(jù)包。通過(guò)追蹤,大家會(huì)看到如下內(nèi)容:

$ traceroute 10.1.2.5

traceroute to 10.1.2.5 (10.1.2.5), 30 hops max, 40 byte packets

1 10.1.1.1 (10.1.1.1) 5.432 ms 5.206 ms 5.472 ms

1 10.1.1.1 (10.1.1.1) 3006.477 ms !H 3006.779 ms !H 3007.072 ms

在這種情況下,我們發(fā)現(xiàn)ping操作在網(wǎng)關(guān)環(huán)節(jié)出現(xiàn)了超時(shí),這說(shuō)明該主機(jī)可能已經(jīng)崩潰或無(wú)法通過(guò)同一子網(wǎng)進(jìn)行訪問(wèn)。有鑒于此,如果大家還沒(méi)有從同一子網(wǎng)下的其它設(shè)備訪問(wèn)過(guò)web1,請(qǐng)嘗試ping及其它測(cè)試。

注意:如果某套煩人的網(wǎng)絡(luò)仍然在阻斷ICMP,不用擔(dān)心,我們?nèi)匀挥修k法進(jìn)行路由排查工作。大家只需要安裝tcptraceroute軟件包(sudo apt-get install tcptraceroute)然后運(yùn)行相同的路由追蹤命令,惟一的區(qū)別是用tcptraceroute來(lái)代替traceroute 。

遠(yuǎn)程端口打開(kāi)了嗎?

現(xiàn)在我們已經(jīng)能夠路由至目標(biāo)設(shè)備,但仍然無(wú)法在端口80上訪問(wèn)web服務(wù)器。接下來(lái)的測(cè)試意在檢查端口是否打開(kāi)。要實(shí)現(xiàn)這一目的,我們可以選擇的方案很多。選擇其一,我們可以嘗試telnet:

$ telnet 10.1.2.5 80

Trying 10.1.2.5...

telnet: Unable to connect to remote host: Connection refused

如果大家看到連接被拒絕,那么端口很可能處于關(guān)閉狀態(tài)(可能是Apache未能運(yùn)行在遠(yuǎn)程主機(jī)上或沒(méi)有偵聽(tīng)該端口),也可能是防火墻阻斷了我們的訪問(wèn)。如果telnet能夠連接,那么恭喜各位,現(xiàn)在大家已經(jīng)解決了所有網(wǎng)絡(luò)問(wèn)題。但如果web服務(wù)的工作狀態(tài)與我們的預(yù)期不符,則需要檢查web1上的Apache配置(web服務(wù)器的故障排查工作在本文的其它章節(jié)會(huì)談到)。

但相對(duì)于telnet,我個(gè)人更偏向使用nmap來(lái)進(jìn)行端口測(cè)試,因?yàn)樗軌驒z測(cè)到防火墻的影響。如果大家還沒(méi)有安裝nmap,可以使用軟件包管理器快速安裝nmap軟件包。要對(duì)web1進(jìn)行測(cè)試,請(qǐng)輸入以下內(nèi)容:

$ nmap -p 80 10.1.2.5

Starting Nmap 4.62 ( http://nmap.org ) at 2009-02-05 18:49 PST

Interesting ports on web1 (10.1.2.5):

PORT STATE SERVICE

80/tcp filtered http

nmap果然不負(fù)眾望,它一般都能發(fā)現(xiàn)所謂"關(guān)閉的端口"到底是直接處于關(guān)閉狀態(tài)、還是在防火墻后處于關(guān)閉狀態(tài)。通常情況下,nmap會(huì)將真正關(guān)閉的端口報(bào)告為"關(guān)閉",而將防火墻后的端口報(bào)告為"過(guò)濾"。在我們的測(cè)試中它報(bào)告其狀態(tài)為"過(guò)濾",意味著期間有防火墻作梗并忽略掉了我們的數(shù)據(jù)包。如此一來(lái),大家就需要檢查網(wǎng)關(guān)(10.1.1.1)以及web1上的全部防火墻規(guī)則,看看端口80是否處于阻斷狀態(tài)。

在本地測(cè)試遠(yuǎn)程主機(jī)

到了這里,擺在我們面前的就有兩種可能性:要么將故障范圍縮小為網(wǎng)絡(luò)問(wèn)題,要么認(rèn)定毛病出在主機(jī)自身。如果大家認(rèn)定毛病出在主機(jī)自身,我們可以通過(guò)一系列操作檢查端口80是否可用。

偵聽(tīng)端口測(cè)試

我們?cè)趙eb1上要做的***件事就是測(cè)試端口80是否處于偵聽(tīng)狀態(tài)。大家可以使用netstat -lnp命令來(lái)列出所有打開(kāi)且處于偵聽(tīng)狀態(tài)的端口。我們當(dāng)然可以直接運(yùn)行這條命令并從輸出結(jié)果中篩選出自己想要的結(jié)論,但效率更高的方式則是利用grep指定顯示端口80的偵聽(tīng)狀態(tài):

$ sudo netstat -lnp | grep :80

tcp 0 0 0.0.0.0:80 0.0.0.0:* LISTEN 919/apache

***列內(nèi)容顯示出端口所使用的傳輸協(xié)議。第二及第三列則顯示接收及發(fā)送隊(duì)列(這里兩者都被設(shè)置為0)。現(xiàn)在我們要注意的是第四列,因?yàn)樗谐隽酥鳈C(jī)所偵聽(tīng)的本地地址。此處的0.0.0.0:80告訴我們?cè)撝鳈C(jī)正偵聽(tīng)所有端口80流量中與其IP有關(guān)的數(shù)據(jù)。如果Apache只偵聽(tīng)web1的以太網(wǎng)地址,我們將在輸出結(jié)果中看到10.1.2.5:80。

***一列顯示的是哪個(gè)進(jìn)程令端口處于開(kāi)放狀態(tài)。這里我們看到是運(yùn)行中的Apache正在進(jìn)行偵聽(tīng)。如果大家在自己的netstat輸出結(jié)果中沒(méi)有看到這部分內(nèi)容,則需要啟動(dòng)Apache服務(wù)器。

防火墻規(guī)則

如果進(jìn)程正在運(yùn)行且偵聽(tīng)端口80,那就說(shuō)明可能是web1中某種形式的防火墻導(dǎo)致了問(wèn)題的發(fā)生。利用iptables命令列出全部現(xiàn)有防火墻規(guī)則。如果我們的防火墻已被禁用,那么輸出結(jié)果應(yīng)如下所示:

$ sudo /sbin/iptables -L

Chain INPUT (policy ACCEPT)

target prot opt source destination

Chain FORWARD (policy ACCEPT)

target prot opt source destination

Chain OUTPUT (policy ACCEPT)

target prot opt source destination

請(qǐng)注意,默認(rèn)政策被設(shè)置為ACCEPT。盡管規(guī)則本身沒(méi)有問(wèn)題,但防火墻仍然有可能默認(rèn)棄用所有數(shù)據(jù)包。如果屬于這類情況,大家會(huì)看到如下所示的輸出內(nèi)容:

$ sudo /sbin/iptables -L

Chain INPUT (policy DROP)

target prot opt source destination

Chain FORWARD (policy DROP)

target prot opt source destination

Chain OUTPUT (policy DROP)

target prot opt source destination

另一方面,如果某條防火墻規(guī)則阻斷了端口80,那么輸出結(jié)果則應(yīng)如下所示:

$ sudo /sbin/iptables -L -n

Chain INPUT (policy ACCEPT)

target prot opt source destination

REJECT tcp -- 0.0.0.0/0 0.0.0.0/0 tcp dpt:80 reject-with(

icmp-port-unreachable

Chain FORWARD (policy ACCEPT)

target prot opt source destination

Chain OUTPUT (policy ACCEPT)

target prot opt source destination

在后一種情況下,我們顯然需要修改防火墻規(guī)則,以允許服務(wù)器接收來(lái)自端口80的主機(jī)數(shù)據(jù)流量。

網(wǎng)絡(luò)緩慢狀況的故障排查

從某種角度來(lái)說(shuō),網(wǎng)絡(luò)無(wú)法工作的問(wèn)題更容易解決。當(dāng)一臺(tái)主機(jī)無(wú)法訪問(wèn),我們可以執(zhí)行前面討論過(guò)的故障排查步驟直到一切恢復(fù)正常。但如果僅僅是網(wǎng)絡(luò)緩慢,追查其根本原因往往變得更為棘手。本章節(jié)將討論一些相關(guān)技巧,幫助大家追蹤導(dǎo)致網(wǎng)絡(luò)速度緩慢的各種原因。

DNS問(wèn)題

雖然DNS在網(wǎng)絡(luò)出現(xiàn)問(wèn)題時(shí)常常蒙冤受責(zé),但在導(dǎo)致網(wǎng)絡(luò)性能不佳方面,DNS倒真該被優(yōu)先檢查一番。舉例來(lái)說(shuō),如果我們?yōu)槟硞€(gè)域名配置了兩臺(tái)DNS服務(wù)器,那么在***臺(tái)出現(xiàn)問(wèn)題時(shí),我們發(fā)出的DNS請(qǐng)求會(huì)等待30秒之后才傳輸至第二臺(tái)DNS服務(wù)器。雖然當(dāng)我們使用像dig或nslookup這樣的工具時(shí)此類情況顯得一目了然,但對(duì)于日常使用來(lái)說(shuō),DNS故障往往會(huì)以令人意外的方式造成網(wǎng)絡(luò)緩慢;這是因?yàn)橛刑喾?wù)需要借助DNS實(shí)現(xiàn)將主機(jī)名稱解析為IP地址的工作。這些問(wèn)題甚至有可能影響到我們的網(wǎng)絡(luò)故障診斷工具。

Ping、tracerouter、oute、netstat甚至包括iptables在內(nèi)的多款網(wǎng)絡(luò)故障排查工具都會(huì)受到DNS問(wèn)題的牽連而導(dǎo)致速度緩慢。在默認(rèn)情況下,上述所有工具都會(huì)盡可能嘗試將IP地址解析為主機(jī)名稱。一旦DNS服務(wù)器有了毛病,這些命令就會(huì)在查找IP地址的過(guò)程中停滯不前并最終導(dǎo)致執(zhí)行失效。在ping或traceroute方面,問(wèn)題表現(xiàn)為整個(gè)ping應(yīng)答周期耗時(shí)相當(dāng)長(zhǎng),但最終的請(qǐng)求往返時(shí)間卻比較短。而在netstat與iptables方面,其請(qǐng)求結(jié)果可能會(huì)拖延很久才輸出到屏幕上,這是因?yàn)橄到y(tǒng)一直在等待已經(jīng)超時(shí)的DNS請(qǐng)求。

在前面提到的各種情況中,我們都能很容易地繞過(guò)DNS來(lái)保證故障排查結(jié)果的準(zhǔn)確性。所有列舉的命令都可以通過(guò)添加-n參數(shù)來(lái)禁止其將IP地址解析為主機(jī)名稱。我也是剛剛養(yǎng)成在所有命令后加-n的好習(xí)慣--正如***章提到的那樣--除非我確定自己想解析IP地址。

注意:DNS解析還可能以其它一些意想不到的方式影響我們的web服務(wù)器性能。某些web服務(wù)器會(huì)根據(jù)配置對(duì)訪問(wèn)的***個(gè)IP地址進(jìn)行解析,并將得到的主機(jī)名稱記錄下來(lái)。雖然這會(huì)讓記錄信息更具可讀性,但同時(shí)也會(huì)在出現(xiàn)問(wèn)題時(shí)大大降低web服務(wù)器的速度--例如存在大量訪問(wèn)者時(shí)。這時(shí)web服務(wù)器會(huì)忙著解決這些IP地址的解析工作,而選擇將服務(wù)流量擱置在一邊。

利用traceroute解決網(wǎng)絡(luò)緩慢問(wèn)題

當(dāng)處于不同網(wǎng)絡(luò)中的服務(wù)器與主機(jī)間的連接發(fā)生拖慢狀況時(shí),我們可能很難追查到真正的罪魁禍?zhǔn)住S绕涫窃谕下匝舆t形式(即響應(yīng)所消耗的時(shí)間)出現(xiàn)而不涉及全局帶寬的情況下,真正能力挽狂瀾的就只有traceroute了。正如前文所說(shuō),tracerout是一種在遠(yuǎn)程網(wǎng)絡(luò)中測(cè)試客戶機(jī)與服務(wù)器間全局連接的有效方式,但它同時(shí)也能有效診斷出導(dǎo)致網(wǎng)絡(luò)緩慢的潛在根源。由于traceroute會(huì)輸出當(dāng)前與目標(biāo)設(shè)備之間每次數(shù)據(jù)轉(zhuǎn)發(fā)所消耗的時(shí)間,因此我們可以利用它追蹤由地域相距過(guò)大或網(wǎng)關(guān)問(wèn)題所引發(fā)的過(guò)載及網(wǎng)絡(luò)緩慢原因。舉例來(lái)說(shuō),我們利用traceroute檢查美國(guó)與中國(guó)兩邊的雅虎服務(wù)器,輸出結(jié)果如下所示:

$ traceroute yahoo.cn

traceroute to yahoo.cn (202.165.102.205), 30 hops max, 60 byte packets

1 64-142-56-169.static.sonic.net (64.142.56.169) 1.666 ms 2.351 ms 3.038 ms

2 2.ge-1-1-0.gw.sr.sonic.net (209.204.191.36) 1.241 ms 1.243 ms 1.229 ms

3 265.ge-7-1-0.gw.pao1.sonic.net (64.142.0.198) 3.388 ms 3.612 ms 3.592 ms

4 xe-1-0-6.ar1.pao1.us.nlayer.net (69.22.130.85) 6.464 ms 6.607 ms 6.642 ms

5 ae0-80g.cr1.pao1.us.nlayer.net (69.22.153.18) 3.320 ms 3.404 ms 3.496 ms

6 ae1-50g.cr1.sjc1.us.nlayer.net (69.22.143.165) 4.335 ms 3.955 ms 3.957 ms

7 ae1-40g.ar2.sjc1.us.nlayer.net (69.22.143.118) 8.748 ms 5.500 ms 7.657 ms

8 as4837.xe-4-0-2.ar2.sjc1.us.nlayer.net (69.22.153.146) 3.864 ms 3.863 ms 3.865 ms

9 219.158.30.177 (219.158.30.177) 275.648 ms 275.702 ms 275.687 ms

10 219.158.97.117 (219.158.97.117) 284.506 ms 284.552 ms 262.416 ms

11 219.158.97.93 (219.158.97.93) 263.538 ms 270.178 ms 270.121 ms

12 219.158.4.65 (219.158.4.65) 303.441 ms * 303.465 ms

13 202.96.12.190 (202.96.12.190) 306.968 ms 306.971 ms 307.052 ms

14 61.148.143.10 (61.148.143.10) 295.916 ms 295.780 ms 295.860 ms

...

既然不了解有關(guān)網(wǎng)絡(luò)的更多細(xì)節(jié)信息,我們也能夠單純通過(guò)往返時(shí)間把握數(shù)據(jù)包的動(dòng)向。從第九次跳轉(zhuǎn)開(kāi)始,IP地址變成了219.158.30.177,這意味著數(shù)據(jù)包已經(jīng)離開(kāi)美國(guó)抵達(dá)中國(guó),而跳轉(zhuǎn)的往返時(shí)間也從3毫秒提高到275毫秒。

利用iftop找出是誰(shuí)占用了帶寬

有時(shí)候我們的網(wǎng)絡(luò)緩慢并不是由遠(yuǎn)程服務(wù)器或路由器所引起,而只是因?yàn)橄到y(tǒng)中的某些進(jìn)程占用了太多可用帶寬。雖然從直觀角度我們很難確定哪些進(jìn)程正在使用帶寬,但也有一些工具能幫大家把這些搗蛋的家伙揪出來(lái)。

top就是這樣一款出色的故障排查工具,它的出現(xiàn)還帶來(lái)一系列思路相似的衍生品,例如iotop--能夠確定到底是哪些進(jìn)程占用了大部分磁盤I/O性能。最終名為iftop的工具橫空出世,能夠在網(wǎng)絡(luò)連接領(lǐng)域提供同等功能。與top不同,iftop不會(huì)親自關(guān)注進(jìn)程情況,而是列出用戶服務(wù)器與遠(yuǎn)程IP之間占用帶寬最多的連接對(duì)象。舉例來(lái)說(shuō),我們可以在iftop中快速查看備份服務(wù)器IP地址在輸出結(jié)果中的位置來(lái)判斷備份工作有沒(méi)有大量占用網(wǎng)絡(luò)帶寬。

iftop輸出圖示

紅帽與Debian的各個(gè)發(fā)行版都能使用iftop這一名稱的軟件包,但在紅帽發(fā)行版方面大家可能需要從第三方資源庫(kù)才能獲取。一旦安裝過(guò)程完成,我們?cè)诿钚兄羞\(yùn)行iftop命令即可啟用(需要root權(quán)限)。和top命令一樣,我們可以點(diǎn)Q鍵退出。

在iftop界面屏幕的最上方是顯示全局流量的信息欄。信息欄之下則是另外兩列信息,一列為源IP、另一列為目標(biāo)IP,二者之間以箭頭填充幫助我們了解帶寬被用于從自己的主機(jī)向外發(fā)送數(shù)據(jù)還是從遠(yuǎn)程主機(jī)端接收數(shù)據(jù)。再往下則是另外三個(gè)欄位,表示兩臺(tái)主機(jī)之間在2秒、10秒及40秒中的數(shù)據(jù)傳輸速率。與平均負(fù)載相似,大家可以看到目前帶寬使用是否達(dá)到峰值,或者在過(guò)去的哪個(gè)時(shí)段達(dá)到過(guò)峰值。在屏幕的最下方,我們會(huì)找到傳輸數(shù)據(jù)(簡(jiǎn)稱TX)與接收數(shù)據(jù)(簡(jiǎn)稱RX)的總體統(tǒng)計(jì)結(jié)果。與top差不多,iftop的界面也會(huì)定期更新。

在不添加額外參數(shù)的情況下,iftop命令通常能夠滿足我們故障排查的全部需求;但有的時(shí)候,我們可能也希望利用一些選項(xiàng)實(shí)現(xiàn)特殊功能。iftop命令在默認(rèn)情況下會(huì)顯示查找到的***個(gè)端口的統(tǒng)計(jì)信息,但在某些服務(wù)器中大家可能會(huì)使用多個(gè)端口,所以如果我們希望讓iftop打理第二個(gè)以太網(wǎng)端口(即實(shí)例中的eth1),那么請(qǐng)輸入iftop -i eth1。

默認(rèn)情況下,iftop會(huì)試圖將所有IP地址通過(guò)解析轉(zhuǎn)換為主機(jī)名稱。這樣做的缺點(diǎn)在于一旦遠(yuǎn)程DNS服務(wù)器速度緩慢,報(bào)告的生成速度也將隨之慘不忍睹。另外,所有DNS解析活動(dòng)都會(huì)增加額外的網(wǎng)絡(luò)流量,而這些都會(huì)顯示在iftop的報(bào)告界面當(dāng)中。因此要禁用網(wǎng)絡(luò)解析功能,別忘了在iftop命令后面加-n哦。

一般說(shuō)來(lái),iftop顯示的是主機(jī)之間所使用的全局帶寬;但為了幫助大家縮小排查范圍,我們可能希望每臺(tái)主機(jī)具體使用哪個(gè)端口進(jìn)行通信。畢竟只要找到了主機(jī)中占用***帶寬的網(wǎng)絡(luò)端口,我們就可以在判斷是否接入FTP端口之外進(jìn)行其它排查手段。啟動(dòng)iftop之后,按P鍵可以切換端口的顯示與隱藏狀態(tài)。不過(guò)大家可能會(huì)注意到,有時(shí)候顯示所有端口狀態(tài)可能導(dǎo)致我們正在關(guān)注的主機(jī)被擠出當(dāng)前顯示屏幕。如果出現(xiàn)這種情況,我們還可以按S或D鍵來(lái)僅顯示來(lái)自特定源或特定目標(biāo)的端口。由于服務(wù)項(xiàng)目眾多,目標(biāo)主機(jī)可能隨機(jī)使用多個(gè)端口并發(fā)生帶寬占用峰值,這將導(dǎo)致工具無(wú)法識(shí)別出正在使用的服務(wù),因此僅顯示源端口還是相當(dāng)有用的。不過(guò)服務(wù)器上的端口也可能與當(dāng)前設(shè)備上的服務(wù)相對(duì)應(yīng)。在這種情況下,我們可以使用前面提到的netstat -lnp來(lái)找出服務(wù)所偵聽(tīng)的端口。

與大多數(shù)Linux命令相似,iftop也擁有多種高級(jí)選項(xiàng)。我們?cè)谖恼轮刑岬降倪@些已經(jīng)足以涵蓋大多數(shù)故障排查需求,但為了滿足大家進(jìn)一步了解iftop功能的愿望,我教各位一個(gè)小技巧:只要輸入man iftop,就可以閱讀包含在軟件包當(dāng)中的使用手冊(cè)、獲得更多與之相關(guān)的知識(shí)。

【編輯推薦】

【責(zé)任編輯:黃丹 TEL:(010)68476606】

點(diǎn)贊 0

總結(jié)

以上是生活随笔為你收集整理的linux服务器无网络确认,Linux服务器故障排查实用指南的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò),歡迎將生活随笔推薦給好友。

黄色国产高清 | a级国产乱理论片在线观看 特级毛片在线观看 | 日本在线视频网址 | 日韩精品在线视频 | 亚洲黄色片 | 日日夜夜天天综合 | 中文字幕视频网站 | 国产成人333kkk | 精品亚洲国产视频 | 中文字幕资源网 | 五月婷婷丁香 | 一本一道久久a久久精品 | 久久99深爱久久99精品 | 五月婷婷毛片 | 国产亚洲精品电影 | 日韩日韩日韩日韩 | 在线观看中文字幕一区 | 视频福利在线观看 | 久久三级视频 | 精品国产区在线 | 亚洲免费av在线播放 | 蜜臀av在线一区二区三区 | 久久久久久久亚洲精品 | 日韩在线免费播放 | 久久免费国产视频 | 中文字幕 二区 | 超碰在线资源 | 亚洲日本va在线观看 | 国产精品久久在线 | 日韩精品一区二区在线观看 | 日韩国产精品一区 | 国产一及片 | 国产在线一区观看 | 欧美日韩亚洲第一页 | 一级片视频在线 | 这里只有精彩视频 | 在线观看小视频 | 91在线播放国产 | 色多视频在线观看 | 国产精品刺激对白麻豆99 | 久久黄色免费视频 | 国产麻豆视频免费观看 | 99热只有精品在线观看 | 欧美一级特黄aaaaaa大片在线观看 | 久久久精品午夜 | 日韩精品中文字幕在线观看 | 欧美日韩国产一区 | 精品不卡av| 国产中文字幕亚洲 | 97在线观看视频国产 | 国产精品正在播放 | 亚洲免费一级电影 | 男女激情片在线观看 | 丁香婷婷激情 | 精品国模一区二区三区 | 国产高清网站 | 久久久久久久久久久高潮一区二区 | 毛片一级免费一级 | 日本中文字幕视频 | 久久免费中文视频 | 九九色网| 国产免费观看高清完整版 | 在线观看国产一区二区 | 日日日操操 | 久久九九久久精品 | 人人玩人人添人人澡97 | av片中文 | 国产午夜精品一区二区三区欧美 | 五月天久久 | 日本高清中文字幕有码在线 | 久久久久久久久久久高潮一区二区 | www色| 99精品久久精品一区二区 | 91香蕉国产| 欧美最猛性xxxxx(亚洲精品) | 超碰97人人干 | 国产视频在线观看一区二区 | 欧美一级日韩三级 | 久久久www成人免费毛片 | 日本精品中文字幕 | 视频在线观看入口黄最新永久免费国产 | 亚洲精品h | 日韩欧美在线观看一区二区 | 久久综合狠狠综合久久综合88 | 国产精品 中文字幕 亚洲 欧美 | 久久久黄色免费网站 | 亚洲免费一级电影 | 久久久网 | 国产精品爽爽久久久久久蜜臀 | 美女视频黄频大全免费 | 免费国产在线观看 | 在线中文字幕一区二区 | 99re国产| 成人av影视 | 日韩色区 | 久草视频视频在线播放 | 日韩视频在线观看视频 | va视频在线| 五月婷婷另类国产 | 欧美午夜精品久久久久久孕妇 | 免费看黄电影 | 天堂av在线网 | 香蕉视频啪啪 | 99在线视频免费观看 | 国产黄色大全 | 日本三级久久久 | 91精品人成在线观看 | 国产91免费在线观看 | 亚洲综合视频网 | 国产精品白丝av | 日日草天天草 | 中文字幕一区二区三 | 婷婷国产在线 | 国产精品一区在线 | 五月综合色婷婷 | 在线播放 亚洲 | 最近中文字幕大全 | 99久久精品免费看 | 日本一区二区不卡高清 | 狠狠色丁香婷婷综合久小说久 | 综合久久五月天 | 亚洲国产精品电影在线观看 | 欧美精品一区二区三区一线天视频 | 日韩视频免费观看高清完整版在线 | 国产无限资源在线观看 | 天天干天天天 | a v在线观看 | 免费亚洲视频在线观看 | 久久网站最新地址 | 人人草人人草 | 欧美日韩久久久 | 久久99精品国产99久久6尤 | 国产人成在线视频 | 天天操 夜夜操 | 男女激情免费网站 | a在线观看视频 | 色吧av色av| 日韩欧美在线影院 | 成人九九视频 | 在线观看视频色 | 亚洲成人欧美 | 亚洲精品mv在线观看 | av最新资源 | 久久国产精品免费看 | 国产精品第72页 | 91精品老司机久久一区啪 | 深夜免费福利视频 | 91桃花视频| 91成人免费在线视频 | 韩国av一区二区三区在线观看 | 深爱激情久久 | 亚洲精品午夜国产va久久成人 | 91麻豆操 | 天天操天天添天天吹 | 99国产精品一区 | 一本一道久久a久久综合蜜桃 | 天天操比| 色婷婷99| 婷婷国产v亚洲v欧美久久 | 不卡在线一区 | 中文字幕亚洲精品在线观看 | 国产视频1区2区3区 久久夜视频 | 久久99久久99免费视频 | 成人国产精品久久久 | 91手机电影| 欧美资源在线观看 | 成人91在线 | 中文字幕在线免费 | 99av国产精品欲麻豆 | 深夜国产福利 | av网站播放 | 丝袜美女视频网站 | 国产精品亚洲人在线观看 | 五月婷在线观看 | 最新日韩精品 | 中文字幕人成乱码在线观看 | 欧美成人精品欧美一级乱黄 | 黄色影院在线播放 | 91精品久久久久久综合五月天 | 日韩小视频网站 | 成人在线网站观看 | 午夜精品久久久久久久99水蜜桃 | 久草视频资源 | 中文字幕精| 亚洲爱视频 | 亚洲激情在线观看 | 国产视频一区精品 | 国产1区2 | 五月婷婷中文 | 国产在线a免费观看 | 国产一级在线视频 | 国产艹b视频 | 免费观看性生交大片3 | 99精品视频免费看 | 狠狠狠狠狠狠狠狠干 | 最近中文字幕大全中文字幕免费 | 国产麻豆电影在线观看 | 超级碰碰碰视频 | 91av亚洲| 又黄又刺激又爽的视频 | 国产成人区 | 欧美片网站yy | 国产精品成人久久久久久久 | 国产又粗又猛又色又黄视频 | 精品免费一区二区三区 | 久草视频在线免费播放 | 91丨九色丨国产在线观看 | av免费观看高清 | 欧美色图东方 | 激情影音| 亚洲综合五月天 | 91在线区 | 中文在线亚洲 | 亚洲三级在线免费观看 | 成人av教育 | 911国产| 热精品 | 欧美日韩免费在线观看视频 | 91视频免费网址 | 91精品国产乱码 | 精品国产一区二区三区在线观看 | 91视频 - 88av| 毛片网站在线观看 | 成人影片在线免费观看 | 久久久91精品国产一区二区三区 | 久在线观看 | 伊人久久影视 | 在线电影 你懂得 | 成人毛片在线视频 | 五月天精品视频 | 在线免费观看欧美日韩 | 国产高清久久久 | 免费观看黄色12片一级视频 | www色,com | 91视频国产免费 | 狂野欧美激情性xxxx | 一级黄色片在线免费观看 | 国产视频精选 | 美女一二三区 | 99精品免费久久久久久久久日本 | 国产亚洲欧洲 | 欧美午夜精品久久久久久浪潮 | 亚洲精品在线观看不卡 | 中文一区二区三区在线观看 | 黄色在线免费观看网址 | 亚洲高清激情 | 亚洲国产精久久久久久久 | 久草在线手机视频 | 国产在线传媒 | 亚洲国产精品久久久久婷婷884 | 激情av资源 | 国产亚洲欧美一区 | 久草剧场 | 久草免费新视频 | 久在线观看 | 一区免费在线 | 免费毛片一区二区三区久久久 | www.av在线.com| 91亚洲网 | 超碰97在线人人 | 最近高清中文字幕在线国语5 | 一区二区三区av在线 | 麻豆精品国产传媒 | 日韩成人在线一区二区 | 午夜av激情 | 最近更新中文字幕 | 91香蕉视频在线 | 一级免费av | 中文字幕av在线免费 | 欧美日本一二三 | 婷婷综合激情 | 免费观看www视频 | 91视频在线网址 | 国产成人久久精品77777综合 | av中文字幕电影 | 天天射天天干天天操 | 99久久99热这里只有精品 | 亚洲闷骚少妇在线观看网站 | 中文在线天堂资源 | 999久久久久久久久6666 | 99产精品成人啪免费网站 | 日韩在线观看小视频 | 欧美激情视频免费看 | 久久色亚洲 | 亚洲激情在线 | 在线成人一区 | 美女福利视频一区二区 | 四虎影视成人精品国库在线观看 | 精品免费久久久久 | 青青网视频 | 欧美一级欧美一级 | 国产在线观看中文字幕 | 青草视频网 | 色综合久久久久综合体桃花网 | 最新久久久 | 久久9999久久免费精品国产 | 成年人免费在线观看网站 | 顶级欧美色妇4khd | 一级免费看视频 | 五月婷婷另类国产 | 色a在线观看 | 91高清免费在线观看 | 最新不卡av| 免费观看www7722午夜电影 | 69国产精品视频免费观看 | 国精产品999国精产品岳 | 日韩在线高清 | av在线小说 | 98涩涩国产露脸精品国产网 | 日本不卡一区二区 | 五月婷亚洲 | 久久综合爱 | 久久久网页 | 国产精品亚州 | 国产成人精品av在线 | 国产精品久久久777 成人手机在线视频 | 日韩激情三级 | 国产高清中文字幕 | 在线免费精品视频 | 欧美色图30p | 在线观看日本高清mv视频 | 九九免费视频 | 国产精品av免费 | 天天射天天做 | 午夜电影av | 97成人在线视频 | 二区三区在线 | 国产三级av在线 | 日日干激情五月 | www.com久久 | 在线观看一区二区精品 | 日韩亚洲国产精品 | 九九在线视频 | 国产一区国产精品 | 九九九九精品 | 五月天激情电影 | 91精品视频免费 | 2020天天干天天操 | 亚洲三级性片 | 91精品一区二区三区蜜臀 | 国产九九九九九 | 天天操夜夜爱 | 天天干夜夜爽 | 亚洲免费观看在线视频 | 视频国产在线 | 丁香色婷婷 | 精品国产观看 | 亚洲乱亚洲乱妇 | 91福利区一区二区三区 | 成人毛片一区 | 伊人天天综合 | 91看片一区二区三区 | 午夜a区 | 国产精品入口麻豆www | av在线永久免费观看 | 日韩三级免费 | 高清久久久久久 | 久久久久久久久久久久电影 | av成人免费网站 | 18久久久久久 | 国产精品日韩在线 | 成人国产在线 | 日韩综合视频在线观看 | 日批视频在线观看免费 | 丁香电影小说免费视频观看 | 少妇搡bbb | 91精品国产91p65 | 精品婷婷 | 久久视频国产精品免费视频在线 | 欧美日韩国产一区 | 国产最新网站 | www.日韩免费 | 欧美一区在线观看视频 | 日韩精选在线观看 | 国产精品婷婷 | www91在线| 美女视频黄是免费的 | 国产成在线观看免费视频 | 久久久久久亚洲精品 | 天天操天天射天天添 | 国产精品99在线播放 | 91丨精品丨蝌蚪丨白丝jk | 成人在线视频网 | 国内亚洲精品 | 天天操偷偷干 | 97在线视频网站 | 国产日韩精品在线观看 | 午夜黄色影院 | 狠狠色丁香婷婷综合久小说久 | 2019中文字幕第一页 | 中文字幕在线免费观看 | www亚洲精品 | 精品国产乱码久久久久久1区二区 | 国产精品久久久电影 | 91在线免费公开视频 | 欧美日产一区 | 看全黄大色黄大片 | 欧美a级在线免费观看 | 国产国产人免费人成免费视频 | 久久亚洲电影 | 国产亚洲一区 | 欧洲成人免费 | 国产精品3区 | 中国一级片免费看 | 天天躁日日躁狠狠躁 | 热久久精品在线 | 久久爱资源网 | 欧美乱码精品一区 | 天天·日日日干 | 欧美成人xxxxxxxx | 天天干天天上 | 日日爱视频 | 色多多视频在线 | 日韩精品播放 | 狠狠色婷婷丁香六月 | 亚洲一级电影 | 成年人在线免费视频观看 | 黄色小网站在线观看 | 激情婷婷网| 久久久久久久久综合 | 国际精品久久久 | 午夜av日韩 | 天天操天天操天天操天天操天天操 | 国产福利av在线 | 一本色道久久综合亚洲二区三区 | 在线免费观看不卡av | 欧美性生爱| 欧美91精品久久久久国产性生爱 | 91麻豆操 | 欧美在线视频日韩 | 麻豆传媒电影在线观看 | 日韩色一区二区三区 | 日韩视频在线观看免费 | 久久 精品一区 | 国产激情久久久 | 天天操福利视频 | 高清av免费看 | 天天操天天干天天综合网 | 中文字幕刺激在线 | 男女靠逼app | 久久深夜 | 日本aa在线 | 国产一级二级三级视频 | 国产精品99精品 | 亚洲成人资源在线 | 日韩在线 一区二区 | 色婷婷狠狠18 | 五月婷婷综合在线视频 | 日本精油按摩3 | 色黄www小说 | 91亚色免费视频 | 欧美韩日精品 | av日韩国产 | 国产成人一二片 | 亚洲三区在线 | 性色av一区二区三区在线观看 | 精品美女在线观看 | 国产在线观看免费 | 天天操天| 亚洲在线激情 | 精品久久久久久亚洲综合网站 | 亚洲国产黄色 | 日日爱影视 | 91精品综合在线观看 | 九月婷婷人人澡人人添人人爽 | 啪啪av在线 | 国产日韩精品一区二区 | 97热久久免费频精品99 | 午夜精品三区 | 久久精品站 | 国产在线精品观看 | 婷婷久久久久 | 成人影片免费 | 国产97在线观看 | 中文字幕日韩一区二区三区不卡 | 西西444www大胆高清视频 | 日本久久中文字幕 | 麻豆影视在线观看 | 国内精品久久久久影院男同志 | 久草观看 | 午夜视频导航 | 久久久婷 | 91视频xxxx| 欧美日韩国产精品一区二区 | 亚洲精品国产区 | 男女精品久久 | 天天看天天干天天操 | 超碰在线人人爱 | 91香蕉视频 | 黄色av电影 | 免费福利在线播放 | 欧美色插| 亚洲婷婷综合色高清在线 | 人人舔人人干 | 日日色综合 | 国产精品久久久久久久av电影 | 在线观看成人网 | 三级黄色大片在线观看 | 天天操综合网站 | 精品国产观看 | 激情丁香 | 91视频在线 | 不卡的av片 | 人人插人人澡 | 青春草视频 | 免费在线观看午夜视频 | 天天激情综合 | 久久精品小视频 | 亚洲黄色在线观看 | 在线观看深夜视频 | 91色在线观看 | 在线免费观看黄色大片 | 亚洲精品美女在线观看播放 | 黄色片软件网站 | 国产自偷自拍 | 日韩欧美视频在线 | 亚洲精品乱码久久久久久按摩 | 欧美成人基地 | 国产色综合天天综合网 | 欧美日视频 | 日日夜夜噜噜噜 | 国产精品18久久久久久首页狼 | 亚洲动漫在线观看 | 日韩一区二区三 | 免费开视频 | 亚洲精品麻豆 | 国产亚洲综合精品 | 国产女人40精品一区毛片视频 | 国产亚洲精品久久网站 | 亚洲一区二区三区四区精品 | 精品国产一区二区三区久久久 | 深夜激情影院 | 精品一区精品二区高清 | 国产精品igao视频网网址 | 欧美极品xxx | 日本中文字幕一二区观 | 亚洲精品久久久久中文字幕m男 | 欧美另类v | 欧美成人aa | 日本久久久久久久久久 | 中文国产字幕 | 五月天婷婷在线视频 | 色香蕉网| 九九热免费精品视频 | 久久激情视频免费观看 | 国产无遮挡又黄又爽在线观看 | 亚洲午夜精品久久久久久久久久久久 | 狠狠干狠狠插 | 在线中文字幕播放 | 欧美日韩91| 国产在线不卡视频 | 丁香婷婷成人 | 国产一级不卡毛片 | 日日躁夜夜躁xxxxaaaa | 中文字幕精品一区二区三区电影 | 天天操天天插 | 亚洲一区精品二人人爽久久 | 国产亚洲精品久 | 97色免费视频 | 三级黄色网络 | av一级二级 | 96视频免费在线观看 | 欧美孕妇与黑人孕交 | 久久99国产精品久久 | 国产淫片免费看 | 国产成人精品久久二区二区 | 亚洲国产日韩欧美在线 | 国产在线第三页 | 99视频+国产日韩欧美 | 天天摸天天弄 | 99热在线观看 | 五月宗合网| 在线a人v观看视频 | 国产精品亚洲片夜色在线 | 国产高清在线观看av | 福利一区二区三区四区 | 日韩av不卡在线播放 | 欧美日韩性生活 | 国产91全国探花系列在线播放 | 97视频在线观看播放 | 久草在线最新免费 | 91在线视频一区 | 在线国产激情视频 | 免费裸体视频网 | 色a4yy| 在线视频亚洲 | 欧美日韩国产在线观看 | 成人羞羞免费 | www.日韩免费 | 国产精品久久久久一区二区三区 | 成人一区影院 | 国产精品久久久久av免费 | 久久免费a | 亚洲老妇xxxxxx | 国产亚洲精品美女久久 | 在线观看免费色 | 99视频在线播放 | 一区二区三区日韩精品 | 天天操天天曰 | 国产小视频网站 | 看片黄网站| 久久8精品 | 日韩在线观看视频中文字幕 | 亚洲 欧美 变态 国产 另类 | 久久九九影视网 | 日本久久视频 | 色五月激情五月 | 日韩久久久久久久久 | 99视频在线 | 一区二区三区日韩视频在线观看 | 免费久久久久久久 | 色wwwww| 久久黄色美女 | 国产香蕉视频在线观看 | 欧美日韩午夜在线 | 亚洲精品视频在线观看视频 | 免费在线成人av | 99久高清在线观看视频99精品热在线观看视频 | 国产精品一区二区62 | 日日天天狠狠 | av大全在线| 久久不射电影院 | 99热999| 97在线超碰| 二区三区在线观看 | a在线观看国产 | 亚洲综合在线五月 | 成年人国产视频 | 97超碰成人在线 | 欧美一级日韩三级 | 青春草视频在线播放 | 国产又粗又猛又爽又黄的视频免费 | 美女搞黄国产视频网站 | 久久9精品| 欧美性大胆 | 亚洲乱码在线 | 91精品视频免费 | 精品久久一区二区三区 | 亚洲综合情 | 精品a视频 | 西西444www大胆高清视频 | 精品国产亚洲日本 | 中文一区在线 | 国产乱老熟视频网88av | 婷婷久久亚洲 | 美女网站在线免费观看 | 国产精品免费在线播放 | 国产一区麻豆 | 国产成本人视频在线观看 | 米奇影视7777 | 9在线观看免费高清完整版 玖玖爱免费视频 | 亚洲资源在线观看 | 97超碰国产精品 | 久久99精品久久久久久三级 | 在线视频观看你懂的 | 91大神电影 | 日韩成人xxxx | 久久视频 | av怡红院| 成年人黄色免费网站 | 免费在线观看黄网站 | 日本高清久久久 | 色操插 | 亚洲激情精品 | 欧美日韩激情视频8区 | 天天天色 | 久久久久久久久久网站 | 麻豆一精品传二传媒短视频 | 亚洲精品在线观看中文字幕 | 五月婷综合网 | 婷婷国产在线观看 | 国产精品久久片 | 精品美女在线视频 | 亚洲无吗av | 天天综合久久综合 | 久久99亚洲精品久久久久 | 国产成人无码AⅤ片在线观 日韩av不卡在线 | 久久99在线 | 在线观看91网站 | 精品久久久久久久久久久久 | 久久久精品一区二区三区 | 国产网红在线观看 | 91av在线不卡| 色婷婷福利视频 | 亚洲天天摸日日摸天天欢 | 国产精品久久久久久久久久直播 | 91精品国产自产老师啪 | 在线观看免费黄视频 | 成人午夜精品久久久久久久3d | 在线韩国电影免费观影完整版 | 四虎影视国产精品免费久久 | 天天天天天天干 | 亚洲精品视频在线观看免费视频 | 国产一区二区久久久 | 中文字幕中文字幕在线中文字幕三区 | 久草免费在线视频观看 | 亚洲少妇自拍 | 亚洲三级精品 | 中文有码在线视频 | 欧美一区二区三区在线播放 | 国产精品99在线观看 | 高清不卡毛片 | 亚洲婷婷综合色高清在线 | 91少妇精拍在线播放 | 97人人人人| 日韩中文在线电影 | 午夜精品久久久 | 免费看搞黄视频网站 | 一区二区三区四区影院 | 最近久乱中文字幕 | 97天堂网 | 久久久 激情 | 日本久久精品 | 91福利视频久久久久 | 日韩中文字幕在线不卡 | 麻花豆传媒mv在线观看网站 | 99精品区 | 久热精品国产 | 免费看成人| 欧美日韩99| 91精品久久久久久久91蜜桃 | 日韩精品一区二区久久 | 日韩,精品电影 | 欧美另类一二三四区 | 天天色天天射天天干 | 中文字幕在线日亚洲9 | 国产精品乱码久久久久 | 日韩免费在线视频观看 | 国产三级精品三级在线观看 | 91成人天堂久久成人 | 日韩高清三区 | 成人app在线免费观看 | 不卡的av在线播放 | 国产xvideos免费视频播放 | 黄av在线 | 国产专区视频 | 亚洲精品黄网站 | 国产精品xxxx18a99 | 久久久久久久久久久久久久电影 | 中国精品一区二区 | 激情综合国产 | 天天干天天操天天干 | 粉嫩高清一区二区三区 | 久草在线 | 在线观看日韩免费视频 | 黄色综合 | 99久久日韩精品视频免费在线观看 | 久久久亚洲麻豆日韩精品一区三区 | 国产精品mv在线观看 | 狠狠色丁香| 国产 欧美 日本 | 国产精品嫩草69影院 | 精品久久在线 | 99精品视频免费全部在线 | 2019中文字幕网站 | 在线视频一区二区 | 在线观看视频你懂 | 亚洲欧洲中文日韩久久av乱码 | 狠狠色狠狠色综合日日小说 | 91成人精品一区在线播放 | 国产免费区 | 国产91区| 亚洲精品在线免费播放 | 免费在线激情视频 | 欧美激情视频一区二区三区免费 | 91麻豆精品国产自产在线游戏 | 日韩 在线观看 | 国产色视频123区 | 黄色在线观看网站 | 亚洲黄色av网址 | 午夜体验区 | 国产精品亚洲片在线播放 | 欧美成人久久 | 最近中文字幕高清字幕在线视频 | 中文在线免费观看 | 久久精品99精品国产香蕉 | 久久免费电影网 | 欧美极品xxxx| 91黄色在线看 | 天天摸天天干天天操天天射 | 亚洲国产精品视频 | 中文字幕在线视频免费播放 | www.人人草| 亚洲一区二区三区四区在线视频 | 成人免费在线网 | 久久精品视频日本 | 久久午夜国产精品 | 81国产精品久久久久久久久久 | 国精产品999国精产品视频 | 久热免费在线观看 | 天天操天天干天天爽 | 91人人插| 国产区在线看 | www日日 | 99婷婷狠狠成为人免费视频 | 91社区国产高清 | 97视频久久久 | 久久成人高清视频 | 色婷婷97 | 黄av在线 | 91最新视频在线观看 | 激情五月在线 | www好男人 | 日韩网站免费观看 | 一区二区三区中文字幕在线观看 | 国产高清绿奴videos | 欧美成人在线免费 | 久久久亚洲国产精品麻豆综合天堂 | 亚洲精品国产欧美在线观看 | 日韩字幕| 手机成人在线电影 | 久久九精品 | 久久久久日本精品一区二区三区 | 狠狠做六月爱婷婷综合aⅴ 日本高清免费中文字幕 | 亚洲v精品 | 国产成人精品一区二区三区网站观看 | 久久99免费视频 | 欧美日韩国产一区二区在线观看 | 久久av网 | 香蕉视频在线网站 | 色播五月激情综合网 | 中文字幕精品一区二区精品 | 中文字幕av免费 | 久久精品毛片基地 | 人成在线免费视频 | 国产1区2区 | 成av人电影 | 亚洲精品理论片 | 91九色自拍 | 97超碰人人澡人人爱学生 | av在线播放观看 | 日韩超碰在线 | 久久久久久久久综合 | 日韩精品免费在线视频 | 在线观看av麻豆 | 日韩精品一区二区三区在线视频 | 久久婷婷国产色一区二区三区 | av电影免费在线看 | 四虎永久免费 | 婷婷丁香激情五月 | 亚洲自拍偷拍色图 | 久久久九九 | 日韩在线精品一区 | 久久超碰97| 九九热精品视频在线播放 | 国产黄a三级三级三级三级三级 | 人人爱人人舔 | 一区中文字幕电影 | av国产在线观看 | 欧美久久久一区二区三区 | 亚洲婷婷伊人 | 久久久久久久久久久久久久av | 免费美女久久99 | 精品久久网 | 韩国三级在线一区 | 中文字幕网站视频在线 | 日本韩国在线不卡 | 亚洲最大在线视频 | 亚洲综合爱 | 国产欧美在线一区二区三区 | 婷婷视频在线 | 麻豆一级视频 | 2024av在线播放 | 97视频免费播放 | 国产精品亚州 | 亚洲精品一区二区18漫画 | 视频福利在线观看 | 国产精品一区二区麻豆 | 国产在线高清精品 | 99这里只有精品视频 | 在线观看视频一区二区三区 | 91av原创 | 一区二区久久 | 久久国产视屏 | 在线观看va| 国产美腿白丝袜足在线av | 国产麻豆果冻传媒在线观看 | 欧美伦理电影一区二区 | www日韩欧美 | 日本精品va在线观看 | 国产三级精品三级在线观看 | 日韩毛片精品 | 在线观看成人国产 | 欧美精品一区二区性色 | 精品国产一区二区三区四区vr | 久草在线综合网 | 综合激情伊人 | av成人黄色 | 国产黄在线播放 | 天天色草 | 亚洲理论在线观看 | 亚洲aaa级 | 久久视| 美女视频黄在线观看 | 亚洲国产黄色片 | 国产三级在线播放 | 国产精品网在线观看 | 色噜噜在线观看视频 | 99精品视频精品精品视频 | 国产成人三级一区二区在线观看一 | 99综合电影在线视频 | 日韩精品1区2区 | 99久久久久国产精品免费 | 永久免费精品视频网站 | 国产夫妻自拍av | 国产精品欧美久久久久天天影视 | 欧洲av不卡 | 色999精品 | 久久综合九色综合久99 | 久久久久亚洲国产精品 | 国产精品毛片 | 国产精品地址 | 91刺激视频 | 久久免费视频1 | 亚洲精品美女久久17c | 六月婷婷久香在线视频 | 亚洲dvd | 成人超碰在线 | av免费看网站 | www99久久 | 99精品久久精品一区二区 | 超碰在线观看av | 日本中文在线观看 | 亚洲激色 | 久久热亚洲 | 草久中文字幕 | 国产一区久久久 | 黄色亚洲在线 | 久久精品国产v日韩v亚洲 | 国产高清 不卡 | 91亚洲欧美激情 | 久久久久久久久久久久久久av | 中文字幕黄色 | 免费观看一级 | 国产精品96久久久久久吹潮 | 久久免费a | 丁香婷五月 | 欧美成人影音 | 欧美aa在线 | 97天堂网 | 99精品视频免费看 | 美女av免费看 | 中文在线| 久草视频在线免费播放 | 国产专区免费 | 99超碰在线播放 | 在线观看你懂的网址 | 婷婷丁香七月 | 六月婷色 | 三级午夜片| 色偷偷88888欧美精品久久 | 激情电影影院 | 精品久久一级片 | www.伊人色.com| а中文在线天堂 | 国产99久久精品一区二区永久免费 | 毛片在线网 | 日韩毛片精品 | 国产精品资源在线 | 天天爽夜夜爽人人爽曰av | 亚洲一区视频在线播放 | 91手机电影 | 成人av在线看 | 99免费在线播放99久久免费 | 最新中文字幕视频 | 久久精品a | 97视频在线播放 | 国产伦理精品一区二区 | 99视频播放| 丁香六月婷婷开心 | 最近中文字幕mv | 久久精品国产美女 | 视频一区二区视频 | 亚洲视屏 | 久久免费的精品国产v∧ | 国产精品欧美一区二区三区不卡 | 国产成人一区二区三区在线观看 | 日韩精品欧美精品 | 国产日产精品久久久久快鸭 | 99精品色 | 国产精品亚 | 免费在线观看av电影 | 久久天 | 九九99视频| 性色视频在线 | 91尤物在线播放 | 天天天天色射综合 | 亚洲一级特黄 | 干干夜夜| 九草在线观看 | 青青啪| 久久精品免费 | 婷婷在线网 | 久久久久久久久久久高潮一区二区 | 色综合久久99 | 97超碰在线久草超碰在线观看 | 国产资源免费在线观看 | 在线 视频 亚洲 |