日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 运维知识 > linux >内容正文

linux

Linux系统调优

發布時間:2024/9/3 linux 65 豆豆
生活随笔 收集整理的這篇文章主要介紹了 Linux系统调优 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

文章目錄

  • 系統硬件資源
      • 1.CPU
      • 2.內存
      • 3.磁盤I/O性能
      • 4.網絡寬帶
  • 操作系統相關資源
      • 1.系統安裝優化
      • 2.內核參數優化
      • 3.文件系統優化
  • 應用程序軟件資源
  • 一 linux服務器性能查看
    • 1.1 cpu性能查看
      • 1、查看物理cpu個數:
      • 2、查看每個物理cpu中的core個數:
      • 3、邏輯cpu的個數:
    • 1.2 內存查看
      • 1、查看內存使用情況:
    • 1.3 硬盤查看
      • 1、查看硬盤及分區信息:
      • 2、查看文件系統的磁盤空間占用情況:4
      • 3、查看硬盤的I/O性能(每隔一秒顯示一次,顯示5次):
      • 4、查看linux系統中某目錄的大小:
    • 1.4 查看平均負載
    • 1.5 其他參數
  • 二 Linux服務器性能評估
    • 2.1.1 影響Linux服務器性能的因素
      • 1. 操作系統級
      • 2. 程序應用級
    • 2.1.2 系統性能評估標準
    • 2.1.3 系統性能分析工具
      • 1.常用系統命令
      • 2.常用組合方式
    • 2.1.4 Linux性能評估與優化
    • 2.2.1 CPU性能評估
      • 1.利用vmstat命令監控系統CPU
        • CPU
          • us
          • sy
      • 2.利用sar命令監控系統CPU
    • 2.3.1 內存性能評估
      • 1.利用free指令監控內存
      • 2.利用vmstat命令監控內存
    • 2.4.1磁盤I/O性能評估
      • 1.磁盤存儲基礎
      • 2.利用iostat評估磁盤性能
      • 3.利用sar評估磁盤性能
    • 2.5.1. 網絡性能評估
  • 三 Linux服務器性能調優
    • 1.為磁盤I/O調整Linux內核電梯算法
    • 2.禁用不必要的守護進程,節省內存和CPU資源
    • 3.關掉GUI
    • 4、清理不需要的模塊或功能
    • 5、禁用控制面板
    • 6、改善Linux Exim服務器性能
    • 7、使用AES256增強gpg文件加密安全
    • 8、遠程備份服務安全
    • 9、更新默認內核參數設置
    • 10、優化TCP
    • 11、選擇正確的文件系統
    • 12、使用noatime文件系統掛載選項
    • 13、調整Linux文件描述符限制
    • 14、正確配置MySQL
    • 15、正確配置Apache
    • 16、分析Linux服務器性能
    • 17、學習5個Linux性能命令
      • (1)top
      • (2)vmstat
      • (3)iostat
      • (4)free
      • (5)sar
    • 18、將日志文件轉移到內存中
    • 19、先打包,后寫入
    • 20、一般調優技巧

系統硬件資源

1.CPU

CPU是操作系統穩定運行的根本,CPU的速度與性能在很大程度上決定了系統整體的性能,因此,CPU數量越多、主頻越高,服務器性能也就相對越好。但事實并非完全如此。 目前大部分CPU在同一時間內只能運行一個線程,超線程的處理器可以在同一時間運行多個線程,因此,可以利用處理器的超線程特性提高系統性能。在Linux系統下,只有運行SMP內核才能支持超線程,但是,安裝的CPU數量越多,從超線程獲得的性能方面的提高就越少。另外,Linux內核會把多核的處理器當作多個單獨的CPU來識別,例如兩個4核的CPU,在Lnux系統下會被當作8個單核CPU。但是從性能角度來講,兩個4核的CPU和8個單核的CPU并不完全等價,根據權威部門得出的測試結論,前者的整體性能要比后者低25%~30%。 可能出現CPU瓶頸的應用有郵件服務器、動態Web服務器等,對于這類應用,要把CPU的配置和性能放在主要位置。

2.內存

內存的大小也是影響Linux性能的一個重要的因素,內存太小,系統進程將被阻塞,應用也將變得緩慢,甚至失去響應;內存太大,導致資源浪費。Linux系統采用了物理內存和虛擬內存兩種方式,虛擬內存雖然可以緩解物理內存的不足,但是占用過多的虛擬內存,應用程序的性能將明顯下降,要保證應用程序的高性能運行,物理內存一定要足夠大;但是過大的物理內存,會造成內存資源浪費,例如,在一個32位處理器的Linux操作系統上,超過8GB的物理內存都將被浪費。因此,要使用更大的內存,建議安裝64位的操作系統,同時開啟Linux的大內存內核支持。 由于處理器尋址范圍的限制,在32位Linux操作系統上,應用程序單個進程最大只能使用2GB的內存,這樣以來,即使系統有更大的內存,應用程序也無法“享”用,解決的辦法就是使用64位處理器,安裝64位操作系統。在64位操作系統下,可以滿足所有應用程序對內存的使用需求,幾乎沒有限制。 可能出現內存性能瓶頸的應用有打印服務器、數據庫服務器、靜態Web服務器等,對于這類應用要把內存大小放在主要位置。

3.磁盤I/O性能

磁盤的I/O性能直接影響應用程序的性能,在一個有頻繁讀寫的應用中,如果磁盤I/O性能得不到滿足,就會導致應用停滯。好在現今的磁盤都采用了很多方法來提高I/O性能,比如常見的磁盤RAID技術。

RAID的英文全稱為:RedundantArrayofIndependentDisk,即獨立磁盤冗余陣列,簡稱磁盤陣列。RAID通過將多塊獨立的磁盤(物理硬盤)按不同方式組合起來形成一個磁盤組(邏輯硬盤),從而提供比單個硬盤更高的I/O性能和數據冗余。 通過RAID技術組成的磁盤組,就相當于一個大硬盤,用戶可以對它進行分區格式化、建立文件系統等操作,跟單個物理硬盤一模一樣,唯一不同的是RAID磁盤組的I/O性能比單個硬盤要高很多,同時在數據的安全性也有很大提升。

根據磁盤組合方式的不同,RAID可以分為RAID0,RAID1、RAID2、RAID3、RAID4、RAID5、RAID6、RAID7、RAID0+1、RAID10等級別,常用的RAID級別有RAID0、RAID1、RAID5、RAID0+1,這里進行簡單介紹。

RAID0:通過把多塊硬盤粘合成一個容量更大的硬盤組,提高了磁盤的性能和吞吐量。這種方式成本低,要求至少兩個磁盤,但是沒有容錯和數據修復功能,因而只能用在對數據安全性要求不高的環境中。

RAID1:也就是磁盤鏡像,通過把一個磁盤的數據鏡像到另一個磁盤上,最大限度地保證磁盤數據的可靠性和可修復性,具有很高的數據冗余能力,但磁盤利用率只有50%,因而,成本最高,多用在保存重要數據的場合。

RAID5:采用了磁盤分段加奇偶校驗技術,從而提高了系統可靠性,RAID5讀出效率很高,寫入效率一般,至少需要3塊盤。允許一塊磁盤故障,而不影響數據的可用性。

RAID0+1:把RAID0和RAID1技術結合起來就成了RAID0+1,至少需要4個硬盤。此種方式的數據除分布在多個盤上外,每個盤都有其鏡像盤,提供全冗余能力,同時允許一個磁盤故障,而不影響數據可用性,并具有快速讀/寫能力。 通過了解各個RAID級別的性能,可以根據應用的不同特性,選擇適合自身的RAID級別,從而保證應用程序在磁盤方面達到最優性能。

4.網絡寬帶

Linux下的各種應用,一般都是基于網絡的,因此網絡帶寬也是影響性能的一個重要因素,低速的、不穩定的網絡將導致網絡應用程序的訪問阻塞,而穩定、高速的網絡帶寬,可以保證應用程序在網絡上暢通無阻地運行。幸運的是,現在的網絡一般都是千兆帶寬或光纖網絡,帶寬問題對應用程序性能造成的影響也在逐步降低。

操作系統相關資源

基于操作系統的性能優化也是多方面的,可以從系統安裝、系統內核參數、網絡參數、文件系統等幾個方面進行衡量,下面依次進行簡單介紹。

1.系統安裝優化

系統優化可以從安裝操作系統開始,當安裝Linux系統時,磁盤的劃分,SWAP內存的分配都直接影響以后系統的運行性能,例如,磁盤分配可以遵循應用的需求:對于對寫操作頻繁而對數據安全性要求不高的應用,可以把磁盤做成RAID0;而對于對數據安全性較高,對讀寫沒有特別要求的應用,可以把磁盤做成RAID1;對于對讀操作要求較高,而對寫操作無特殊要求,并要保證數據安全性的應用,可以選擇RAID5;對于對讀寫要求都很高,并且對數據安全性要求也很高的應用,可以選擇RAID01。這樣通過不同的應用需求設置不同的RAID級別,在磁盤底層對系統進行優化操作。

隨著內存價格的降低和內存容量的日益增大,對虛擬內存SWAP的設定,現在已經沒有了所謂虛擬內存是物理內存兩倍的要求,但是SWAP的設定還是不能忽略,根據經驗,如果內存較小(物理內存小于4GB),一般設置SWAP交換分區大小為內存的2倍;如果物理內存大于4GB小于16GB,可以設置SWAP大小等于或略小于物理內存即可;如果內存大小在16GB以上,原則上可以設置SWAP為0,但并不建議這么做,因為設置一定大小的SWAP還是有一定作用的。

2.內核參數優化

系統安裝完成后,優化工作并沒有結束,接下來還可以對系統內核參數進行優化,不過內核參數的優化要和系統中部署的應用結合起來整體考慮。例如,如果系統部署的是Oracle數據庫應用,那么就需要對系統共享內存段(kernel.shmmax、kernel.shmmni、kernel.shmall)、系統信號量(kernel.sem)、文件句柄(fs.file-max)等參數進行優化設置;如果部署的是Web應用,那么就需要根據Web應用特性進行網絡參數的優化,例如修改net.ipv4.ip_local_port_range、net.ipv4.tcp_tw_reuse、net.core.somaxconn等網絡內核參數。

3.文件系統優化

文件系統的優化也是系統資源優化的一個重點,在Linux下可選的文件系統有ext2、ext3、xfs、ReiserFS,根據不同的應用,選擇不同的文件系統。

Linux標準文件系統是從VFS開始的,然后是ext,接著就是ext2,應該說,ext2是Linux上標準的文件系統,ext3是在ext2基礎上增加日志形成的,從VFS到ext3,其設計思想沒有太大變化,都是早期UNIX家族基于超級塊和inode的設計理念。

XFS文件系統是SGI開發的一個高級日志文件系統,后來移植到了Linux系統下,XFS通過分布處理磁盤請求、定位數據、保持Cache的一致性來提供對文件系統數據的低延遲、高帶寬的訪問,因此,XFS極具伸縮性,非常健壯,具有優秀的日志記錄功能、可擴展性強、快速寫入性能等優點。 ReiserFS是在HansReiser領導下開發出來的一款高性能的日志文件系統,它通過完全平衡樹結構來管理數據,包括文件數據,文件名及日志支持等,與ext2/ext3相比,最大的優點是訪問性能和安全性大幅提升。ReiserFS具有高效、合理利用磁盤空間,先進的日志管理機制,特有的搜尋方式,海量磁盤存儲等優點。

應用程序軟件資源

應用程序的優化其實是整個優化工程的核心,如果一個應用程序存在BUG,那么即使所有其他方面都達到了最優狀態,整個應用系統還是性能低下,所以,對應用程序的優化是性能優化過程的重中之重,這就對程序架構設計人員和程序開發人員提出了更高的要求

一 linux服務器性能查看

1.1 cpu性能查看

1、查看物理cpu個數:

cat /proc/cpuinfo |grep "physical id"|sort|uniq|wc -l

2、查看每個物理cpu中的core個數:

cat /proc/cpuinfo |grep "cpu cores"|wc -l

3、邏輯cpu的個數:

cat /proc/cpuinfo |grep "processor"|wc -l

物理cpu個數*核數=邏輯cpu個數(不支持超線程技術的情況下)

1.2 內存查看

1、查看內存使用情況:

#free -mtotal used free shared buffers cached Mem: 3949 2519 1430 0 189 1619 -/+ buffers/cache: 710 3239 Swap: 3576 0 3576total:內存總數 used:已經使用的內存數 free:空閑內存數 shared:多個進程共享的內存總額 - buffers/cache:(已用)的內存數,即used-buffers-cached + buffers/cache:(可用)的內存數,即free+buffers+cachedBuffer Cache用于針對磁盤塊的讀寫; Page Cache用于針對文件inode的讀寫,這些Cache能有效地縮短I/O系統調用的時間。對操作系統來說free/used是系統可用/占用的內存; 對應用程序來說-/+ buffers/cache是可用/占用內存,因為buffers/cache很快就會被使用。

我們工作時候應該從應用角度來看。

1.3 硬盤查看

1、查看硬盤及分區信息:

fdisk -l

2、查看文件系統的磁盤空間占用情況:4

df -h

3、查看硬盤的I/O性能(每隔一秒顯示一次,顯示5次):

iostat -x 1 5

iostat是含在套裝systat中的,可以用yum -y install systat來安裝。

常關注的參數:

如%util接近100%,說明產生的I/O請求太多,I/O系統已經滿負荷,該磁盤可能存在瓶頸。 如idle小于70%,I/O的壓力就比較大了,說明讀取進程中有較多的wait。

4、查看linux系統中某目錄的大小:

du -sh /root

如發現某個分區空間接近用完,可以進入該分區的掛載點,用以下命令找出占用空間最多的文件或目錄,然后按照從大到小的順序,找出系統中占用最多空間的前10個文件或目錄:

du -cksh *|sort -rn|head -n 10

1.4 查看平均負載

有時候系統響應很慢,但又找不到原因,這時就要查看平均負載了,看它是否有大量的進程在排隊等待。

最簡單的命令:

uptime--查看過去的1分鐘、5分鐘和15分鐘內進程隊列中的平均進程數量。

還有動態命令top
我們只關心以下部分:

top - 21:33:09 up 1:00, 1 user, load average: 0.00, 0.01, 0.05如果每個邏輯cpu當前的活動進程不大于3,則系統性能良好;如果每個邏輯cpu當前的活動進程不大于4,表示可以接受;如果每個邏輯cpu當前的活動進程大于5,則系統性能問題嚴重。

一般計算方法:負載值/邏輯cpu個數

還可以結合vmstat命令來判斷系統是否繁忙,其中:

procsr:等待運行的進程數。b:處在非中斷睡眠狀態的進程數。w:被交換出去的可運行的進程數。memeoryswpd:虛擬內存使用情況,單位為KB。free:空閑的內存,單位為KB。buff:被用來作為緩存的內存數,單位為KB。swapsi:從磁盤交換到內存的交換頁數量,單位為KB。so:從內存交換到磁盤的交換頁數量,單位為KB。iobi:發送到塊設備的塊數,單位為KB。bo:從塊設備接受的塊數,單位為KB。systemin:每秒的中斷數,包括時鐘中斷。cs:每秒的環境切換次數。cpu按cpu的總使用百分比來顯示。us:cpu使用時間。sy:cpu系統使用時間。id:閑置時間。

1.5 其他參數

查看內核版本號:uname -a簡化命令:uname -r查看系統是32位還是64位的:file /sbin/init查看發行版:cat /etc/issue或lsb_release -a查看系統已載入的相關模塊:lsmod查看pci設置:lspci

二 Linux服務器性能評估

2.1.1 影響Linux服務器性能的因素

1. 操作系統級

CPU內存磁盤I/O帶寬網絡I/O帶寬

2. 程序應用級

2.1.2 系統性能評估標準

影響性能因素好壞糟糕
CPUuser% + sys%< 70%user% + sys%= 85%user% + sys% >=90%
內存Swap In(si)=0 Swap Out(so)=0Per CPU with 10 page/sMore Swap In & Swap Out
磁盤iowait % < 20%iowait % =35%iowait % >= 50%

其中:

%user:表示CPU處在用戶模式下的時間百分比。%sys:表示CPU處在系統模式下的時間百分比。%iowait:表示CPU等待輸入輸出完成時間的百分比。swap in:即si,表示虛擬內存的頁導入,即從SWAP DISK交換到RAMswap out:即so,表示虛擬內存的頁導出,即從RAM交換到SWAP DISK

2.1.3 系統性能分析工具

1.常用系統命令

Vmstat、sar、iostat、netstat、free、ps、top等

2.常用組合方式

vmstat、sar、iostat檢測是否是CPU瓶頸free、vmstat檢測是否是內存瓶頸iostat檢測是否是磁盤I/O瓶頸netstat檢測是否是網絡帶寬瓶頸

2.1.4 Linux性能評估與優化

系統整體性能評估(uptime命令)
uptime

16:38:00 up 118 days, 3:01, 5 users,load average: 1.22, 1.02, 0.91

注意:

  • load average三值大小一般不能大于系統CPU的個數。

系統有8個CPU,如load average三值長期大于8,說明CPU很繁忙,負載很高,可能會影響系統性能。

  • 但偶爾大于8,一般不會影響系統性能。
  • 如load average輸出值小于CPU個數,則表示CPU有空閑時間片,比如本例中的輸出,CPU是非常空閑的

2.2.1 CPU性能評估

1.利用vmstat命令監控系統CPU

顯示系統各種資源之間相關性能簡要信息,主要看CPU負載情況。

下面是vmstat命令在某個系統的輸出結果:

[root@node1 ~]#vmstat 2 3procs ———–memory———- —swap– —–io—- –system– —–cpu——r b swpd freebuff cache si so bi bo incs us sy idwa st0 0 0 162240 8304 67032 0 0 13 21 1007 23 0 1 98 0 00 0 0 162240 8304 67032 0 0 1 0 1010 20 0 1 100 0 00 0 0 162240 8304 67032 0 0 1 1 1009 18 0 1 99 0 0Procs

r–運行和等待cpu時間片的進程數,這個值如果長期大于系統CPU的個數,說明CPU不足,需要增加CPU

b–在等待資源的進程數,比如正在等待I/O、或者內存交換等。

CPU

us

用戶進程消耗的CPU 時間百分比。
us的值比較高時,說明用戶進程消耗的cpu時間多,但是如果長期大于50%,就需要考慮優化程序或算法。

sy

內核進程消耗的CPU時間百分比。Sy的值較高時,說明內核消耗的CPU資源很多。

根據經驗,us+sy的參考值為80%,如果us+sy大于 80%說明可能存在CPU資源不足。

2.利用sar命令監控系統CPU

sar對系統每方面進行單獨統計,但會增加系統開銷,不過開銷可以評估,對系統的統計結果不會有很大影響。

下面是sar命令對某個系統的CPU統計輸出:

[root@webserver ~]# sar -u 3 5Linux 2.6.9-42.ELsmp (webserver) 11/28/2008_i686_ (8 CPU)11:41:24 AM CPU %user %nice%system %iowait %steal %idle11:41:27 AM all 0.88 0.00 0.29 0.00 0.00 98.8311:41:30 AM all 0.13 0.00 0.17 0.21 0.00 99.5011:41:33 AM all 0.04 0.00 0.04 0.00 0.00 99.9211:41:36 AM all 90.08 0.00 0.13 0.16 0.00 9.6311:41:39 AM all 0.38 0.00 0.17 0.04 0.00 99.41Average: all 0.34 0.00 0.16 0.05 0.00 99.45

輸出解釋如下:

%user列顯示了用戶進程消耗的CPU 時間百分比。%nice列顯示了運行正常進程所消耗的CPU 時間百分比。%system列顯示了系統進程消耗的CPU時間百分比。%iowait列顯示了IO等待所占用的CPU時間百分比%steal列顯示了在內存相對緊張的環境下pagein強制對不同的頁面進行的steal操作 。%idle列顯示了CPU處在空閑狀態的時間百分比。問題

你是否遇到過系統CPU整體利用率不高,而應用緩慢的現象?

在一個多CPU的系統中,如果程序使用了單線程,會出現這么一個現象,CPU的整體使用率不高,但是系統應用卻響應緩慢,這可能是由于程序使用單線程的原因,單線程只使用一個CPU,導致這個CPU占用率為100%,無法處理其它請求,而其它的CPU卻閑置,這就導致了整體CPU使用率不高,而應用緩慢現象的發生。

2.3.1 內存性能評估

1.利用free指令監控內存

free是監控Linux內存使用狀況最常用的指令,看下面的一個輸出:

[root@webserver ~]# free -mtotal used freeshared buffers cachedMem: 8111 7185 926 0 243 6299 -/+ buffers/cache: 643 7468Swap: 8189 0 8189

經驗公式:

應用程序可用內存/系統物理內存>70%,表示系統內存資源非常充足,不影響系統性能;應用程序可用內存/系統物理內存<20%,表示系統內存資源緊缺,需要增加系統內存;20%<應用程序可用內存/系統物理內存<70%,表示系統內存資源基本能滿足應用需求,暫時不影響系統性能

2.利用vmstat命令監控內存

[root@node1 ~]# vmstat 2 3procs ———–memory———- —swap– —–io—- –system– —–cpu——r b swpd freebuff cache si so bi bo incs us sy idwa st0 0 0 162240 8304 67032 0 0 13 21 1007 23 0 1 98 0 00 0 0 162240 8304 67032 0 0 1 0 1010 20 0 1 100 0 00 0 0 162240 8304 67032 0 0 1 1 1009 18 0 1 99 0 0

memory

swpd--切換到內存交換區的內存數量(k為單位)。如swpd值偶爾非0,不影響系統性能free--當前空閑的物理內存數量(k為單位)buff--buffers cache的內存數量,一般對塊設備的讀寫才需要緩沖cache--page cached的內存數量

一般作為文件系統cached,頻繁訪問的文件都會被cached,如cache值較大,說明cached的文件數較多,如果此時IO中bi比較小,說明文件系統效率比較好。

swap

si--由磁盤調入內存,也就是內存進入內存交換區的數量。so--由內存調入磁盤,也就是內存交換區進入內存的數量。

si、so的值長期不為0,表示系統內存不足。需增加系統內存。

2.4.1磁盤I/O性能評估

1.磁盤存儲基礎

頻繁訪問的文件或數據盡可能用內存讀寫代替直接磁盤I/O,效率高千倍。

將經常進行讀寫的文件與長期不變的文件獨立出來,分別放置到不同的磁盤設備上。

對于寫操作頻繁的數據,可以考慮使用裸設備代替文件系統。

裸設備優點:

數據可直接讀寫,不需經過操作系統級緩存,節省內存資源,避免內存資源爭用;避免文件系統級維護開銷,如文件系統需維護超級塊、I-node等;避免了操作系統cache預讀功能,減少了I/O請求

使用裸設備的缺點是:

數據管理、空間管理不靈活,需要很專業的人來操作。

2.利用iostat評估磁盤性能

[root@webserver ~]# iostat -d 2 3Linux 2.6.9-42.ELsmp (webserver) 12/01/2008_i686_ (8 CPU) Device: tps Blk_read/sBlk_wrtn/sBlk_read Blk_wrtnsda 1.87 2.58 114.12 6479462 286537372 Device: tps Blk_read/sBlk_wrtn/sBlk_read Blk_wrtnsda 0.00 0.00 0.00 0 0 Device: tps Blk_read/sBlk_wrtn/sBlk_read Blk_wrtnsda 1.00 0.00 12.00 0 24

解釋如下:

Blk_read/s--每秒讀取數據塊數Blk_wrtn/s--每秒寫入數據塊數Blk_read--讀取的所有塊數Blk_wrtn--寫入的所有塊數

可通過Blk_read/s和Blk_wrtn/s值對磁盤的讀寫性能有一個基本的了解.
如Blk_wrtn/s值很大,表示磁盤寫操作頻繁,考慮優化磁盤或程序,
如Blk_read/s值很大,表示磁盤直接讀操作很多,可將讀取的數據放入內存

規則遵循:

長期的、超大的數據讀寫,肯定是不正常的,這種情況一定會影響系統性能。

3.利用sar評估磁盤性能

通過“sar –d”組合,可以對系統的磁盤IO做一個基本的統計,請看下面的一個輸出:

[root@webserver ~]# sar -d 2 3Linux 2.6.9-42.ELsmp (webserver) 11/30/2008_i686_ (8 CPU)11:09:33 PM DEV tps rd_sec/swr_sec/savgrq-sz avgqu-sz await svctm %util11:09:35 PM dev8-0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.0011:09:35 PM DEV tps rd_sec/swr_sec/savgrq-sz avgqu-sz await svctm %util11:09:37 PM dev8-0 1.00 0.00 12.00 12.00 0.00 0.00 0.00 0.0011:09:37 PM DEV tps rd_sec/swr_sec/savgrq-sz avgqu-sz await svctm %util11:09:39 PM dev8-0 1.99 0.00 47.76 24.00 0.00 0.50 0.25 0.05Average: DEV tps rd_sec/swr_sec/savgrq-sz avgqu-sz await svctm %utilAverage: dev8-0 1.00 0.00 19.97 20.00 0.00 0.33 0.17 0.02

參數含義:

await--平均每次設備I/O操作等待時間(毫秒)svctm--平均每次設備I/O操作的服務時間(毫秒)%util--一秒中有百分之幾的時間用于I/O操作

對磁盤IO性能評判標準:

正常svctm應小于await值,而svctm和磁盤性能有關,CPU、內存負荷也會對svctm值造成影響,過多的請求也會間接的導致svctm值的增加。

await值取決svctm和I/O隊列長度以及I/O請求模式,如果svctm的值與await很接近,表示幾乎沒有I/O等待,磁盤性能很好,如果await的值遠高于svctm的值,則表示I/O隊列等待太長,系統上運行的應用程序將變慢,此時可以通過更換更快的硬盤來解決問題。

%util–衡量磁盤I/O重要指標,

如%util接近100%,表示磁盤產生的I/O請求太多,I/O系統已經滿負荷工作,該磁盤可能存在瓶頸。

可優化程序或者 通過更換 更高、更快的磁盤。

2.5.1. 網絡性能評估

(1)通過ping命令檢測網絡的連通性(2)通過netstat –i組合檢測網絡接口狀況(3)通過netstat –r組合檢測系統的路由表信息(4)通過sar –n組合顯示系統的網絡運行狀態

三 Linux服務器性能調優

1.為磁盤I/O調整Linux內核電梯算法

選擇文件系統后,該算法可以平衡低延遲需求,收集足夠數據,有效組織對磁盤讀寫請求。

2.禁用不必要的守護進程,節省內存和CPU資源

許多守護進程或服務通常非必需,消耗寶貴內存和CPU時間。將服務器置于險地。禁用可加快啟動時間,釋放內存。減少CPU要處理的進程數

一些應被禁用的Linux守護進程,默認自動運行:

序號 守護進程 描述
1 Apmd 高級電源管理守護進程
2 Nfslock 用于NFS文件鎖定
3 Isdn ISDN Moderm支持
4 Autofs 在后臺自動掛載文件系統(如自動掛載CD-ROM)
5 Sendmail 郵件傳輸代理
6 Xfs X Window的字體服務器

3.關掉GUI

4、清理不需要的模塊或功能

服務器軟件包中太多被啟動的功能或模塊實際上是不需要的(如Apache中的許多功能模塊),禁用掉有助于提高系統內存可用量,騰出資源給那些真正需要的軟件,讓它們運行得更快。

5、禁用控制面板

在Linux中,有許多流行的控制面板,如Cpanel,Plesk,Webmin和phpMyAdmin等,禁用釋放出大約120MB內存,內存使用量大約下降30-40%。

6、改善Linux Exim服務器性能

使用DNS緩存守護進程,可降低解析DNS記錄需要的帶寬和CPU時間,DNS緩存通過消除每次都從根節點開始查找DNS記錄的需求,從而改善網絡性能。

Djbdns是一個非常強大的DNS服務器,它具有DNS緩存功能,Djbdns比BIND DNS服務器更安全,性能更好,可以直接通過http://cr.yp.to/下載,或通過Red Hat提供的軟件包獲得。

7、使用AES256增強gpg文件加密安全

為提高備份文件或敏感信息安全,許多Linux系統管理員都使用gpg進行加密,在使用gpg時,最好指定gpg使用AES256加密算法,AES256使用256位密鑰,它是一個開放的加密算法,美國國家安全局(NSA)使用它保護絕密信息。

8、遠程備份服務安全

安全是選擇遠程備份服務最重要的因素,大多數系統管理員都害怕兩件事:(黑客)可以刪除備份文件,不能從備份恢復系統。

為了保證備份文件100%的安全,備份服務公司提供遠程備份服務器,使用scp腳本或RSYNC通過SSH傳輸數據,這樣,沒有人可以直接進入和訪問遠程系統,因此,也沒有人可以從備份服務刪除數據。在選擇遠程備份服務提供商時,最好從多個方面了解其服務強壯性,如果可以,可以親自測試一下。

9、更新默認內核參數設置

為了順利和成功運行企業應用程序,如數據庫服務器,可能需要更新一些默認的內核參數設置,例如,2.4.x系列內核消息隊列參數msgmni有一個默認值(例如,共享內存,或shmmax在Red Hat系統上默認只有33554432字節),它只允許有限的數據庫并發連接,下面為數據庫服務器更好地運行提供了一些建議值(來自IBM DB2支持網站):

kernel.shmmax=268435456 (32位)
kernel.shmmax=1073741824 (64位)
kernel.msgmni=1024
fs.file-max=8192
kernel.sem=”250 32000 32 1024″

10、優化TCP

優化TCP協議有助于提高網絡吞吐量,跨廣域網的通信使用的帶寬越大,延遲時間越長時,建議使用越大的TCP Linux大小,以提高數據傳輸速率,TCP Linux大小決定了發送主機在沒有收到數據傳輸確認時,可以向接收主機發送多少數據。

11、選擇正確的文件系統

使用ext4文件系統取代ext3

● Ext4是ext3文件系統的增強版,擴展了存儲限制

●具有日志功能,保證高水平的數據完整性(在非正常關閉事件中)

●非正常關閉和重啟時,它不需要檢查磁盤(這是一個非常耗時的動作)

●更快的寫入速度,ext4日志優化了硬盤磁頭動作

12、使用noatime文件系統掛載選項

在文件系統啟動配置文件fstab中使用noatime選項,如果使用了外部存儲,這個掛載選項可以有效改善性能。

13、調整Linux文件描述符限制

Linux限制了任何進程可以打開的文件描述符數量,默認限制是每進程1024,這些限制可能會阻礙基準測試客戶端(如httperf和apachebench)和Web服務器本身獲得最佳性能,Apache每個連接使用一個進程,因此不會受到影響,但單進程Web服務器,如Zeus是每連接使用一個文件描述符,因此很容易受默認限制的影響。

打開文件限制是一個可以用ulimit命令調整的限制,ulimit -aS命令顯示當前的限制,ulimit -aH命令顯示硬限制(在未調整/proc中的內核參數前,你不能增加限制)。

Linux第三方應用程序性能技巧

對于運行在Linux上的第三方應用程序,一樣有許多性能優化技巧,這些技巧可以幫助你提高Linux服務器的性能,降低運行成本。

14、正確配置MySQL

為了給MySQL分配更多的內存,可設置MySQL緩存大小,要是MySQL服務器實例使用了更多內存,就減少緩存大小,如果MySQL在請求增多時停滯不動,就增加MySQL緩存。

15、正確配置Apache

檢查Apache使用了多少內存,再調整StartServers和MinSpareServers參數,以釋放更多的內存,將有助于你節省30-40%的內存。

16、分析Linux服務器性能

提高系統效率最好的辦法是找出導致整體速度下降的瓶頸并解決掉,下面是找出系統關鍵瓶頸的一些基本技巧:

● 當大型應用程序,如OpenOffice和Firefox同時運行時,計算機可能會開始變慢,內存不足的出現幾率更高。

● 如果啟動時真的很慢,可能是應用程序初次啟動需要較長的加載時間,一旦啟動好后運行就正常了,否則很可能是硬盤太慢了。

●CPU負載持續很高,內存也夠用,但CPU利用率很低,可以使用CPU負載分析工具監控負載時間。

17、學習5個Linux性能命令

使用幾個命令就可以管理Linux系統的性能了,下面列出了5個最常用的Linux性能命令,包括
top、vmstat、iostat、free和sar,它們有助于系統管理員快速解決性能問題。

(1)top

當前內核服務的任務,還顯示許多主機狀態的統計數據,默認情況下,它每隔5秒自動更新一次。
如:當前正常運行時間,系統負載,進程數量和內存使用率,

此外,這個命令也顯示了那些使用最多CPU時間的進程(包括每個進程的各種信息,如運行用戶,執行的命令等)。

(2)vmstat

Vmstat命令提供當前CPU、IO、進程和內存使用率的快照,它和top命令類似,自動更新數據,如:

$ vmstat 10

(3)iostat

Iostat提供三個報告:CPU利用率、設備利用率和網絡文件系統利用率,使用-c,-d和-h參數可以分別獨立顯示這三個報告。

(4)free

顯示主內存和交換空間內存統計數據,指定-t參數顯示總內存,指定-b參數按字節為單位,使用-m則以兆為單位,默認情況下千字節為單位。

Free命令也可以使用-s參數加一個延遲時間(單位:秒)連續運行,如:

$ free -s 5

(5)sar

收集,查看和記錄性能數據,這個命令比前面幾個命令歷史更悠久,它可以收集和顯示較長周期的數據。

其它

下面是一些歸類為其它的性能技巧:

18、將日志文件轉移到內存中

當一臺機器處于運行中時,最好是將系統日志放在內存中,當系統關閉時再將其復制到硬盤,當你運行一臺開啟了syslog功能的筆記本電腦或移動設備時,ramlog可以幫助你提高系統電池或移動設備閃存驅動器的壽命,使用ramlog的一個好處是,不用再擔心某個守護進程每隔30秒向syslog發送一條消息,放在以前,硬盤必須隨時保持運轉,這樣對硬盤和電池都不好。

19、先打包,后寫入

在內存中劃分出固定大小的空間保存日志文件,這意味著筆記本電腦硬盤不用一直保持運轉,只有當某個守護進程需要寫入日志時才運轉,注意ramlog使用的內存空間大小是固定的,否則系統內存會很快被用光,如果筆記本使用固態硬盤,可以分配50-80MB內存給ramlog使用,ramlog可以減少許多寫入周期,極大地提高固態硬盤的使用壽命。

20、一般調優技巧

盡可能使用靜態內容替代動態內容,如果你在生成天氣預告,或其它每隔1小時就必須更新的數據,最好是寫一個程序,每隔1小時生成一個靜態的文件,而不是讓用戶運行一個CGI動態地生成報告。

為動態應用程序選擇最快最合適的API,CGI可能最容易編程,但它會為每個請求產生一個進程,通常,這是一個成本很高,且不必要的過程,FastCGI是更好的選擇,和Apache的mod_perl一樣,都可以極大地提高應用程序的性能。

總結

以上是生活随笔為你收集整理的Linux系统调优的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

99热国产在线观看 | 久久久精品日本 | 日韩免费一级a毛片在线播放一级 | av福利资源| 国产在线视频一区二区三区 | 一区二区视频在线看 | 精品视频97| 国产精品一区专区欧美日韩 | 99久久精品电影 | 久久99精品久久久久婷婷 | 精品免费一区 | 国产一区二区三区黄 | 丰满少妇一级片 | 日韩欧美视频 | 九九九九色 | 91成人黄色 | 中文字幕91视频 | 二区三区中文字幕 | 视频在线精品 | 亚洲理论电影 | 午夜精品99久久免费 | 日本女人b| 久久人人爽人人爽 | 亚洲第五色综合网 | 国产视频二区三区 | 丁香婷婷基地 | 午夜国产福利在线 | 99热9 | 欧美一区二区在线免费看 | 婷婷激情欧美 | 在线免费观看视频一区 | 久久久久久久亚洲精品 | 亚洲国产精品成人女人久久 | 久久高清av | 国产精品永久久久久久久www | 五月天欧美精品 | 国产精品va在线观看入 | 激情久久久久久久久久久久久久久久 | 久久久久免费视频 | 欧美一级免费 | 91成人精品 | 日韩av成人免费看 | 色中文字幕在线观看 | 亚洲自拍偷拍色图 | 欧美韩国日本在线 | 久久久久久片 | 久久久午夜视频 | 在线免费观看视频一区二区三区 | 日韩丝袜在线观看 | 九九免费在线观看视频 | 九九九热精品 | 日日夜夜精品视频天天综合网 | 久草青青在线观看 | 国产黄影院色大全免费 | 日本久久久亚洲精品 | 国产资源在线观看 | 91精品夜夜 | 免费观看国产视频 | 缴情综合网五月天 | 美女视频网站久久 | 在线观看免费一区 | 99视频免费 | 免费日韩一区二区三区 | 日韩精品视频免费 | 91麻豆文化传媒在线观看 | 一级片视频在线 | 一二三区视频在线 | 日韩免费在线一区 | 国产成人亚洲在线观看 | 一级黄色视屏 | 亚洲高清在线观看视频 | 成人网页在线免费观看 | 超碰97人人射妻 | 欧美日韩视频在线观看免费 | 97成人精品视频在线播放 | 日本黄色免费网站 | 九九热1| 色欲综合视频天天天 | 亚洲婷婷免费 | 国产成人a亚洲精品 | 亚洲精品福利在线 | 国产精品初高中精品久久 | av日韩在线网站 | 国产精品美女久久久久久久久久久 | 天天曰天天干 | 91看片成人 | a级国产乱理伦片在线播放 久久久久国产精品一区 | 日日夜夜操av | 久久久69 | 国产在线不卡视频 | 97超碰人人澡人人爱学生 | 国产 欧美 日产久久 | 久久夜色精品亚洲噜噜国4 午夜视频在线观看欧美 | 亚洲欧美激情精品一区二区 | 天天干,天天射,天天操,天天摸 | 人人讲| 国产艹b视频 | 视频在线观看日韩 | 91免费高清观看 | 中文字幕亚洲在线观看 | 超碰av在线 | 免费观看久久 | a电影在线观看 | 91网在线看| 女人18片 | 9在线观看免费高清完整版 玖玖爱免费视频 | 日韩中文字幕免费在线播放 | 在线观看亚洲精品 | 亚洲综合在线观看视频 | 欧美资源 | 美女在线黄 | 欧美99久久 | 黄色小网站在线观看 | 国产色婷婷精品综合在线手机播放 | 国产无遮挡猛进猛出免费软件 | 国产精品久久久久久av | 欧美另类高潮 | 欧美激情视频免费看 | 日韩影片在线观看 | av电影在线观看完整版一区二区 | 三上悠亚一区二区在线观看 | 欧美精品网站 | 亚洲爱av | 在线激情网 | 国产伦理久久精品久久久久_ | 欧美极度另类 | 精品久久久久久久久久 | 亚洲乱码中文字幕综合 | 久久久久久久久黄色 | 摸阴视频| 色开心| 99产精品成人啪免费网站 | 青草视频在线看 | 美女黄濒 | 狂野欧美激情性xxxx | 精品久久久久久久久久国产 | 国产精品激情 | 91免费观看 | 亚洲香蕉在线观看 | 亚洲天堂免费视频 | 精品国产成人av在线免 | 成人高清av在线 | 天天色天天操天天爽 | 亚洲在线高清 | 97精品在线观看 | 久久久激情视频 | 四虎国产精品成人免费影视 | 亚洲无吗视频在线 | 免费看av片网站 | 久久久久久久影视 | 亚洲视屏一区 | 99r精品视频在线观看 | 国产a免费| 久久五月激情 | 亚洲va男人天堂 | 久久成人资源 | 在线国产激情视频 | 精品 一区 在线 | 午夜久久精品 | 成人免费观看完整版电影 | 亚洲手机天堂 | 日韩精品一区二区不卡 | 综合色婷婷 | 免费高清在线视频一区· | 久久免费视频一区 | 最新真实国产在线视频 | 一区二区三区 亚洲 | www.狠狠操.com| 视频二区在线 | www.久久91| 日韩在线观看网址 | 日韩一级电影在线观看 | 91正在播放 | www.国产在线 | 夜色成人av | 黄色毛片一级片 | 91在线影院 | 97在线影院 | 国产午夜av| 最近2019中文免费高清视频观看www99 | 国产91精品一区二区麻豆网站 | 免费观看黄 | 高清国产一区 | 9999免费视频 | 九色在线视频 | 色天堂在线视频 | 一区二区精品在线观看 | 精品一区二区6 | 一本色道久久精品 | 天天干,天天操,天天射 | 在线观看视频你懂的 | 国产一区二区三精品久久久无广告 | 久久久久亚洲精品中文字幕 | 日韩中文字幕免费视频 | 深爱激情五月网 | 国产在线超碰 | 青青河边草免费观看完整版高清 | 国产视频精品在线 | 成人av直播 | 在线视频观看你懂的 | 国产精品一区二区久久国产 | 欧美一级在线 | 精品国产aⅴ麻豆 | 国产一区二区精品久久91 | 久久一区二区免费视频 | 色综合欧洲| 麻豆国产视频 | 精品福利在线观看 | 天天爽夜夜爽人人爽一区二区 | 99久久99久久精品 | 99久国产 | 色大片免费看 | 亚洲精品综合久久 | 中文字幕资源在线 | 亚洲色图22p| av片中文字幕 | 久久五月网 | 色播五月婷婷 | 久久久免费少妇 | 国产九九精品 | 91精品视频导航 | 成人h动漫精品一区二 | 亚洲一区精品二人人爽久久 | 中文字幕免费一区二区 | 亚洲精品91天天久久人人 | 久久久免费毛片 | aaa日本高清在线播放免费观看 | 天天操天天摸天天射 | 国产精品porn | 97色婷婷| 欧美性黄网官网 | 97av.com| 综合激情伊人 | 国产精品欧美日韩 | 色婷婷成人网 | 黄色影院在线免费观看 | 97日日碰人人模人人澡分享吧 | 久久五月精品 | 69夜色精品国产69乱 | 91九色国产视频 | 欧美一级性生活片 | 91中文视频 | 天天操天天爽天天干 | 狠狠干狠狠操 | 天天干天天摸天天操 | 亚洲午夜久久久久久久久电影网 | 欧美一级久久久 | 欧美激情精品 | 91免费日韩 | 亚洲综合五月天 | 狠狠色网 | 最新精品视频在线 | 免费看黄色毛片 | 久久麻豆视频 | 91亚洲精品国偷拍自产在线观看 | 亚洲一区二区黄色 | 精品一区二区在线播放 | 久久久蜜桃一区二区 | 亚洲极色| 亚洲综合色激情五月 | 久草在线免费在线观看 | 精品久久久久久久久久久久久 | 手机av观看| 97精产国品一二三产区在线 | 欧美日韩一区二区三区在线观看视频 | 亚洲精品乱码久久久久久蜜桃不爽 | 2019中文在线观看 | 成人午夜在线观看 | 黄色软件在线观看 | 国产日韩视频在线观看 | 国产精品视频永久免费播放 | 日韩成人黄色 | 国产一级免费在线 | 久久网站免费 | 一级黄毛片| 国产又黄又硬又爽 | www.色午夜.com | 精品国产不卡 | 夜夜躁天天躁很躁波 | 黄色小说在线免费观看 | 久草五月| 在线黄色观看 | 天天操夜夜拍 | 国产一区电影在线观看 | 免费在线播放av电影 | 国产成人一区二区啪在线观看 | japanesefreesexvideo高潮 | 国产综合激情 | 在线国产能看的 | 久久不卡日韩美女 | 久久人人爽爽人人爽人人片av | 99久久婷婷国产精品综合 | 夜色资源站国产www在线视频 | 亚洲视频一区二区三区在线观看 | 久久成人午夜 | 国产精品久久久久久久免费观看 | 亚洲精区二区三区四区麻豆 | 91九色免费视频 | 日本三级在线观看中文字 | 亚洲一区二区精品 | 欧美国产日韩中文 | 久久小视频 | 久草网站在线 | 久久久免费看视频 | 97理论电影 | 久久精品久久久久久久 | 欧美激情va永久在线播放 | 久久久国产精品久久久 | 国产又粗又猛又爽又黄的视频免费 | 久久天天躁狠狠躁亚洲综合公司 | 精品美女在线视频 | 97超碰在线久草超碰在线观看 | 天堂网av 在线 | 91试看 | 日韩字幕在线观看 | 激情五月色播五月 | 不卡的av在线播放 | 最近日本韩国中文字幕 | 99视频一区二区 | 午夜在线看片 | 三级免费黄 | 久久任你操 | 日日爽视频 | av资源免费观看 | a在线一区 | 免费黄在线看 | 伊人永久在线 | 国产日产精品一区二区三区四区 | 奇米影视777四色米奇影院 | 97狠狠干| 黄色一级免费 | 人人干人人搞 | 国产精品久久久免费 | 91精品久久久久久久久久入口 | 五月天天在线 | 午夜免费视频网站 | 国产中文字幕视频在线观看 | 欧美在线观看视频一区二区 | 国产免费av一区二区三区 | 国产精品久久久久久高潮 | 九九综合九九综合 | 国产精品理论片在线观看 | 久久久久在线观看 | www色片| 欧美伦理电影一区二区 | 99色网站 | 免费在线观看黄 | 日本精品xxxx | 色福利网 | 亚洲成av人片在线观看www | 五月花婷婷 | 日韩大片在线观看 | aaaaaa毛片 | 在线观看成人av | 色www精品视频在线观看 | 国产日韩欧美视频在线观看 | 国产91精品一区二区麻豆网站 | 8x成人在线| 国产精品videoxxxx| 色综合久久五月天 | 成人免费共享视频 | 国产精品一区二区av日韩在线 | www夜夜操 | 天天操夜夜叫 | 高清一区二区三区av | 97人人人人 | 不卡的av在线 | 亚洲人成免费 | 亚洲三级影院 | 欧美天堂视频在线 | 国产在线视频一区二区三区 | 高清不卡毛片 | 五月导航 | 色午夜影院 | 免费观看成人网 | 国产精品ssss在线亚洲 | 国产精品1000| 免费久久99精品国产 | 激情文学综合丁香 | 天天操夜夜操国产精品 | 丁香视频 | 激情网站免费观看 | 久久国产a| 黄色大片av| 久久久久久久久久电影 | 黄色三级网站 | 91在线免费观看网站 | 五月天久久综合网 | 国产一区二区手机在线观看 | 久久精品一级片 | 一区二区精品视频 | 亚洲精品久久久久中文字幕二区 | 亚洲欧美日韩一二三区 | 日韩av成人免费看 | 中文字幕在线观看视频一区 | 51久久成人国产精品麻豆 | 精品天堂av| 成人免费看黄 | 久久精品99国产精品 | 成人中文字幕av | 91麻豆精品国产91久久久无限制版 | 久久伊人操 | 日韩综合一区二区三区 | 色就干| 久久九九影视网 | 91福利视频免费观看 | 免费看污的网站 | 波多野结衣在线视频一区 | 人人擦 | 国产高清福利在线 | av片一区| www黄| 成人9ⅰ免费影视网站 | 免费久草视频 | 91色在线观看视频 | 欧美日韩性 | 国产成人精品免费在线观看 | 国产精品入口麻豆www | 91精品在线播放 | 日韩不卡高清视频 | 黄色成品视频 | 在线观看日韩专区 | 韩日成人av | 国产原厂视频在线观看 | 日韩三区在线 | 精品国产资源 | 成人99免费视频 | 免费的国产精品 | 三级在线视频播放 | 欧美肥妇free| 免费观看9x视频网站在线观看 | 久久国产精品久久精品国产演员表 | 久久久久久久国产精品视频 | 国产区久久 | 国产精品久久久 | 丁香六月婷婷综合 | 欧美精品在线一区二区 | 久久免费观看视频 | 日韩欧美高清一区二区 | 久久久久免费看 | 日韩精品欧美专区 | 激情图片久久 | 天天拍天天爽 | 在线亚洲精品 | 免费看片亚洲 | 97av在线视频免费播放 | 国产麻豆剧传媒免费观看 | 欧美天天干 | 国产精品久久久久久久久久免费 | 成片免费观看视频999 | 精品96久久久久久中文字幕无 | 亚洲国产精品成人va在线观看 | 91看片麻豆 | 美女国产在线 | 亚洲h在线播放在线观看h | 日韩在线理论 | 1000部国产精品成人观看 | 五月亚洲婷婷 | 日韩视频一区二区三区 | 欧美日韩一区二区在线观看 | 国产免费观看av | 亚洲精品美女免费 | 国产一级片在线播放 | 午夜视频一区二区三区 | 亚洲经典中文字幕 | 亚洲色图 校园春色 | 精品久久久免费 | 狠狠躁夜夜a产精品视频 | 国产系列 在线观看 | 免费观看成年人视频 | 国内久久看 | 国产视频一区二区在线播放 | 伊人天天狠天天添日日拍 | 91亚洲永久精品 | 国产一线二线三线性视频 | 国产一区久久久 | www.一区二区三区 | 精品国产乱码久久久久久浪潮 | 久久久影院一区二区三区 | 国产在线精品一区二区不卡了 | 麻豆视频免费入口 | 久久久免费视频播放 | 国产精品毛片久久久久久久久久99999999 | 日本精品中文字幕 | 99精品国产一区二区三区麻豆 | 午夜av在线电影 | 91视频在线网址 | 麻豆免费精品视频 | 精产嫩模国品一二三区 | 亚洲精品免费在线观看 | 99久在线精品99re8热视频 | 天天射日| 在线视频精品 | 国产视频丨精品|在线观看 国产精品久久久久久久久久久久午夜 | 五月天色婷婷丁香 | 日韩av在线小说 | a色视频 | 久久天天操 | 久久国产综合视频 | 日韩免费b| 天天夜操 | 超碰97人人干 | 狠狠色丁香婷婷综合视频 | av在线免费播放 | 国产不卡精品视频 | 91精品无人成人www | 黄色视屏在线免费观看 | 精品伊人久久久 | 超碰在线日本 | 久久综合在线 | 久久这里只精品 | 国产涩涩在线观看 | 国产成人精品亚洲 | 激情久久综合网 | 久久国产精品成人免费浪潮 | 亚洲午夜精品福利 | 成年人黄色大片在线 | 激情欧美在线观看 | 制服丝袜成人在线 | 日韩在线观看你懂得 | 久久嗨 | 国产黄色av网站 | 亚洲视频久久 | 日韩精品一区二区三区水蜜桃 | 国产九色91 | 精品免费视频123区 午夜久久成人 | 欧美日韩亚洲精品在线 | 免费成人黄色片 | 免费在线观看av网站 | 亚洲精品h | 亚洲精品在线网站 | 日韩经典一区二区三区 | av在线免费播放网站 | 在线观看免费视频 | 伊人春色电影网 | 97香蕉超级碰碰久久免费软件 | 有码一区二区三区 | 天天干天天干天天干天天干天天干天天干 | 亚洲高清资源 | 亚洲91网站| 91亚洲夫妻 | 亚洲国产高清在线观看视频 | 国产在线观看一 | 久久精品视频在线 | 亚洲jizzjizz日本少妇 | 久久久久久久久久久久亚洲 | 欧美午夜久久 | 精品国产免费久久 | 日日夜夜免费精品视频 | 成人av免费在线看 | 天天操天天爱天天干 | 黄av在线| 欧美a级一区二区 | 99精品视频免费 | 999视频在线播放 | 波多野结衣最新 | 中文字幕在线专区 | 九九视频免费在线观看 | 成人av在线影视 | 91精品对白一区国产伦 | 日韩一区二区三区免费电影 | 婷婷久月 | 91精品国自产在线观看欧美 | 日韩理论电影在线观看 | 国产999 | 日韩大片免费观看 | 亚洲va在线va天堂 | 在线亚洲欧美日韩 | 国产精品中文字幕在线 | 天天操天天操 | 九九视频这里只有精品 | av在线免费在线 | 亚洲一级黄色 | 人人澡av | 国产韩国精品一区二区三区 | 97视频在线观看成人 | 久久久久久久久久久免费 | 欧美九九九 | www.av免费观看 | 又爽又黄又刺激的视频 | 国产亚洲精品久久久久久久久久 | 中文字幕亚洲字幕 | 久久人91精品久久久久久不卡 | 探花视频在线观看免费 | 日韩av片无码一区二区不卡电影 | 日本婷婷色 | 97日日碰人人模人人澡分享吧 | 久久一级片| 成人国产精品av | 久久噜噜少妇网站 | 香蕉视频在线免费 | 99九九热只有国产精品 | 亚洲一级片在线看 | 麻豆小视频在线观看 | 久久免费公开视频 | 五月激情av | 91麻豆精品国产自产在线游戏 | 天天综合网久久 | 国产日产亚洲精华av | 在线欧美国产 | 人人草人 | av一本久道久久波多野结衣 | 欧美一区二区精品在线 | 中文伊人 | 欧美一二三视频 | 国产精品高潮呻吟久久av无 | www.久热| 亚洲精品在线播放视频 | 精品国产乱码久久久久久1区二区 | 在线观看日韩专区 | 亚洲欧美日韩一区二区三区在线观看 | 91精品在线麻豆 | www久久 | 天天射天天射天天射 | 国产一卡在线 | 国产在线不卡视频 | 日日夜夜91 | 黄色一区二区在线观看 | 成人丝袜 | www黄色com | 久久精品亚洲精品国产欧美 | 婷婷国产v亚洲v欧美久久 | 日本公妇色中文字幕 | 久草在线中文888 | 美女网站免费福利视频 | 国产精品白浆 | 最近能播放的中文字幕 | www日韩高清| 在线观看黄网站 | 波多野结衣视频一区二区 | 成人中心免费视频 | 欧美一区日韩一区 | 最近中文字幕免费av | 2019中文最近的2019中文在线 | 欧美日韩在线免费视频 | 日韩一二三区不卡 | 美女激情影院 | 亚洲四虎在线 | 美女精品国产 | 天天操操操操操操 | 国产免费av一区二区三区 | 久久狠狠婷婷 | 色操插| 色婷婷在线视频 | 亚洲h色精品 | 中文字幕黄色 | 久久99精品波多结衣一区 | 黄色视屏av | av高清不卡 | 国产黑丝袜在线 | 亚洲成人精品影院 | 亚洲黄色高清 | 久久成人久久 | 可以免费看av | 国产中文字幕视频在线观看 | 国内精品在线看 | 免费在线播放视频 | 天天艹 | 欧美一二三区播放 | 欧美日韩综合在线观看 | 久久区二区 | 99久久日韩精品免费热麻豆美女 | 久操97| 国产专区在线播放 | 国产精品免费麻豆入口 | 成人小视频在线观看免费 | 亚洲影视资源 | 日韩黄色在线观看 | 色小说在线 | 亚洲午夜久久久影院 | 五月婷婷激情综合 | 国产一级性生活视频 | 欧美日韩在线视频一区 | 国产精品淫片 | 成人在线免费看 | 97夜夜澡人人爽人人免费 | 久久av免费电影 | 精品久久久久久亚洲综合网 | 黄在线免费看 | 成人久久18免费网站麻豆 | 成人免费观看在线视频 | 午夜久久久久久久久久影院 | 少妇精品久久久一区二区免费 | 亚洲欧洲成人精品av97 | 91九色自拍| 天天干天天干天天干 | 搡bbbb搡bbb视频| 免费成人av在线 | 免费观看性生活大片 | 中文字幕高清 | www.人人干| 中文字幕免费看 | 91av电影 | 国产精品观看在线亚洲人成网 | 亚洲国产精品电影在线观看 | 日日摸日日添日日躁av | 98超碰在线 | 欧美在线你懂的 | 91亚洲精品国偷拍 | 国产精品久久一区二区三区不卡 | 亚洲一区二区三区91 | 97精品国产91久久久久久久 | 亚洲人成人天堂h久久 | 黄色av一区 | 国产精品久久久久久婷婷天堂 | 在线亚洲精品 | 伊人资源站 | 欧美福利视频 | 色婷婷成人网 | 4438全国亚洲精品观看视频 | 国产精品影音先锋 | 五月婷婷,六月丁香 | 欧美日本三级 | 国产精品一级在线 | 久热免费 | 日韩特级片 | 在线免费高清一区二区三区 | 黄色91免费观看 | 亚洲自拍av在线 | 69久久夜色精品国产69 | 国产午夜精品久久久久久久久久 | 国产高清不卡一区二区三区 | 国外av在线 | 99免费视频| 中文亚洲欧美日韩 | 中文字幕在线日 | 99精品热视频只有精品10 | 国产日韩精品欧美 | 中文字幕国产精品一区二区 | 51久久夜色精品国产麻豆 | 在线电影中文字幕 | 免费在线视频一区二区 | 日韩精品 在线视频 | 91香蕉视频 mp4 | 色综合久久综合中文综合网 | 中文字幕在线日本 | 国产精品 国产精品 | 五月天最新网址 | 伊色综合久久之综合久久 | 91成人破解版 | 香蕉久久久久久av成人 | 亚洲精品在线免费播放 | 中文字幕在线观看完整版电影 | 91手机电视 | 韩国av永久免费 | 狠狠天天 | 日韩免费三级 | 久久9视频| 在线黄网站| 国产亚洲精品bv在线观看 | 久久av网址| 亚洲高清色综合 | 色av男人的天堂免费在线 | 又黄又爽又刺激的视频 | 久久69精品| 狠狠狠狠狠狠操 | 日韩欧美视频一区二区三区 | 91精品夜夜 | 在线观看亚洲精品 | av成人亚洲 | 久久成人精品电影 | 久久成人黄色 | 国产精品区二区三区日本 | 黄色中文字幕 | 波多野结衣在线播放一区 | 日韩在线视频精品 | 国产视频在线免费观看 | 天天射天天干 | 日韩av一区二区三区在线观看 | 黄色www| 久久精久久精 | 麻豆 free xxxx movies hd | 国产成人av在线影院 | 在线观看视频在线观看 | 香蕉在线观看 | 日韩精品一区二区久久 | 91激情视频在线 | www.久久久com | 免费日韩电影 | 免费看黄网站在线 | 91系列在线| 成人av视屏 | 天堂网中文在线 | 岛国精品一区二区 | 日韩精品一区二区久久 | 91精品免费 | 亚洲激情av | 97在线视频免费 | 国产麻豆剧果冻传媒视频播放量 | 黄色av一级片 | 国产日韩高清在线 | 国产免费观看高清完整版 | 婷婷综合影院 | 久久久首页 | 在线观看911视频 | 国产精品毛片久久 | 中文字幕乱码电影 | 亚洲欧美日本一区二区三区 | 天天插天天 | 亚洲欧洲精品一区二区精品久久久 | 国产精品视频区 | av在线免费观看黄 | 国产1区2 | 久久精品中文字幕免费mv | 99热这里只有精品8 久久综合毛片 | 综合激情久久 | 欧美日韩一区二区在线 | 久久99国产精品免费 | 亚洲精品视频第一页 | 国产91精品久久久久 | 探花视频免费观看高清视频 | 精品美女国产在线 | 国产精品婷婷午夜在线观看 | 国产情侣一区 | 69性欧美| 成年人视频在线免费播放 | 精品久久久久久久久久久院品网 | 亚洲综合色视频在线观看 | 精品伊人久久久 | 97超碰超碰| 在线视频app | av直接看 | 国产蜜臀av| 成人av电影网址 | 日狠狠 | 成人午夜精品福利免费 | 中文字幕网址 | 国语麻豆 | 久久亚洲免费视频 | 蜜桃视频日韩 | 天天综合导航 | 成人黄色av网站 | 亚洲精品久久久久久久不卡四虎 | 999久久国精品免费观看网站 | 欧美成人性网 | 四虎永久国产精品 | 在线免费亚洲 | 黄色大片国产 | 精品成人久久 | 日本久久久精品视频 | 91精品久久久久久综合五月天 | 在线观看 亚洲 | 超碰电影在线观看 | 日日夜夜天天干 | 色欧美88888久久久久久影院 | 91日韩在线 | 午夜视频不卡 | 在线日韩中文 | 国产精品免费在线播放 | 成人毛片100免费观看 | 亚洲乱码国产乱码精品天美传媒 | 亚洲色图色 | www.天天干 | 99精品欧美一区二区三区黑人哦 | av在线看片| 永久免费精品视频网站 | 久久久网站 | 欧美一区二区在线免费观看 | 欧美嫩草影院 | 亚洲综合精品视频 | 在线观看视频色 | 五月婷婷中文网 | 激情图片qvod| 丁香婷婷久久 | 蜜桃av久久久亚洲精品 | av成人免费在线 | 成人中文字幕av | 日日弄天天弄美女bbbb | 精品高清美女精品国产区 | 天天操天天干天天爱 | 中文字幕黄色 | 五月婷婷丁香网 | 久久手机精品视频 | 国产精品久久久免费 | 日本性动态图 | 久久爱导航 | 天天操福利视频 | 精品国产一区二区三区在线 | 国产在线理论片 | 三级黄色在线观看 | 精品国产亚洲一区二区麻豆 | 久久免费播放 | 中文字幕在线高清 | 91视频高清免费 | 日韩精品一区二区三区水蜜桃 | 精品国产精品久久一区免费式 | av性网站| 日韩精品偷拍 | 国产成人三级在线播放 | 日韩精品免费一线在线观看 | 国产一级免费片 | www.伊人网.com| 国产一区福利在线 | 亚洲视频综合在线 | 亚洲精品美女在线观看播放 | 国产精品麻豆三级一区视频 | www.亚洲精品视频 | 337p日本欧洲亚洲大胆裸体艺术 | www免费黄色 | 成人午夜精品久久久久久久3d | 国产97视频在线 | 91九色在线视频观看 | 成人精品一区二区三区电影免费 | 99精品视频免费看 | 中文资源在线播放 | 婷婷综合视频 | 波多野结衣视频一区二区三区 | 玖玖视频国产 | 伊甸园永久入口www 99热 精品在线 | 国产美女永久免费 | 天天干天天操天天 | 国产一级黄色片免费看 | 国产精品麻豆视频 | 99视频国产精品免费观看 | 亚洲激情在线观看 | 草久在线视频 | 国产婷婷精品av在线 | 国产一区播放 | 成 人 黄 色 视频 免费观看 | 国产日产欧美在线观看 | 视频99爱| 久草在线一免费新视频 | 日韩美女一级片 | 久久免费观看视频 | 91免费在线播放 | 丁香六月婷婷 | 五月综合激情 | 丁香婷婷激情 | 国产在线看一区 | 在线免费观看羞羞视频 | 国产精品国内免费一区二区三区 | 97成人资源 | 午夜精品视频一区 | 亚洲精品456在线播放 | 一级黄色大片在线观看 | 在线播放日韩av | 99精品免费在线观看 | 白丝av免费观看 | 国产精品久久一区二区三区, | 九九九在线观看 | 久久99电影| 国产在线不卡一区 | 午夜国产福利在线观看 | 久久久国产精华液 | 婷婷丁香狠狠爱 | 免费a级毛片在线看 | 国产精品久久久久久久久久妇女 | 国产片免费在线观看视频 | 五月亚洲 | 激情中文在线 | 91视频在线观看大全 | 国内精品久久天天躁人人爽 | 四虎成人精品在永久免费 | 国产精品久久久久久久久免费 | 在线免费观看视频 | 成人精品视频 | 欧美少妇bbwhd | 91视频免费| 国产福利在线免费观看 | 91完整版 | 97超碰在线资源 | 97国产精品亚洲精品 | 久久五月激情 | 在线观看一区 | www.888av| 男女激情免费网站 | 欧美日韩视频免费看 | 国产99视频在线观看 | 国产小视频你懂的 | 一级做a爱片性色毛片www | 久久久麻豆精品一区二区 | 午夜av一区 | 日韩影视在线观看 | 午夜少妇av | 天天干天天做天天操 | 亚洲欧美日本A∨在线观看 青青河边草观看完整版高清 | 国产午夜精品理论片在线 | 婷婷综合五月天 | 91毛片在线 | 99色在线观看视频 | 亚洲天堂网在线观看视频 | 午夜国产影院 | 国产一级一片免费播放放 | 亚洲免费精彩视频 | 碰超在线观看 | 日黄网站| 在线播放日韩av | 一区二区三区电影大全 | 欧美99久久 | 四虎海外影库www4hu | 国产精品久久久久久久久久直播 | 精品国产一区二区三区久久 | 亚洲成a人片77777潘金莲 | 国产成人区 | 91亚洲影院| 久久草在线视频国产 | a级国产乱理伦片在线观看 亚洲3级 | 高清不卡一区二区三区 |