日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 >

zabbix安装使用及监控案例(从头到尾)

發布時間:2025/3/21 45 豆豆
生活随笔 收集整理的這篇文章主要介紹了 zabbix安装使用及监控案例(从头到尾) 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

前文提要:本文為整個zabbix的介紹及配置以及案例

目錄

一.監控的概述

二.zabbix的概述

1.zabbix是什么

2.zabbix的作用

3.zabbix的特性

4.zabbix系統的組成

5.zabbix 3.2.4的軟件環境要求

三.zabbix的安裝

1.環境準備

2.部署監控服務器

3.部署被監控主機Zabbix Agent

四.配置及使用Zabbix監控系統

1.添加監控主機

2.自定義Zabbix監控項目

3.創建監控模板

4.實現Zabbix報警功能

6.設置郵件

8.自動發現規則

9.創建動作

10.添加新的虛擬機

五.Zabbix主動監控

1.添加被監控主機

2.創建主動監控的監控模板

3.添加監控主機

六.拓撲圖與聚合圖形

1.創建拓撲圖

2.創建聚合圖形

七.自定義監控案例

1.監控Nginx服務狀態

2.創建自定義key

2.監控網絡連接狀態


一.監控的概述

監視并控制各種服務器(網站服務、數據庫服務器)的網絡流量、訪問量、操作系統的運行情況.硬件資源使用情況、、服務的運行狀態 使用操作系統自帶命令控制 計劃任務執行自己編寫的監控腳本 搭建監控服務器實現對所有服務器的監控 監控的目的 報告系統運行狀況-每一部分必須同時監控 -內容包括吞吐量、反應時間、使用率等 提前發現問題-進行服務器性能調整前,知道調整什么-找出系統的瓶頸在什么地方

二.zabbix的概述

1.zabbix是什么

zabbix是一款基于web頁面的、開源的、企業級的,可以分布式部署的監控軟件。

2.zabbix的作用

??? 監控windows和Linux主機上的軟硬件狀態。
??? 監控各網絡設備,如路由器、交換機、防火墻、f5、打印機等。
??? 發送告警通知。
??? 通過web頁面及圖形展示監控數據。

3.zabbix的特性

??? 1)由server和agent程序協同工作,如果是分布式監控還需要proxy程序。
??? 監控方式站在agnet的角度分為主動監控(agent active)和被動監控(agent)。
??????? 主動監控
??????? 當監控條目配置為agent active時,即為主動監控,此時agent會主動根據配置好的時間間隔去向server或proxy詢問要監控哪些item,然后將item的數據主動提交給server或proxy。
??????? 被動監控
??????? 當監控條目配置為agent時,即為被動監控,此時server或proxy會主動向agent請求它要監控的item的數據,然后agent會將數據發送給server或proxy。支持的監控手段
??

2)所謂監控手段即server或proxy通過什么方式來收集監控到的數據,常用的有:
??????? SNMP(polling,trapping)
??????? IPMI(監控硬件狀況)
??????? JMX(監控java應用)
??????? 自定義監測(自定義各類監控腳本監測)
3)告警閾值定義
??????? 在trigger中定義告警閾值或條件
??????? 存儲于后臺數據庫中
??????? 可以自定義告警升級機制
??????? 調用action實現自動化動作
???

4)監控數據呈現
??? zabbix通過內置的畫圖軟件將監控到的數據實時通過web頁面呈現出來。
??? 歷史數據存儲
??????? 存儲于數據庫中
??????? 支持多種數據庫,mysql,db2,oracle,postgresql,sqlite
??????? 存儲時長可自定義
??????? 自動清理過期歷史數據
?

5)監控主機配置
??????? 通過添加監控設備方式添加
??????? 可以使用模板進行配置

6) 模板的使用
??????? 模板包含item,trigger,action等一系列單個主機支持的元素
??????? 模板中可以使用組監控
??????? 模板可以繼承

7) 自動發現功能
??????? 網絡設備自動發現
??????? agent自動注冊
??????? 自動發現文件系統、網卡、SNMP OID
???

8)web界面
??????? web前端采用php編寫
??????? 界面樣式可以靈活自定義
??????? 自帶操作日志審計
???

9)zabbix API
??????????? 供第三方程序接入
??????????? 權限系統
??????????? 可以對用戶進行分組認證及授權。

10)agent端
??????????? 支持Linux和Windows系統。
??????????? 守護進程
??????????? 基于C語言開發。

4.zabbix系統的組成

zabbix_server
??????? 服務端守護進程。
??????? 負責處理客戶端主動送上來以及它主動去取回的數據。
??????? 通過web界面呈現這些數據。
???

zabbix_agentd
??????? 客戶端守護進程。
??????? 負責收集客戶端上的數據并發送給server或proxy。
???

zabbix_get
??????? 服務端工具。
??????? 在服務器上執行,用于手動收集客戶端的監控數據,可以用于監控測試或者排錯。
??? zabbix_sender
??????? 客戶端工具。
??????? 對于非常耗時間的檢測項,可以在其檢測完成以后,通過它將數據發送給server或者proxy。
??????? 需要與trapper配合使用。
???

zabbix_proxy
??? 類似于server,但它只是一個中轉站,當跨地區,跨機房部署zabbix系統時,需要用到它,以將它收集到的數據發送給server。
???

zabbix_java_gateway
??????? 類似于agentd程序。
??????? 只用于java應用程序的監控。
??????? 只能主動去獲取數據,類似于agent active。
??????? 最終將收集到的數據發送給server或proxy。
???

zabbix_web
??? 構建zabbix專用的站點,將監控數據以web頁面的形式呈現出來,并對zabbix系統進行配置設定。

5.zabbix 3.2.4的軟件環境要求

zabbix 3.2.4 web需求php的環境如下:

三.zabbix的安裝

1.環境準備

硬件:CentOS7.5

?軟件:

gccpcre-developensslnginx-1.12.2.tar.gz
phpphp-mysqlndphp-fpmmysql-community*
php-xmlphp-jsonnet-snmp-develcurl-devel
autoconf?libevent-develphp-gdzabbix-3.4.4.tar.gz
php-bcmathphp-mbstringautoconf

nginx所需模塊:

--with-http_ssl_module

zabbix-server所需模塊

--enable-server--enable-proxy
--enable-agent--with-mysql=/usr/bin/mysql_config
--with-net-snmp--with-libcurl

zabbix-agent所需模塊

--enable-agent

?2.部署監控服務器

1)zabbix服務端搭建LNMP環境

[root@zabbixserver ~]# yum -y install gcc pcre-devel openssl-devel [root@zabbixserver ~]# tar -xf nginx-1.12.2.tar.gz [root@zabbixserver ~]# cd nginx-1.12.2 [root@zabbixserver nginx-1.12.2]# ./configure --with-http_ssl_module [root@zabbixserver nginx-1.12.2]# make && make install [root@zabbixserver ~]# yum -y install php php-mysql php-fpm [root@zabbixserver ~]# yum -y install mysql-community*

2)修改Nginx配置文件

配置Nginx支持PHP動態網站,因為有大量PHP腳本需要執行,因此還需要開啟Nginx的各種fastcgi緩存,加速PHP腳本的執行速度

[root@zabbixserver ~]# vim /usr/local/nginx/conf/nginx.conf … … http{ … …fastcgi_buffers 8 16k;???? ????#緩存php生成的頁面內容,8個16kfastcgi_buffer_size 32k;???? ????#緩存php生產的頭部信息,32kfastcgi_connect_timeout 300; ????#連接PHP的超時時間,300秒fastcgi_send_timeout 300;???? ????#發送請求的超時時間,300秒fastcgi_read_timeout 300;???? ????#讀取請求的超時時間,300秒 location ~ \.php$ {root html;fastcgi_pass 127.0.0.1:9000;fastcgi_index index.php;include fastcgi.conf; #[注意這里別出錯]} ....

3)啟動服務

[root@zabbixserver ~]# systemctl enable mysqld --now [root@zabbixserver ~]# systemctl enable php-fpm?--now???????#設置開機并自啟 [root@zabbixserver ~]# /usr/local/nginx/sbin/nginx????????#啟動服務 [root@zabbixserver ~]# echo /usr/local/nginx/sbin/nginx >> /etc/rc.local [root@zabbixserver ~]# chmod +x /etc/rc.local #通過rc.local設置開機自啟 [root@zabbixserver ~]# firewall-cmd --set-default-zone=trusted [root@zabbixserver ~]# setenforce 0 [root@zabbixserver ~]# sed -i '/SELINUX/s/enforcing/permissive/' /etc/selinux/config

4)部署監控服務器Zabbix Server

源碼安裝Zabbix Server

[root@zabbixserver lnmp_soft]# yum -y install net-snmp-devel \ curl-devel autoconf libevent-devel #安裝相關依賴包 [root@zabbixserver lnmp_soft]# tar -xf zabbix-3.4.4.tar.gz [root@zabbixserver lnmp_soft]# cd zabbix-3.4.4/ [root@zabbixserver zabbix-3.4.4]# ./configure --enable-server \--enable-proxy --enable-agent --with-mysql=/usr/bin/mysql_config \--with-net-snmp --with-libcurl

5)創建并初始化數據庫

[root@zabbixserver ~]# grep -i password /var/log/mysqld.log # 修改數據庫的root用戶密碼為NSD2021@tedu.cn [root@zabbixserver ~]# mysqladmin -uroot -p'A8cCwrjefY(v' password NSD2021@tedu.cn #原密碼在上面的配置 [root@zabbixserver ~]# mysql -uroot -pNSD2021@tedu.cn mysql> create database zabbix default charset utf8mb4; mysql> grant all on zabbix.* to zabbix@'localhost' identified by 'zabbix'; [root@zabbixserver mysql]# ls schema.sql images.sql data.sql [root@zabbixserver mysql]# mysql -uzabbix -pzabbix zabbix < schema.sql [root@zabbixserver mysql]# mysql -uzabbix -pzabbix zabbix < images.sql [root@zabbixserver mysql]# mysql -uzabbix -pzabbix zabbix < data.sql

注.該數據包無法上傳,有需要聯系我

如何測試? [root@zabbixserver ~]# mysql -uzabbix -pzabbix -h localhost zabbix #-u指定用戶名,-p指定密碼,-h指定服務器IP,最后的zabbix是數據庫名稱 #使用zabbix賬戶(密碼為zabbix)連接localhost服務器上面的zabbix數據庫 mysql> show tables #查看有沒有數據表 mysql> exit #退出數據庫

6)修改zabbix_server配置并啟動監控服務

[root@zabbixserver ~]# vim /usr/local/etc/zabbix_server.conf DBHost=localhost # 85行,定義哪臺主機為數據庫主機,localhost為本機 DBName=zabbix #95行,設置數據庫名稱 DBUser=zabbix #111行,設置數據庫賬戶 DBPassword=zabbix #119行,設置數據庫密碼 LogFile=/tmp/zabbix_server.log???? #38行,日志的位置,排錯使用,該行僅查看即可 [root@zabbixserver ~]# useradd -s /sbin/nologin zabbix

通過創建service文件管理zabbix服務

[root@zabbixserver ~]# vim /usr/lib/systemd/system/zabbix_server.service [Unit] Description=zabbix server After=network.target remote-fs.target nss-lookup.target [Service] Type=forking PIDFile=/tmp/zabbix_server.pid ExecStart=/usr/local/sbin/zabbix_server ExecStop=/bin/kill $MAINPID [Install] WantedBy=multi-user.target [root@zabbixserver ~]# systemctl enable zabbix_server --now [root@zabbixserver ~]# ss -ntulp |grep zabbix_server #確認連接狀態,端口10051 tcp LISTEN 0 128 *:10051 *:* users:(("zabbix_server",pid=23275,fd=4),("zabbix_server",pid=23274,fd=4)

7) 修改Zabbix_agent配置文件,啟動Zabbix_agent服務

[root@zabbixserver ~]# vim /usr/local/etc/zabbix_agentd.conf Server=127.0.0.1,192.168.2.5????????????#93行,允許哪些主機監控本機(主動監控) ServerActive=127.0.0.1,192.168.2.5????????#134行,允許哪些主機通過主動模式監控本機(被動監控) Hostname=zabbix_server????????????????#145行,設置本機主機名(名稱可以任意) LogFile=/tmp/zabbix_agentd.log????????????#設置日志文件(不需要修改) UnsafeUserParameters=1????????????????#280行,是否允許自定義監控傳參(0不允許)

編寫zabbix_agentd的service文件,通過systemd管理服務

[root@zabbixserver ~]# vim /usr/lib/systemd/system/zabbix_agentd.service [Unit] Description=zabbix agent After=network.target remote-fs.target nss-lookup.target [Service] Type=forking PIDFile=/tmp/zabbix_agentd.pid ExecStart=/usr/local/sbin/zabbix_agentd ExecStop=/bin/kill $MAINPID [Install] WantedBy=multi-user.target [root@zabbixserver ~]# systemctl enable zabbix_agentd --now [root@zabbixserver ~]# ss -ntulp |grep zabbix_agentd #查看端口信息為10050 tcp LISTEN 0 128 *:10050 *:* users:(("zabbix_agentd",pid=23505,fd=4),("zabbix_agentd",pid=23504,fd=4)

8)上線Zabbix的Web頁面

[root@zabbixserver ~]# cd lnmp_soft/zabbix-3.4.4/frontends/php/ [root@zabbixserver php]# cp -r * /usr/local/nginx/html/ [root@zabbixserver php]# chown -R apache.apache /usr/local/nginx/html/ #這里修改所有者使用:或者.都可以。 #修改權限的原因如下: #php-fpm的賬戶是apache,后面我們需要讓php-fpm對網站目錄具有讀寫操作, #而/usr/local/nginx/html默認是root所有,僅root具有寫權限,php-fpm無寫權限

注.該數據包無法上傳,有需要聯系我

9)瀏覽器訪問Zabbix_server服務器的Web頁面

http://192.168.2.5/index.php

#第一次訪問,初始化PHP頁面會檢查計算機環境是否滿足要求,如果不滿足會給出修改建議 #默認會提示PHP的配置不滿足環境要求,需要修改PHP配置文件

????????根據錯誤提示,安裝依賴、修改PHP配置文件,滿足Zabbix_server的環境要求。

[root@zabbixserver ~]# yum -y install php-gd php-xml [root@zabbixserver ~]# yum -y install php-bcmath php-mbstring [root@zabbixserver ~]# vim /etc/php.ini date.timezone = Asia/Shanghai????????????????#878行,設置時區 max_execution_time = 300????????????????????#384行,最大執行時間,秒 post_max_size = 32M????????????????????????#672行,POST數據最大容量 max_input_time = 300????????????????????????#394行,服務器接收數據的時間限制 [root@zabbixserver ~]# systemctl restart php-fpm

修改完PHP配置文件后,再次使用瀏覽器訪問服務器

?

?在登陸頁面,使用用戶(admin)和密碼(zabbix)登陸,登陸后設置語言環境為中文

?

3.部署被監控主機Zabbix Agent

1)源碼安裝Zabbix agent軟件

[root@web1 ~]# useradd -s /sbin/nologin zabbix [root@web1 ~]# yum -y install gcc pcre-devel autoconf [root@web1 ~]# tar -xf zabbix-3.4.4.tar.gz [root@web1 ~]# cd zabbix-3.4.4/ [root@web1 zabbix-3.4.4]# ./configure --enable-agent [root@web1 zabbix-3.4.4]# make && make install

2)修改agent配置文件,啟動Agent

[root@web1 ~]# vim /usr/local/etc/zabbix_agentd.conf Server=127.0.0.1,192.168.2.5????????????????#93行,誰可以監控本機(被動監控模式) ServerActive=127.0.0.1,192.168.2.5????????????#134行,誰可以監控本機(主動監控模式) Hostname=web1???????????????? ????????????????#145行,被監控端自己的主機名 EnableRemoteCommands=1???? #69行,監控異常后,是否允許服務器遠程過來執行命令,如重啟某個服務 UnsafeUserParameters=1????????????????????#280行,是否允許自定義key傳參 [root@web1 ~]# firewall-cmd --set-default-zone=trusted [root@web1 ~]# sed -i '/SELINUX/s/enforcing/permissive/' /etc/selinux/config [root@web1 ~]# setenforce 0

設置service管理服務

[root@web1 ~]# vim /usr/lib/systemd/system/zabbix_agentd.service [Unit] Description=zabbix agent After=network.target remote-fs.target nss-lookup.target [Service] Type=forking PIDFile=/tmp/zabbix_agentd.pid ExecStart=/usr/local/sbin/zabbix_agentd ExecStop=/bin/kill $MAINPID [Install] WantedBy=multi-user.target [root@web1 ~]# systemctl enable zabbix_agentd --now #啟動服務器并設置開機自啟動

四.配置及使用Zabbix監控系統

1.添加監控主機

使用覽器登錄http://192.168.2.5/index.php,通過Configuration(配置)-->Hosts(主機)-->Create Host(創建主機)添加被監控Linux主機

?添加被監控主機時,需要根據提示輸入被監控Linux主機的主機名稱(最好與電腦的主機名一致,但也允許不一致)、主機組、IP地址等參數

1) 為被監控主機添加監控模板

?2)查看監控數據

查看監控數據,登錄Zabbix Web控制臺,點擊Monitoring(監控中)—> Latest data(最新數據),正過濾器中填寫過濾條件,根據監控組和監控主機選擇需要查看哪些監控數據

?找到需要監控的數據后,可以點擊后面的Graph(圖形)查看監控圖形

?2.自定義Zabbix監控項目

操作步驟:創建自定義key創建監控項目創建監控圖形將監控模板關聯到主機

被監控主機創建自定義key

自定義的key文件一般存儲在/usr/local/etc/zabbix_agentd.conf.d/目錄,這里還需要修改zabbix_agentd.conf文件,允許自定義監控key,來讀取該目錄下的所有文件 。

[root@web1 ~]# vim /usr/local/etc/zabbix_agentd.conf Include=/usr/local/etc/zabbix_agentd.conf.d/???????? #264行,加載配置文件目錄 [root@web1 ~]# cd /usr/local/etc/zabbix_agentd.conf.d/ [root@web1 zabbix_agentd.conf.d]# vim count.line.passwd UserParameter=count.line.passwd,sed -n '$=' /etc/passwd(被執行端執行此命令) #自定義key語法格式: #UserParameter=自定義key名稱,命令(每當執行此名稱就執行后面的命令)

測試自定義key是否正常工作

[root@web1 ~]# systemctl restart zabbix_agentd???????????#重啟agent服務 [root@web1 ~]# zabbix_get -s 127.0.0.1 -k count.line.passwd(指定地址)21

注意:如zabbix_get命令執行錯誤,提示Check access restrictions in Zabbix agent configuration,則需要檢查agent配置文件是否正確

[root@web1 ~]# vim /usr/local/etc/zabbix_agentd.conf Server=127.0.0.1,192.168.2.5 ServerActive=127.0.0.1,192.168.2.5

3.創建監控模板

模板、應用集與監控項目的關系圖

?1)添加監控模板

登錄Zabbix Web監控控制臺,通過Configuration(配置)-->Template(模板)-->Create template(創建模板),填寫模板名稱,新建模板群組

創建模板后,默認模板中沒有任何應用集、監控項、觸發器、圖形等

?2)創建應用集

創建完成模板后,默認模板中沒有任何應用集、監控項、觸發器、圖形等資源。這里需要點擊模板后面的Application(應用集)鏈接打開創建應用集的頁面

?點擊Application(應用集)后,會刷新出圖-16所示頁面,在該頁面中點擊Create application(創建應用集)按鈕,設置應用集名稱,名稱可以任意

?3)創建監控項目item

與創建應用集一樣,在模板中還需要創建監控項目

?

?接下來,還需要給項目設置名稱(名稱可以任意)及對應的自定義key(必須與前面自定義的監控key名稱一致),

?

?鍵值必須是和機器上的指令一樣

4)將模板鏈接到被監控主機

?將完整的監控模板制作完成后,就可以將模板鏈接到主機實現監控功能了。首先找到被監控主機Configuration(配置)-->Hosts(主機)

點擊需要的被監控主機鏈接,打開監控主機設置頁面,在Template(模板)頁面中選擇需要鏈接到該主機的模板,在此選擇剛剛創建的模板count_line.passwd添加即可

?

?5)查看監控數據圖形

點擊Monitoring(監控中)—> Latest data(最新數據),根據需要選擇條件,查看監控圖形

?

4.實現Zabbix報警功能

自定義的監控項默認不會自動報警,首頁也不會提示錯誤,需要配置觸發器與報警動作才可以自定報警。
什么是觸發器(trigger)?(相當于if)
????????表達式,如內存不足300M,用戶超過30個等
????????當觸發條件發生后,會導致一個觸發事件
????????觸發事件會執行某個動作
什么是動作(action)?
????????動作是觸發器的條件被觸發后所執行的行為
????????可以是發送郵件、也可以是重啟某個服務等
參考如下操作步驟:
????????創建觸發器并設置標記
????????設置郵箱(發件人,收件人)
????????創建Action動作
????????創建觸發器規則

1)創建觸發器

創建觸發器時強烈建議使用英文的語言環境,通過Configuration(配置)--> Templates(模板),找到我們之前創建的count.line.passwd模板,點擊模板后面的triggers(觸發器),如圖-1所示。

?2)觸發器表達式

創建觸發器時需要定義表達式,觸發器表達式(Expression)是觸發異常的條件,觸發器表達式格式如下:

{<server>:<key>.<function>(<parameter>)}<operator><constant> {主機:key.函數(參數)}<表達式>常數(key指監控的名字)(函數:求最大值或最小最新值【可能有可能沒有】)(表達式:<>=...)

可以直接手寫,也可以通過add選擇表達式模板。

下面,我們看幾個表達式的案例:

{web1:system.cpu.load[all,avg1].last(0)}>5 #0為最新數據 如果web1主機最新的CPU平均負載值大于5,則觸發器狀態Problem {vfs.fs.size[/,free].max(5m)}<10G #5m為最近5分鐘 根分區,最近5分鐘的最大容量小于10G,則狀態進入Problem {vfs.file.cksum[/etc/passwd].diff(0)}>0 #0為最新數據 最新一次校驗/etc/passwd如果與上一次有變化,則狀態進入Problem 大多數函數使用秒作為參數,可以使用#來表示其他含義(具體參考表-1)。 avg, count, last, min and max 等函數支持額外的第二個參數time_shift(時間偏移量)可以對過去進行,這個參數允許從過去一段時間內引用數據。

6.設置郵件

1)創建Media(設置發件人信息)

通過Administration(管理)-->Media Type(報警媒體類型)-->選擇Email(郵件)

設置郵件服務器信息,設置郵件服務器及發件人郵件賬戶信息,如圖-8所示。

2)為用戶添加Media(設置收件人信息)

在Administration(管理)-->Users(用戶)中找到選擇admin賬戶

點擊Admin賬戶后,在彈出的界面中選擇Media(報警媒介)菜單-->點擊Add(添加)報警媒介,

點擊Add(添加)后,在Meida Type(類型)中填寫報警類型,收件人,時間等信息

7.創建Action動作

1)Action動作

Action(動作)是定義當觸發器被觸發時的時候,執行什么行為。

通過Configuration(配置)-->Actions(動作)-->Create action(創建動作),注意事件源選擇觸發器

2)配置Action動作的觸發條件

填寫Action動作的名稱,配置什么觸發器被觸發時會執行本Action動作(賬戶數量大于35)

3)配置Action動作的具體行為

配置動作的具體操作行為(發送信息或執行遠程命令),無限次數發送郵件,60秒1次,發送給Admin用戶

?

0就是永不停止

4)測試效果

在被監控主機創建賬戶(讓賬戶數量大于35),然后登錄監控端Web頁面,在儀表盤中查看問題報警(需要等待一段時間)

[root@web1 ~]# useradd user1 ??#創建若干測試用戶

查看報警郵件,需要在監控服務器上面有發郵件軟件postfix和收取郵件的軟件mailx,啟動postfix后,可以在監控服務器上使用mail命令查收報警郵件,如圖-17所示。

[root@zabbixserver ~]# yum -y install postfix ?mailx ??#安裝軟件

[root@zabbixserver ~]# systemctl start ?postfix ???#啟動服務

[root@zabbixserver ~]# systemctl enable ?postfix ???#設置開機自啟動

[root@zabbixserver ~]# mail ???????????????????????#收取郵件 ??

8.自動發現規則

1)創建自動發現規則

通過Configuration(配置)-->Discovery(自動發現)-->Create discovery rule(創建發現規則),

2)填寫規則

填寫自動發現的IP范圍(逗號隔開可以寫多個),多久做一次自動發現(默認為1小時,僅實驗修改為1m),如圖-19所示。配置檢查的方式:Ping、HTTP、FTP、Agent的自定義key等檢查

9.創建動作

1)創建Action動作

通過Configuration(配置)--> Actions(動作)--> Actions Event source(事件源):自動發現(Discovery)-->Create action(創建動作)

2)配置Action動作具體行為

配置動作,添加動作名稱,添加觸發動作的條件

點擊操作(觸發動作后要執行的操作指令),操作細節:添加主機到組,與模板鏈接(HTTP模板)

10.添加新的虛擬機

1)創建新的虛擬機

創建一臺新的主機,驗證zabbix是否可以自動發現該主機,可以重新部署一臺新的虛擬機(注意前面的課程,我們已經創建了虛擬機web2,并且已經安裝部署了Zabbix agent)。

2)驗證結果

登陸Zabbix服務器的Web頁面,查看主機列表,確認新添加的主機是否被自動加入監控主機列表。

五.Zabbix主動監控

默認zabbix采用的是被動監控,主動和被動都是對被監控端主機而言的!

被動監控:Server向Agent發起連接,索取監控數據。

主動監控:Agent向Server發起連接,Agent周期性地收集數據發送給Server。

區別:Server不用每次需要數據都連接Agent,Agent會自己收集數據并處理數據,Server僅需要保存數據即可

?

當監控主機達到一定量級后,Zabbix服務器會越來越慢,此時,可以考慮使用主動監控,釋放服務器的壓力。

另外,Zabbix也支持分布式監控,也是可以考慮的方案。

1.添加被監控主機

1)為被監控主機安裝部署zabbix agent

注意:前面的實驗如果我們已經在web2主機安裝部署了zabbix agent,如果已經完成,則如下操作可以忽略。

[root@web2 ~]# yum -y install gcc pcre-devel autoconf

[root@web2 ~]# tar -xf zabbix-3.4.4.tar.gz

[root@web2 ~]# cd zabbix-3.4.4/

[root@web2 ~]#./configure --enable-agent

[root@web2 ~]# make &&?make install

2)修改agent配置文件

將agent監控模式修改為主動模式。

[root@web2 ~]# vim /usr/local/etc/zabbix_agentd.conf#Server=127.0.0.1,192.168.2.5#93行,注釋該行,允許誰監控本機StartAgents=0 #118行,被動監控時啟動幾個Agent進程監聽10050端口#設置為0,則禁止被動監控,不啟動zabbix_agentd服務及端口ServerActive=192.168.2.5#134行,允許哪些主機監控本機(主動模式),一定要取消127.0.0.1Hostname=web2#145行,告訴監控服務器,是誰發的數據信息#一定要和zabbix服務器配置的監控主機名稱一致(后面設置)RefreshActiveChecks=120#183行,默認120秒檢測一次UnsafeUserParameters=1 #280行,允許自定義監控傳參Include=/usr/local/etc/zabbix_agentd.conf.d/#264行,自定義監控的位置

[root@web2 ~]# vim /usr/lib/systemd/system/zabbix_agentd.service

[Unit]Description=zabbix agentAfter=network.target remote-fs.target nss-lookup.target[Service]Type=forkingPIDFile=/tmp/zabbix_agentd.pidExecStart=/usr/local/sbin/zabbix_agentdExecStop=/bin/kill $MAINPID[Install]WantedBy=multi-user.target

[root@web2 ~]# systemctl restart zabbix_agentd????????????#重啟服務

[root@web2 ~]# ss -nutlp |grep ?zabbix_agentd ???????????#應該查看不到任何端口信息

2.創建主動監控的監控模板

1)克隆Zabbix自動的監控模板

為了方便,克隆系統自帶模板(在此基礎上修改更方便)。

通過Configuration(配置)-->Templates(模板)-->選擇Template OS Linux

-->全克隆,克隆該模板,新建一個新的模板

新模板名稱為:Template OS Linux Server Active。

2)修改模板中的監控項目的監控模式

將模板中的所有監控項目全部修改為主動監控模式,通過Configuration(配置)-->Templates(模板)-->選擇新克隆的模板,點擊后面的Items(監控項)-->點擊全選,選擇所有監控項目,點擊<批量更新>,將類型修改為:Zabbix Agent(Active主動模式)

3)禁用部分監控項目

批量修改監控項的監控模式后,并非所有監控項目都支持主動模式,批量修改后,會發現有幾個沒有修改主動模式成功,說明,這些監控項目不支持主動模式,關閉即可。

可以點擊類型排序,方便操作,點擊狀態即可關閉。

3.添加監控主機

1)手動添加監控主機(主動模式監控)

在Zabbix監控服務器,添加被監控的主機(主動模式),設置主機名稱:web2 (必須與被監控端的配置文件Hostname一致),將主機添加到Linux servers組,IP地址修改為0.0.0.0,端口設置為0,

為主機添加監控模板,選擇剛剛創建的模板(主動模式),添加鏈接模板到主機

2)驗證監控效果

查看數據圖表,通過Monitoring(監控中)-->Latest(最新數據)菜單,選擇需要查看的主機組、主機以及圖形,查看效果

六.拓撲圖與聚合圖形

1.創建拓撲圖

1)創建拓撲

繪制拓撲圖可以快速了解服務器架構,通過Monitoring(監控中)-->Maps(拓撲圖),選擇默認的Local network拓撲圖,編輯即可(也可以新建一個拓撲圖),如圖-33所示。

2)拓撲圖圖表說明

Icon(圖標),添加新的設備后可以點擊圖標修改屬性

Shape(形狀)

Link(連線),先使用Ctrl選擇兩個圖標,再選擇連線

完成后,點擊Update(更新)

創建完拓撲圖,

2.創建聚合圖形

1)創建聚合圖形

聚合圖形可以在一個頁面顯示多個數據圖表,方便了解多組數據。

通過Monitoring(監控中)-->Screens(聚合圖形)-->Create screen(創建聚合圖形)即可創建聚合圖形

修改聚合圖形參數如下:

Owner(所有者):使用默認的Admin用戶

Name(名稱):名稱設置為web2_host

Columns(列):列數設置為2列

Rows(行):行數設置為2行

2)為聚合圖形中添加監控圖形

選擇剛剛創建的聚合圖形(web2_host),點擊后面的構造函數(constructor),點擊Change(更改),設置每行每列需要顯示的數據圖表,

?

七.自定義監控案例

1.監控Nginx服務狀態

1)準備環境,部署nginx軟件 安裝nginx軟件,開啟status模塊

[root@web1 ~]# tar -xf nginx-1.12.2.tar.gz [root@web1 ~]# cd nginx-1.12.2 [root@web1 nginx-1.12.2]# yum -y install gcc pcre-devel openssl-devel [root@web1 nginx-1.12.2]# ./configure \ > --with-http_stub_status_module [root@web1 nginx-1.12.2]# make && make install [root@web1 ~]# vim /usr/local/nginx/conf/nginx.conf #參考前面的課程內容 location /status {stub_status on;} [root@web1 ~]# /usr/local/nginx/sbin/nginx #啟動服務 [root@web1 ~]# curl http://192.168.2.100/status Active connections: 1 server accepts handled requests 10 10 3 Reading: 0 Writing: 1 Waiting: 0

2)自定義監控key 編寫自定義監控腳本(僅供參考,未檢測完整狀態)

[root@web1 ~]# vim /usr/local/bin/nginx_status.sh #!/bin/bash case $1 in active)curl -s http://192.168.2.100/status |awk '/Active/{print $NF}';; waiting)curl -s http://192.168.2.100/status |awk '/Waiting/{print $NF}';; accepts)curl -s http://192.168.2.100/status |awk 'NR==3{print $2}';; esac [root@web1 ~]# chmod +x /usr/local/bin/nginx_status.sh

2.創建自定義key

語法格式: UserParameter=key,command UserParameter=key[*],<command> $1

key里的所有參數,都會傳遞給后面命令的位置變量

注意:被監控端修改配置文件,注意要允許自定義key并設置Include!

[root@web1 ~]# vim /usr/local/etc/zabbix_agentd.conf.d/nginx.status UserParameter=nginx.status[*],/usr/local/bin/nginx_status.sh $1 (便量傳倉能不能用,取決主配置文件UnsafeUserParameters=1) [root@web1 ~]# systemctl restart zabbix_agentd????????????#重啟服務 測試效果: [root@web1 ~]# zabbix_get -s 127.0.0.1 -k 'nginx.status[accepts]'

登陸Zabbix監控Web,創建監控項目item,點擊Configuration(配置)-->Hosts(主機),點擊主機后面的items(監控項),點擊Create item(創建監控項)。修改監控項參數如圖-37所示。

備注:Type(類型)后面的Zabbix agent中文是Zabbix 客戶端。 Key的中文是鍵值。

2.監控網絡連接狀態

1)模擬多人并發連接(如果沒有ab命令,則安裝httpd-tools軟件包)

[root@web1 ~]# ab -c 1000?-n 100000?http://192.168.2.100/

2)查看網絡連接狀態,仔細觀察、分析第二列的數據

[root@web1 ~]# ss -antup

#-a顯示所有

#-t顯示TCP連接狀態

#-u顯示UDP連接狀態

#-n以數字形式顯示端口號和IP地址

#-p顯示連接對應的進程名稱

3)創建自定義key

編寫自定義監控腳本(僅供參考,未檢測完整狀態)

[root@web1 ~]# vim /usr/local/bin/net_status.sh#!/bin/bashcase $1 inestab)ss -antp |awk 'BEGIN{x=0} /^ESTAB/{x++} END{print x}';;close_wait)ss -antp |awk 'BEGIN{x=0} /^CLOSE-WAIT/{x++} END{print x}';;time_wait)ss -antp |awk 'BEGIN{x=0} /^TIME-WAIT/{x++} END{print x}';;esac

[root@web1 ~]# chmod +x ?/usr/local/bin/net_status.sh

注意:被監控端修改配置文件,注意要允許自定義key并設置Include參數。

如果沒有killall命令,則需要安裝psmisc軟件包。

[root@web1 ~]# vim /usr/local/etc/zabbix_agentd.conf.d/net.statusUserParameter=net.status[*],/usr/local/bin/net_status.sh $1

[root@web1 ~]# systemctl restart zabbix_agentd????????????#重啟服務

4)測試效果:

[root@web1 ~]# zabbix_get ?-s 127.0.0.1?-k 'net.status[time_wait]'

5) 監控netstatus

在監控服務器,添加監控項目item,Configuration(配置)-->Hosts(主機)點擊主機后面的items(監控項)

點擊Create item(創建監控項)

本文為完整的zabbix安裝及監控配置,僅供學習,為經本人允許禁止轉載

《新程序員》:云原生和全面數字化實踐50位技術專家共同創作,文字、視頻、音頻交互閱讀

總結

以上是生活随笔為你收集整理的zabbix安装使用及监控案例(从头到尾)的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

www久久九 | 国产美女免费观看 | 免费a级观看 | 伊人超碰在线 | 中文字幕 91 | 伊人天堂av | 激情六月婷婷久久 | 亚洲精品在线电影 | 四虎成人精品永久免费av | 日韩av不卡在线观看 | 日韩免费在线观看网站 | 天海翼一区二区三区免费 | 亚洲国产成人久久综合 | 人人爽人人看 | 美女网站一区 | 日韩有色 | 日本视频精品 | 日韩精品第一区 | 日韩视频一区二区三区 | 亚洲激情国产精品 | 久久涩视频 | 天天射天天干 | 久久看毛片 | 国产69精品久久99的直播节目 | 人人揉人人揉人人揉人人揉97 | 日韩欧美一级二级 | 激情视频一区二区三区 | 在线日韩精品视频 | 国产精品精品国产 | 成人av视屏 | 视频一区亚洲 | 黄色毛片一级 | 亚洲精品99久久久久久 | 久久久久国产精品免费免费搜索 | 久久久噜噜噜久久久 | 手机av电影在线 | 香蕉视频免费在线播放 | 亚洲最新视频在线播放 | 成人在线视频网 | 亚洲一级黄色av | 五月婷丁香| 日韩免费观看一区二区 | 麻豆成人在线观看 | 国产精品国产亚洲精品看不卡15 | 国产午夜三级一区二区三桃花影视 | 久久蜜臀av | 99久热在线精品视频 | 亚洲天堂网在线播放 | 97操碰| www..com黄色片| av一级片在线观看 | 欧美久久久一区二区三区 | 久久伦理视频 | 日韩精品免费一区二区三区 | 人人澡人人舔 | 成人精品国产 | 欧美污在线观看 | 欧美少妇18p | 国内精品久久久久久久久久清纯 | 久久久久久久久久久综合 | 亚洲欧洲成人 | 亚洲成av片人久久久 | 日本韩国欧美在线观看 | 人人超碰人人 | 久久精品国产亚洲精品 | 2020天天干夜夜爽 | 激情综合网五月 | 国产精品入口a级 | 久久精品直播 | 国产成人在线观看免费 | 亚洲精品一区二区18漫画 | 99精品国产高清在线观看 | 亚洲精品在线观看不卡 | 婷婷视频导航 | 久久综合五月婷婷 | 久久精品国产亚洲 | 天天操天天综合网 | 国产免费区| 狠狠88综合久久久久综合网 | 久久精品女人毛片国产 | 日韩精品不卡 | 久久久国产电影 | 天天综合网~永久入口 | 亚洲国产成人av网 | 精品一区二区精品 | 日韩在线观看中文字幕 | www.com黄| 久久精品国产成人精品 | 欧美一级xxxx | 日韩在线中文字幕视频 | 午夜久操 | 成人精品电影 | 成人久久18免费网站麻豆 | 久久麻豆视频 | 看国产黄色片 | 狠狠躁日日躁狂躁夜夜躁av | 久草免费在线视频观看 | 亚洲日韩中文字幕 | 国产精品一区二区免费看 | 久久免费视频在线观看30 | 91超碰免费在线 | 国产第一福利 | 日日日爽爽爽 | 欧美激情第八页 | 亚洲一区黄色 | 99精品视频在线播放观看 | 在线电影a | 91精品办公室少妇高潮对白 | 欧美一区视频 | www.狠狠干| 综合亚洲视频 | 日韩精品短视频 | 六月婷操 | 天天做天天爱夜夜爽 | 日韩免费看片 | 亚洲va男人天堂 | 天天操夜夜操天天射 | 婷色| 在线91精品 | 久久这里只精品 | 337p日本欧洲亚洲大胆裸体艺术 | 99草在线视频| 一本一本久久a久久精品牛牛影视 | 日韩91精品 | 久久免费的视频 | 伊人黄| 久久av网址 | 午夜123| 免费在线观看视频一区 | 人人添人人澡人人澡人人人爽 | 欧美日韩亚洲第一 | 91九色蝌蚪国产 | 天天射天天操天天干 | 久久这里只有精品视频首页 | 最新99热| 亚洲国产精品久久久久久 | 日韩精品免费在线 | 日韩免费看的电影 | 丁香婷婷基地 | 天天干夜夜干 | 国产精品电影一区二区 | 国产成人精品亚洲 | 久草在线久草在线2 | 精品国产一区二区三区不卡 | 中文字幕在线观看免费高清电影 | 欧美日韩视频观看 | 国产视频在线播放 | 夜色在线资源 | 能在线观看的日韩av | a一片一级 | 亚洲精品在线视频观看 | 国产精品12345 | 欧美乱熟臀69xxxxxx | 久久五月天婷婷 | 亚洲人成在线观看 | 免费观看视频的网站 | 在线看不卡av | 欧美日本日韩aⅴ在线视频 插插插色综合 | 国产精品第二十页 | 久久99欧美 | 免费av看片 | 国产精品福利小视频 | 观看免费av | 中文字幕在线观看第一区 | 久久国产精品网站 | av福利在线看 | 四季av综合网站 | 麻豆视频在线观看 | 四虎永久国产精品 | 国产一区二区高清视频 | 天天爽天天碰狠狠添 | 欧美午夜视频在线 | 国产亚洲婷婷免费 | 久久久久久不卡 | 性色av免费在线观看 | 麻豆视频免费在线 | 日日夜夜爱 | 亚洲人在线视频 | 在线观看岛国 | 中文字幕在线观看免费高清电影 | 日韩二级毛片 | 999视频在线播放 | 精品国产日本 | 五月天天色 | 久久久久久中文字幕 | 欧美 日韩 久久 | 国产精品一区二区久久精品爱微奶 | 亚洲国产精品小视频 | 国产精品久久久久久久久久三级 | 九九热在线免费观看 | 日产乱码一二三区别在线 | 国产精品国产自产拍高清av | 成人国产亚洲 | 国产v在线观看 | 免费视频一二三 | 91福利专区| 国产美腿白丝袜足在线av | 97超碰人人澡| 久久乐九色婷婷综合色狠狠182 | 亚洲va欧美va | 国产精国产精品 | 91九色porny在线| 在线你懂 | 999久久久久久久久 69av视频在线观看 | 啪啪免费视频网站 | 国产亚洲精品精品精品 | 欧美另类xxx | 99精品福利| 日日干夜夜干 | 中文永久字幕 | 色成人亚洲网 | 国产韩国精品一区二区三区 | 日韩网站一区二区 | 在线电影 一区 | 中文字幕影片免费在线观看 | 1000部18岁以下禁看视频 | 久久久国产精品一区二区中文 | 亚洲高清不卡av | 国内精品久久久久影院日本资源 | 人人干在线 | 一区中文字幕 | 中文字幕亚洲欧美日韩2019 | 国产精品久久久久久久av电影 | 日日久视频 | 免费看的国产视频网站 | 国内精品久久久久 | 国产黄色av网站 | www.com操| 99久久精品午夜一区二区小说 | 午夜精选视频 | 精品国产一区二区三区日日嗨 | 福利网在线 | 九九九九九九精品 | 天天操夜操视频 | 欧美乱大交 | 91精品视频导航 | 国产精品久久久久久久久久久免费 | 91视频电影 | 国产免费作爱视频 | 日韩av电影网站在线观看 | 免费看在线看www777 | 亚洲乱码在线观看 | 久久69精品久久久久久久电影好 | 成人在线免费小视频 | 手机成人在线 | 91精品国产综合久久福利不卡 | 五月婷综合 | 在线观看国产中文字幕 | 精品国产一区二区三区久久久蜜臀 | 国产日产欧美在线观看 | 人人爱爱人人 | 人人爽人人爽人人爽 | 免费韩国av | 亚洲成aⅴ人在线观看 | 999免费视频 | av免费观看在线 | 欧美日韩一区久久 | 精品国产一区二区三区久久影院 | 视频二区 | 久久久久久黄 | 婷婷5月激情5月 | 精品av网站 | 久久久久久久国产精品 | 欧美福利在线播放 | 国产精品色婷婷视频 | 日本h在线播放 | 一区二区三区日韩视频在线观看 | 91精品国自产在线偷拍蜜桃 | 亚洲精品视频免费 | 黄色中文字幕 | 日韩精品一区二区免费 | 96精品高清视频在线观看软件特色 | 久久久久免费精品国产 | 中国精品一区二区 | 狠狠做六月爱婷婷综合aⅴ 日本高清免费中文字幕 | 婷婷六月天丁香 | 国产999精品久久久 免费a网站 | 亚洲蜜桃av| 欧美日韩中文国产一区发布 | 91自拍成人 | 国产精品久久久久久超碰 | 一区二区三区在线视频111 | 中文字幕永久在线 | 亚洲伦理电影在线 | 开心色激情网 | 亚洲国产精品激情在线观看 | 色av男人的天堂免费在线 | 黄色三级久久 | 麻豆传媒视频观看 | 午夜影院一级片 | 五月天综合在线 | 亚洲欧美日本国产 | 精品在线观看视频 | 亚洲精品国产精品国自产观看浪潮 | 欧美-第1页-屁屁影院 | 免费在线观看国产黄 | www.久久久精品 | 日韩av电影免费在线观看 | 最新色视频 | 亚洲视频精选 | 六月丁香激情综合色啪小说 | 国产亚洲一区二区在线观看 | 精品久久久久久亚洲综合网 | 色av男人的天堂免费在线 | 在线观看色网站 | 91视频一8mav| 国产精品国产三级国产aⅴ无密码 | 亚洲免费激情 | 精品 激情 | 伊人成人精品 | 国产做aⅴ在线视频播放 | 一区三区视频 | 正在播放一区 | 中文字幕av在线电影 | 久草在线免费电影 | 亚洲成色777777在线观看影院 | 丰满少妇在线观看网站 | 国产黄色一级片 | 欧美日韩性 | 欧洲精品在线视频 | 国产精品美女www爽爽爽视频 | 国产一区二区免费看 | 91色影院 | 久久一区精品 | 欧美色伊人 | 免费看片成人 | 亚洲影音先锋 | 精品亚洲免费视频 | 91九色精品 | 国产高清久久久 | 欧美午夜寂寞影院 | 97精品久久| 久久在线视频在线 | 亚洲视频播放 | 国产精品久久久久久一区二区三区 | av中文字幕网址 | 九九视频在线 | 九九九九色| 日韩二区精品 | 国产福利午夜 | 999电影免费在线观看2020 | 99久e精品热线免费 99国产精品久久久久久久久久 | 成 人 黄 色 免费播放 | 日韩欧美一区视频 | 黄p在线播放 | 国产97在线视频 | www欧美日韩| 久久躁日日躁aaaaxxxx | 国产一区av在线 | 久久一区二区三区日韩 | 久久任你操 | 亚洲精品视频在线观看网站 | 伊人影院得得 | 欧美aaa视频| 午夜婷婷在线播放 | 热99久久精品| 欧美人体xx| 日本久久高清视频 | 一区二区三区www | 亚洲国产日韩在线 | 97在线看 | 久久av网址| av丝袜制服 | 成人av在线看 | 91视频91蝌蚪 | 精品不卡av | www久久久久 | 99精品在线直播 | 黄色三级在线 | 人人超在线公开视频 | 日本91在线 | 国产破处视频在线播放 | 黄色软件网站在线观看 | 伊人亚洲综合 | 美女福利视频一区二区 | 黄色a大片 | 成人h在线观看 | 激情网在线视频 | 国产精品欧美久久久久无广告 | 麻豆视频国产在线观看 | 又爽又黄又刺激的视频 | 麻豆久久 | 在线观看91精品视频 | 国产女人18毛片水真多18精品 | 日韩久久午夜一级啪啪 | 五月婷婷欧美视频 | 91热精品 | 99热精品久久 | 91麻豆免费看 | 亚洲视频久久久 | 麻豆91精品视频 | av不卡免费看 | 日本最新高清不卡中文字幕 | 免费中午字幕无吗 | 精品亚洲视频在线 | 中文字幕影视 | 亚洲综合最新在线 | 天天操夜夜拍 | 一区二区av | 国产成人福利在线 | 国产视频2021 | 91探花系列在线播放 | 91九色最新地址 | 国产精品久久久久久久久久直播 | 久久免费视频2 | 欧美性色网站 | 午夜精品一区二区三区在线播放 | 手机av电影在线 | 久久精品中文字幕一区二区三区 | 久草97| 日韩欧美在线观看一区二区 | 亚洲欧美日本A∨在线观看 青青河边草观看完整版高清 | 中文字幕av在线电影 | 99视频在线免费 | 成人宗合网 | 亚洲天堂自拍视频 | 日日干天天射 | 久久观看最新视频 | 一级做a爱片性色毛片www | 天天射天天色天天干 | 精品专区| 婷婷色中文字幕 | 亚洲国产一区二区精品专区 | 午夜视频在线观看一区二区三区 | 久久久精品国产一区二区电影四季 | 激情五月色播五月 | 91福利国产在线观看 | 国产精品久久久久久久久久三级 | 91大神精品视频在线观看 | 在线电影a | 91麻豆精品国产91久久久更新时间 | 午夜精品福利在线 | 国产在线观看91 | 99久久99热这里只有精品 | av高清免费 | 日韩欧美一区二区在线观看 | 午夜影院先 | 国产又粗又猛又黄又爽视频 | 夜夜狠狠 | 国产四虎在线 | 狠狠色丁香久久婷婷综合丁香 | 国产黄色精品视频 | 久久久久国产成人免费精品免费 | 在线成人av | 亚洲国产精品影院 | 国产九九九精品视频 | 国内精品久久久久久久久久久久 | 激情综合五月天 | 波多野结衣一区二区三区中文字幕 | 91经典在线 | 在线观看一区视频 | 欧洲亚洲激情 | 五月婷社区 | 色综合天天综合网国产成人网 | 亚洲精品中文字幕在线 | 亚洲一区网站 | 国产成人久久久77777 | 超碰97中文 | 久久私人影院 | 国产精品自产拍在线观看中文 | 久久99久久久久 | www.色午夜.com | 亚洲日本va午夜在线电影 | 在线免费视频你懂的 | 日本午夜免费福利视频 | 久久精品视频18 | 麻豆视频国产在线观看 | 国产精品高清av | 九七视频在线观看 | 国产福利小视频在线 | 69av视频在线观看 | 天天综合网久久 | 久草在线这里只有精品 | 成年人免费在线观看 | 国产精品你懂的在线观看 | 蜜桃av人人夜夜澡人人爽 | 又黄又爽的视频在线观看网站 | 日日操狠狠干 | 尤物一区二区三区 | 亚洲欧美色婷婷 | 超碰免费公开 | 欧美久久久久久久 | 综合久久一本 | 国产中的精品av小宝探花 | 婷婷在线综合 | 国产精品美女www爽爽爽视频 | 日本精品一区二区三区在线观看 | 亚洲午夜激情网 | 国产精品久久久久一区 | 99久久久久久久久 | 国产精品系列在线播放 | 狠狠躁夜夜躁人人爽超碰97香蕉 | 久久久一本精品99久久精品66 | 日韩av电影免费在线观看 | 亚洲午夜久久久影院 | 亚洲精品国产自产拍在线观看 | 婷婷综合av | www.黄色小说.com | 9草在线| 激情小说 五月 | 伊人午夜视频 | 在线免费观看的av网站 | 日韩av影视在线观看 | 91成人天堂久久成人 | 国产高清在线视频 | 在线精品视频免费播放 | 久久久国产精品麻豆 | 色先锋av资源中文字幕 | 91麻豆国产 | 亚洲天堂激情 | 亚洲国产精久久久久久久 | 日韩av一区二区在线 | 国产高清视频在线观看 | 欧美极品少妇xxxxⅹ欧美极品少妇xxxx亚洲精品 | 91激情在线视频 | 国产男女无遮挡猛进猛出在线观看 | 黄色片网站大全 | 欧洲精品久久久久毛片完整版 | 最近中文字幕高清字幕在线视频 | 亚洲片在线 | 黄色在线观看污 | 99久久精品国产一区二区成人 | 中文字幕在线观看视频网站 | 丝袜美女在线 | 婷婷色在线| 国产无遮挡又黄又爽馒头漫画 | 麻豆传媒电影在线观看 | 国产精品毛片久久久久久久久久99999999 | 99久久精品免费一区 | 中文字幕在线播放一区二区 | www黄色软件 | 99欧美精品 | 日韩理论电影网 | 国产永久免费观看 | 午夜av在线播放 | 日韩,精品电影 | 久久久久亚洲国产 | 91亚洲免费| 欧美精品一区二区三区四区在线 | 久久视屏网 | 337p欧美| 亚洲乱码久久 | 深爱激情久久 | 日韩在线视| 国产精品欧美日韩在线观看 | 亚洲v精品 | 久久久久久国产精品 | 麻豆94tv免费版 | 99国产成+人+综合+亚洲 欧美 | 91漂亮少妇露脸在线播放 | 亚洲精品在线观看免费 | 欧美精品一区二区蜜臀亚洲 | 国产免费大片 | 色www免费视频 | 色婷婷久久久 | 成人免费视频网 | 免费久久精品视频 | 99re8这里有精品热视频免费 | 久久免费视频6 | 99久久久久久久久久 | 成人午夜黄色 | 2017狠狠干| 天天拍天天草 | 亚洲一区视频在线播放 | 中文字幕a∨在线乱码免费看 | 日韩在线中文字幕 | 日本性生活一级片 | 精品久久久久久综合 | 亚洲黄色av | 香蕉视频免费在线播放 | 91社区国产高清 | 超碰电影在线观看 | 天天射天天干天天爽 | 在线观看av国产 | 九九久 | 91天堂影院| 亚洲欧美国产精品 | 久久精品一区二区三区视频 | 九九热国产视频 | 一区二区不卡视频在线观看 | 福利视频午夜 | 日本女人的性生活视频 | 日产乱码一二三区别在线 | 插婷婷| 91精品国产综合久久婷婷香蕉 | 99九九视频 | 色中文字幕在线观看 | 不卡电影免费在线播放一区 | 天天综合操 | 亚洲专区欧美 | 亚洲黄色免费在线看 | 亚洲欧美日本一区二区三区 | 国产不卡在线看 | 日韩中文在线观看 | 欧女人精69xxxxxx | 高清免费在线视频 | 黄色小说免费观看 | 青春草视频在线播放 | 又色又爽又黄高潮的免费视频 | 精品伊人久久久 | 欧美美女一级片 | 欧美日韩亚洲在线观看 | 久久麻豆精品 | 国产精品免费不 | 五月天中文字幕mv在线 | 国产美女视频免费观看的网站 | www亚洲一区 | 香蕉视频国产在线 | 免费成视频 | 久久久久久久久久久影视 | 96超碰在线| 一级片黄色片网站 | 狠狠狠狠狠狠狠干 | 久热电影 | 天天干天天操av | 久久久久久久免费看 | 欧美日韩免费在线观看视频 | 欧美a级在线播放 | 亚洲理论在线观看电影 | 中文一区二区三区在线观看 | 在线观看岛国av | 国产一区二区综合 | 在线亚洲天堂网 | 亚洲精品系列 | 99久久精 | 大胆欧美gogo免费视频一二区 | 精品久久久久久电影 | 91日韩免费 | 国产精品一区二区无线 | 粉嫩av一区二区三区四区在线观看 | 有码一区二区三区 | 国产中文字幕av | 激情五月婷婷激情 | 午夜精品视频一区二区三区在线看 | 天天操天天干天天插 | 亚洲欧美成人在线 | 天天综合视频在线观看 | 婷婷丁香导航 | wwwwwww黄| 婷婷深爱 | 99在线热播精品免费99热 | 久久久香蕉视频 | 一区二区三区四区在线免费观看 | 狠狠操狠狠干2017 | 欧美整片sss| 国产精品久久9 | 中文字幕精品一区久久久久 | 亚洲网站在线 | 日b黄色片 | 人人射av | 日韩网站在线免费观看 | 久久女教师 | 久久欧美视频 | 国产精品一区二区av麻豆 | 国产麻豆剧传媒免费观看 | 黄色一集片 | 国产乱对白刺激视频不卡 | 不卡中文字幕在线 | 日韩欧美国产免费播放 | 日韩影视在线观看 | 美女性爽视频国产免费app | 久久一区精品 | 国产高清av| 欧美精品黑人性xxxx | 国产韩国日本高清视频 | 手机成人在线 | 91天堂在线观看 | 99久久久久久久久久 | 深爱激情开心 | 黄色在线免费观看网址 | 狠狠干狠狠艹 | 久久久久久中文字幕 | 国产在线精品一区二区 | 国产偷国产偷亚洲清高 | 色婷婷狠狠五月综合天色拍 | 午夜视频黄 | 字幕网在线观看 | 丝袜网站在线观看 | 中文字幕乱码在线播放 | 亚洲热视频 | 91九色porny蝌蚪视频 | 亚洲女人天堂成人av在线 | 99精品视频网| 美女很黄免费网站 | 超碰97人人在线 | 伊人官网 | 高清有码中文字幕 | 国产资源中文字幕 | 超碰在线天天 | 国产黄色电影 | 久久久精品在线观看 | 欧美日韩一区二区三区视频 | 69久久久| 国产一区二区手机在线观看 | 国产麻豆精品95视频 | 91色在线观看视频 | 婷婷色站 | 在线成人一区 | 国产va精品免费观看 | 婷婷综合激情 | 免费福利视频网站 | 亚洲精品电影在线 | 欧美中文字幕久久 | 成人av中文字幕 | 色综合久久综合中文综合网 | 一级a毛片高清视频 | 日韩电影一区二区三区 | 日韩高清在线不卡 | 欧美另类性 | 成人国产电影在线观看 | 综合国产在线 | 欧美性春潮 | 日韩av电影网站在线观看 | 九九久久影视 | 久久综合色婷婷 | 日b视频在线观看网址 | 亚洲欧美在线综合 | 国产99久久99热这里精品5 | 在线看不卡av | 日韩午夜在线观看 | 日本在线成人 | 日韩在线视频不卡 | 国产精品18久久久久久久 | 一区在线观看 | 色久综合| 天天操天天操天天操天天操天天操天天操 | 国产一区二区在线免费观看 | 超碰97久久 | 国产精品岛国久久久久久久久红粉 | av一级网站 | 亚洲毛片在线观看. | 久久综合色婷婷 | a级国产乱理伦片在线观看 亚洲3级 | 国产精品久久久久影视 | 国产一区二区久久久 | 欧美精选一区二区三区 | 亚洲 成人 一区 | 性色xxxxhd| 日韩免费视频一区二区 | 国产中文字幕91 | 国产手机精品视频 | 91av免费观看 | 五月天天在线 | 国产成人精品久久亚洲高清不卡 | 亚洲精品在线免费 | 欧美精彩视频 | 国产精品破处视频 | 亚洲精品无 | 中文字幕不卡在线88 | 国产男女无遮挡猛进猛出在线观看 | 国产69久久精品成人看 | 色综合天天色 | 在线视频免费观看 | 人人艹视频 | 国产精品九九九 | 国产在线播放一区 | 在线国产一区 | 天天射夜夜爽 | 中国一级片在线播放 | 婷婷丁香在线视频 | 久久久久区 | 欧美va天堂在线电影 | 国产精品二区三区 | 四虎成人精品 | 成年人在线观看网站 | 精品女同一区二区三区在线观看 | 午夜av一区二区三区 | 操一草 | 在线观看中文字幕第一页 | 91麻豆精品国产91久久久使用方法 | 色狠狠干 | 亚洲电影一区二区 | 亚洲精品美女久久久久网站 | 国产一卡久久电影永久 | 人人爱爱| 免费开视频| 免费特级黄色片 | 久久久综合色 | 日韩色一区二区三区 | 免费看国产a | 亚洲精品国产综合久久 | 国产97色在线 | 九九久久影院 | 久久久婷 | 欧美一级小视频 | 在线看日韩av | 丁香婷婷色综合亚洲电影 | 99久久精品免费看国产四区 | 福利视频入口 | 国产精品嫩草69影院 | 国产男女爽爽爽免费视频 | 婷婷久久五月天 | 国产精品av免费 | 日一日操一操 | 国产精品美乳一区二区免费 | 成人18视频 | 五月天久久婷 | 91热视频在线观看 | 青青久草在线 | 天天射天天射天天射 | 国产 字幕 制服 中文 在线 | 最新99热 | 免费色网站 | 国产精品二区在线 | 久久久久久久99精品免费观看 | 男女日麻批 | 韩国一区二区三区在线观看 | 美女免费视频一区二区 | www.一区二区三区 | 国内精品久久影院 | 色噜噜日韩精品欧美一区二区 | 欧美极品少妇xbxb性爽爽视频 | 国产精品久久二区 | 中文字幕999 | 2021国产视频 | 亚洲精品日韩一区二区电影 | 国产亚洲精品电影 | 男女激情麻豆 | 久久精品爱视频 | 欧美一二三视频 | 国产精品18久久久久久久久久久久 | 成人免费视频网站在线观看 | 中文字幕免费一区二区 | 开心色婷婷 | 精品国产一区二区三区四 | 色欧美视频 | 成年人在线观看免费视频 | 91亚洲狠狠婷婷综合久久久 | 久久久久女人精品毛片 | 中文字幕乱视频 | 夜夜躁日日躁狠狠久久av | 国产不卡av在线播放 | av丝袜天堂 | 国产专区视频 | 国产精品普通话 | 五月天狠狠操 | 97av视频在线 | 国产精品99精品久久免费 | 日韩视频在线观看视频 | 99视频精品免费观看, | av高清影院 | 色视频在线 | 欧美日韩高清一区二区三区 | 九九久 | 97在线观看免费高清完整版在线观看 | 精品国产伦一区二区三区观看方式 | a级片网站| 婷婷丁香av | 国产视频在线观看一区二区 | 在线观看黄色免费视频 | 91精品国产综合久久婷婷香蕉 | 黄色网中文字幕 | 九九欧美| 欧美天天干 | 91av播放 | 国产资源精品在线观看 | 久久久www成人免费毛片麻豆 | 久久久首页 | 超级碰碰碰碰 | 亚洲涩涩一区 | 久久久999免费视频 日韩网站在线 | 黄色毛片一级片 | 久久久久久久久久久久久久电影 | 国产精品系列在线 | 最近免费观看的电影完整版 | 91看成人 | 五月天激情婷婷 | 国产91在线 | 美洲 | 国产午夜精品久久久久久久久久 | 久久免费的视频 | 日韩免费看片 | 色香天天| 99久久一区 | 欧美资源在线观看 | 国产一区在线免费 | 国产成人亚洲在线观看 | 日韩免费专区 | 黄色大片入口 | 99精品久久久久 | 精品亚洲网 | 一区二区精品视频 | 99爱在线 | 亚洲人成在 | 欧美婷婷色 | 人人干人人上 | 成年人免费电影 | 久久er99热精品一区二区 | 在线观看视频你懂得 | 麻豆视频免费入口 | 国产 在线 高清 精品 | 亚洲精品免费在线 | 日韩在线中文字幕 | 亚洲精品美女久久久久网站 | 国产黄色在线 | 成年人电影免费在线观看 | 欧美做受69 | 久久免费毛片视频 | 久久一区91 | 97热在线观看 | 国产黄色免费 | 国产视频在线免费 | 黄网站色成年免费观看 | 精品久久影院 | 在线视频观看成人 | www.夜夜干.com| 国产精品视频久久 | 免费在线视频一区二区 | 日韩欧美国产激情在线播放 | www.人人草 | 一区二区三区中文字幕在线 | 国产成人久 | 超碰免费av | 国产一区二区在线观看视频 | 一区三区视频 | 网站在线观看日韩 | 国产精品区一区 | 少妇bbr搡bbb搡bbb | 日韩大片在线观看 | 国产一级特黄电影 | 中文字幕文字幕一区二区 | 999久久久久久久久6666 | 国产高清视频在线免费观看 | 亚洲激情 欧美激情 | 国产黄色一级大片 | 亚洲国产午夜视频 | 一区二区三区四区五区六区 | av解说在线| 色噜噜狠狠狠狠色综合 | 在线免费观看的av | 午夜精品视频一区 | 毛片久久久 | 深夜福利视频在线观看 | 久草资源免费 | 国产免费高清 | 免费成人结看片 | 国产一区二区不卡视频 | 少妇bbbb | 免费观看视频的网站 | 欧美精品资源 | 国产一级片视频 | 精品久久久久久综合日本 | 99在线免费观看视频 | 久久精品电影 | 亚洲精品免费观看 | 久久久久综合网 | 亚洲黄色小说网址 | 天天操天天操天天操天天操天天操 | 黄色小网站在线观看 | 九月婷婷色 | 天堂av在线7 | 在线看91| 丁香九月激情综合 | 久久伊人精品天天 | 日韩免费一区二区三区 | 韩国av免费看 | 久久久久亚洲国产精品 | 一区二区精品在线 | 91丨精品丨蝌蚪丨白丝jk | 亚洲色图27p | 五月婷婷六月丁香激情 | 黄色影院在线免费观看 | 国产在线超碰 | 日韩视频二区 | 六月丁香激情网 | 成年人看片 | 美女久久久久久久久久久 | 黄p在线播放| 91欧美视频网站 | 久久不见久久见免费影院 | 五月开心婷婷网 | 五月婷婷伊人网 | 欧美激情亚洲综合 | 免费视频一二三 | 亚洲高清色综合 | 99久久精品久久久久久清纯 | 国产美女视频 | 免费看wwwwwwwwwww的视频 久久久久久99精品 91中文字幕视频 | 免费观看一级视频 | 特黄色大片| 久久国产精品99久久久久久进口 | 91视频久久久久久 | 国产精品久久久亚洲 | 国产精品久久久久久婷婷天堂 | 国产中文在线字幕 | 国产精品麻豆视频 | 91麻豆精品国产自产在线 | 婷香五月| 国产成人精品一区二区三区在线观看 | 日韩乱码中文字幕 | 色婷婷六月天 | 天天操综合网 | 日韩欧美有码在线 | 特黄特色特刺激视频免费播放 | 伊人色综合久久天天 | 精品国产免费人成在线观看 | 国产视频网站在线观看 | 亚洲九九九在线观看 | 欧美一区免费观看 |