日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 运维知识 > linux >内容正文

linux

Linux运维之认识与分析日志文件(rsyslog服务),时间同步服务(chronyd服务)及时间管理命令(timedatectl)

發布時間:2023/12/14 linux 43 豆豆
生活随笔 收集整理的這篇文章主要介紹了 Linux运维之认识与分析日志文件(rsyslog服务),时间同步服务(chronyd服务)及时间管理命令(timedatectl) 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

一、實驗環境(rhel7.0版本)

主機環境:rhel7.0

各主機信息

主機名IP
server172.25.254.1
client172.25.254.2

?

二、日志文件介紹

?

1、Linux? 常見的日志文件文件名

?

日志文件可以幫助我們了解很多系統重要地事件,包括登錄者的部分信息,因此日志文件地權限通常設置為僅有 root 能夠讀取而已。

?

(1)/varlog/boot.log

開機啟動的時候系統內核會去檢測與啟動硬件,接下來開始啟動各種內核支持的功能等。這些流程都會記錄在? /var/log/boot.log? 里面。不過這個文件只會存儲本次開機啟動的信息,之前的啟動信息并不會被保留下來。

?

(2)/var/log/cron

你的? crontab? 任務有沒有實際被執行?執行過程有沒有發生錯誤?你的? /etc/crontab? 是否編寫正確?在這個日志文件內查詢看看。

?

(3)/var/log/dmesg

記錄系統在開機的時候內核檢測過程所產生的各項信息。由于? CentOS? 默認將開機啟動時內核的硬件檢測過程取消顯示,因此額外將數據記錄一份在這個文件中。

?

(4)/var/log/lastlog

可以記錄系統上面所有賬號最近一次登錄系統時的相關信息。lastlog? 命令就是利用這個文件的記錄信息來顯示的。

?

(5)/var/log/maillog

記錄郵件的往來信息,其實主要是記錄? postfix (SMTP 協議提供者)與 dovecot(POP3 協議提供者)所產生的信息。SMTP? 是發送郵件所使用的通訊協議,POP3 則是接收郵件使用的通訊協議。postfix? 與 dovecot? 則分別是兩個完成通訊協議的軟件,

?

(6)/var/log/messages

這個文件相當重要,幾乎系統發生的錯誤信息(或是重要的信息)都會記錄在這個文件中,如果系統發生莫名的錯誤時,這個文件是一定要查看的日志文件之一。

?

(7)/var/log/secure

基本上,只要牽涉到【需要輸入賬號密碼】的軟件,那么當登錄時(不管登錄正確或錯誤)都會被記錄在此文件中。包括系統的 login 程序、圖形用戶界面模式登錄所使用的? gdm、su、sudo? 等程序,還有網絡連接的? ssh、telnet? 等程序,登錄信息都會被記錄在這里。

?

(8)/var/log/wtmp

這兩個文件可以記錄正確登錄系統者的賬戶信息(wtmp),last? 命令就是來讀取? wtmp? 顯示的,這對于檢查一般賬號者的使用操作很有幫助。

?

(9)/var/log/httpd/*、/var/log/samba/*

不同的網絡服務會使用自己的日志文件來記錄它們自己產生的各項信息,上述的目錄則是個別服務所產生的日志文件。

?

2、日志文件所需相關服務(daemon)與程序

?

  • systemd-journald.service:最主要的信息記錄者,由? systemd? 提供
  • rsyslog.service:主要收集登錄系統與網絡等服務的信息
  • logrotate:主要在進行日志文件的輪循功能。

所謂的? logrotate? 基本上就是將舊的日志文件更改名稱,然后建立一個空的日志文件,如此一來,新的日志文件將重新開始記錄,然后只要將舊的日志文件留下一陣子,就可以達到將日志文件【輪循】的目的。此外,如果舊的記錄(大概要保存幾個月)保存了一段時間沒有問題,那么就可以讓系統自動地將它刪除,免得占用很對寶貴地硬盤空間。

?

3、Redhat 7.x? 使用? systemd? 提供的? journalctl? 日志管理

?

基本上,系統由? systemd? 所管理,那所有經由? systemd? 啟動的服務,如果再啟動或結束的過程中發生一些問題或是正常的信息,就會將該信息由 systemd-journald.service 以二進制的方式記錄下來,之后再將這個信息發送給 rsyslog.service? 作進一步的記錄。

?

4、日志文件內容的一般格式

?

系統產生的信息并記錄下來的內容中,每條信息均會記錄下面幾個重要內容:

  • 事件發生的日期與時間;
  • 發生此事件的主機名;
  • 啟動此事件的服務名稱(systemd、crond? 等)或命令與函數名稱(如? su、login...);
  • 該信息的實際內容。

?

另外,不知道你會不會覺得很奇怪?為什么日志文件就是登錄本機的數據,那怎么日志文件格式中,第二個字段項目是【主機名】?這是因為日志文件可以做成日志文件服務器,可以收集來自其他服務器的日志文件數據。所以,為了了解到該信息主要是來自于哪一臺主機,當然得要有第二個字段項目說明該信息來自哪一臺主機名。

?

三、rsyslog.service:記錄日志文件的服務

?

1、rsyslog.service 的配置文件:/etc/rsyslog.conf

?

(1)/etc/rsyslog.conf? 文件基本模塊介紹

?

?/etc/rsyslog.conf?? 這個文件規定了【(1)什么服務? (2)的什么等級信息? (3)需要被記錄在哪里(設備或文件)】這三個東西。所以設置的語法會是這樣:

服務名臣[.=!]信息等級 信息記錄的文件名或設備或主機 # 下面以 mail 這個服務產生的 info 等級為例。60 mail.* -/var/log/maillog # 這一行說明:mail 服務產生的大于等于 info 等級的信息,都記錄到 /var/log/maillog 文件中

?

我們將上面的數據簡單的分為三部分來說明:

?

【1】、服務名稱

可使用 man? 3? syslog? 查詢到相關的信息

相對序號服務類別說明
0kern(kernel)就是內核(kernel)產生的信息,大部分都是硬件檢測以及內核功能的啟用
1user在用戶層級所產生的信息,例如后續會介紹到的,用戶使用 logger 明厘米嗯來記錄日志文件的功能
2mail只要與郵件收發有關的信息記錄都屬于這個
3daemon主要是系統的服務所產生的信息,例如 systemd? 的信息就與這個有關
4auth主要與認證/授權有關的機制,例如 login、ssh、su 等需要賬號/密碼的東西
5syslog就是由? syslog? 相關協議產生的信息,其實就是 rsyslogd 這個程序本身產生的信息
6lpr亦即是打印相關的信息
7news與新聞組服務器有關的東西
8uucp全名為 UNIX? to? UNIX? Protocol,早期用于 UNIX? 系統間的程序數據交換
9cron就是計劃任務 cron、at 等產生信息記錄的地方
10authpriv與 auth 類似,但記錄較多賬號的私人信息,包括 pam 模塊的運行等
11ftp與 FTP 通訊協議有關的信息輸出
16~23local0~local7保留給本機用戶使用的一些日志信息,較常與終端互動

舉例來說,sendmail 與 postfix 及 dovecot 都是與郵件有關的軟件,這些軟件在設計日志文件記錄時,都會主動調用?? syslog? 內的? mail? 服務名稱。所以上述三個軟件(sendmail、postfix、dovecot)產生的信息在 syslog 看起來,就會是【mail】類型的服務了。

?

【2】、信息等級

可使用 man? 3? syslog? 查詢到相關的信息

等級數值等級名稱說明
8none什么都不記錄
7debug用來 debug (除錯)時產生的數據
6info僅是一些基本的信息說明而已
5notice雖然是正常信息,但比 indo 還需要被注意到的一些信息內容
4warning(warn)警示的信息,可能有問題,但是還不至于影響到某個 daemon 運行的信息。基本上,info、notice、warn 這三個信息等級都是在告知一些基本信息而已,應該還不至于造成一些系統運行困擾
3err(error)一些重大的錯誤信息,例如篇日志文件的某些設置值造成該服務無法啟動的信息說明,通常借由 err 的錯誤告知,應該可以了解到該服務無法啟動的問題
2crit比 erroe? 還要嚴重的錯誤信息,這個 crit 是臨界點(critical)的縮寫,這個錯誤已經很嚴重了
1alert警告,已經很有問題的等級,比 crit 還要嚴重
0emerg(panic)疼痛等級,意指系統已經幾乎要宕機的狀態,很嚴重的錯誤等級。通常大概只有硬件出問題,導致整個內核無法順利運行,就會出現這樣的等級的信息。

特別留意一下在信息等級之前還有【.=!】的連接符號,它代表的意思是這樣的:

  • .:代表【比后面還要嚴重的等級(含該等級)都會被記錄下來】的意思,例如:mail.info 代表只要是 mail 的信息,而且該信息等級嚴重于? info (含 info 本身)時,就會被記錄下來的意思。
  • .=:代表所需要的等級就是后面接的等級而已,其他的不要
  • .!:代表不等于,亦即是除了該等級外的其他等級都記錄

?

【3】、信息記錄的文件名或設備或主機

下面是一些常見的放置處:

  • 文件的絕對路徑:通常就是放在 /var/log? 里面的文件
  • 打印機或其他:例如? /dev/lp0? 這個打印機設備
  • 用戶名稱:顯示給用戶
  • 遠程主機:例如? @student,當然,也要對方主機也能支持才行
  • *::代表【目前在線的所有人】,類似 wall? 這個命令的意義。
  • ?

    (2)例題

    ?

    【1】、如果我要將我的 mail 相關的數據寫入到 /var/log/maillog? 當中,那么 /etc/rsyslog.conf? 的語法如何設計?

    mail.info /var/log/maillog

    ?

    【2】、我要將新聞組數據(news)及計劃任務(cron)的信息都寫入到一個稱為? /var/log/cronnews 的文件中,但是這兩個程序的警告信息則額外地記錄在 /var/log/cronnews.warn? 中,那我該如何設置 rsyslog.conf

    news.*;cron.* /var/log/cronnews news.=warn;cron.=warn /var/log/cronnews.warn

    ?

    【3】、我的? messages? 這個文件需要記錄所有的信息,但是就是不想要記錄? cron、mail 及 news? 的信息,那么應該怎么寫才好?

    可以有下面的兩種寫法:

    *.*;cron,mail,news.none /var/log/messages *.*;cron.none;mail.none;news.none /var/log/messages

    使用【,】分隔時,那么等級只要接在最后一個即可,如果是以【;】來分的話,那么就需要將服務與等級都寫上去。

    ?

    (3)Redhat? 7.x? 默認的 rsyslog.conf? 內容

    [root@server ~]# vim /etc/rsyslog.conf50 #kern.* /dev/console54 *.info;mail.none;authpriv.none;cron.none /var/log/messages57 authpriv.* /var/log/secure60 mail.* -/var/log/maillog64 cron.* /var/log/cron67 *.emerg :omusrmsg:*70 uucp,news.crit /var/log/spooler73 local7.* /var/log/boot.log
  • #kern.*:只要是內核產生的信息,全部都送到? console(終端)去。console? 通常是由外部設備連接到系統而來。
  • *.info;mail.none;authpriv.none;cron.none:由于 mail、authpriv、cron 等類別產生的信息較多,且已經寫入到下面的數個文件中,因此在 /va/log/messages 里面就不記錄這些項目,除此之外的其他信息都寫入? /var/log/messages 中。
  • authpriv.*:認證方面的信息均寫入 /var/log/secure 文件。
  • mail.*:郵件方面的信息則均寫入? /var/log/maillog 文件。
  • cron.*:計劃任務均寫入? /var/log/cron? 文件。
  • *.emerg:當產生最嚴重的錯誤等級時,將該等級的信息以? wall? 的方式廣播給所有系統登錄的賬號,要這么做的原因是希望在線的用戶能夠趕緊通知系統管理員來處理這么可怕的錯誤問題
  • uucp,news.crit:uucp? 是早期? UNIX-linke? 系統進行數據傳遞的通訊協議,后來常用在新聞組,news 則是新聞組。當新聞組方面的信息有嚴重錯誤時就寫入? /var/log/spoller? 文件中。
  • local7.*:將本機啟動時應該吸納是到屏幕的信息寫入到? /var/log/boot.log? 文件中。
  • 上面第四行關于? mail? 的記錄中,在記錄的文件? /var/log/maillog? 前面有個減號【-】是干什么用的?由于郵件所產生的信息比較多,因此我們希望郵件產生的信息先存儲在速度較快的內存緩沖區中(buffer),等到數據量足夠打了才一次性地將所由數據都寫入磁盤,這樣有助于日志文件地讀取性能。只不過有與信息是暫存在內存中,因此若不正常關機導致登錄信息未回到日志文件中,可能會造成部分數據地丟失。

    ?

    (4)自行增加日志文件文件功能

    ?

    【1】、范例一:如果你想要讓【所有的信息】都額外寫入到? /var/log/admin.log? 這個文件時,你該怎么做?

    1、先設置好所要添加的參數 [root@server ~]# vim /etc/rsyslog.conf #在文件的任意地方,加入下面這兩行內容75 # Add by root 2019/06/16 <==再次強調,自己修改的時候加入一些說明76 *.* /var/log/admin.log2、重新啟動 rsyslog.service [root@server ~]# systemctl restart rsyslog.service [root@server ~]# ll -d /var/log/admin.log -rw-r--r--. 1 root root 531 Jun 16 14:30 /var/log/admin.log # 看吧,自動建立了這個日志文件

    ?

    2、日志文件的安全性設置

    ?

    有沒有辦法防止日志文件被刪除?或是被? root? 自己不小心修改?

    基本上,我們可以通過一個隱藏的屬性來設置你的日志文件,成為【只可以增加數據,但是不能被刪除】的狀態——使用 chattr? 的a 這個屬性,那么或許可以達到些許的保護。

    不過,如果你的? root? 賬號被破解,那么下面的設置是無法保護的,因為你要記得【root? 是可以在系統上面進行任何事情的】

    另外,要注意的是,當【你不小心“手動”修改過日志文件后,例如? /var/log/messages,當你不小心用 vim 打開它,離開卻執行? :wq? 的參數,那么該文件未來將不會再繼續進行記錄操作】,這個問題真的經常發生。由于你以? vim? 存儲了日志文件,則 rsyslog.service 會被誤判為該文件已被修改過了,將導致 rsyslog.service? 不再寫入新內容到該文件。要想讓該日志文件繼續寫入,你只要重啟 rsyslog.service? 即可。

    ?

    [root@server ~]# chattr +a /var/log/admin.log [root@server ~]# lsattr /var/log/admin.log -----a---------- /var/log/admin.log

    ?

    3、日志文件服務器的設置

    ?

    Redhat 7.x? 默認的 rsyslog.service? 本身就已經具有這個日志文件服務器的功能了,只是默認并沒有啟動該功能而已。你可以通過 【man? rsyslogd】去查詢一下相關的選項就能夠知道。

    既然是日志文件服務器,那么我們的? Linux? 主機當然會啟動一個端口來監聽,這個默認的端口就是 UDP? 或? TCP 的514 端口。

    ?

    (1)服務端(日志接收方)——172.25.254.1

    ?

    1、編輯配置文件 [root@server ~]# vim /etc/rsyslog.conf # 找到下面這幾行 14 # Provides UDP syslog reception15 #$ModLoad imudp16 #$UDPServerRun 51417 18 # Provides TCP syslog reception19 #$ModLoad imtcp20 #$InputTCPServerRun 514 # 上面的是 UDP 端口,下面的是 TCP 端口。UDP:不可靠傳輸協議(無連接);TCP:可靠傳輸協議(有連接) # 下面使用 UDP 端口,即取消 15 和 16 行的注釋 15 $ModLoad imudp # 日志接受模塊16 $UDPServerRun 514 # 開啟接受端口2、重啟服務 [root@server ~]# systemctl restart rsyslog.service [root@server ~]# netstat -antulpe | grep 514 udp 0 0 0.0.0.0:514 0.0.0.0:* 0 82148 5314/rsyslogd udp6 0 0 :::514 :::* 0 82149 5314/rsyslogd 3、關閉防火墻 [root@server ~]# systemctl stop firewalld [root@server ~]# systemctl disable firewalld

    ?

    (2)客戶端(日志發送方)——172.25.254.2

    ?

    1、編輯配置文件 [root@client ~]# vim /etc/rsyslog.conf #在文件的任意地方,加入下面這行內容75 *.* @172.25.254.1 ### *.* @@172.25.254.1 #若用 TCP 傳輸,設置要變成這樣2、重啟服務 [root@client ~]# systemctl restart rsyslog.service

    ?

    (3)測試

    ?

    (1)在發送方和接受方都清空日志文件

    [root@server ~]# > /var/log/messages[root@client ~]# > /var/log/messages

    ?

    (2)在日志發送方:

    [root@client ~]# logger test [root@client ~]# cat /var/log/messages # 查看日志是否生成 ...(省略)... Jun 16 15:22:31 client root: test

    ?

    (3)在日志接受方查看

    [root@server ~]# cat /var/log/messages | grep test Jun 16 15:26:15 client root: test

    ?

    4、日志采集格式的設定

    ?

    (1)客戶端(日志發送方)——172.25.254.2

    ?

    1、編輯配置文件 [root@client ~]# vim /etc/rsyslog.conf #在文件的任意地方加入如下兩行的內容45 $template LOGFMT,"%timegenerated% %FROMHOST-IP% %syslogtag% %msg%\n" 77 *.* /var/log/xin;LOGFMT2、重啟服務 [root@client ~]# systemctl restart rsyslog.service ### 參數介紹 ### LOGFMT <==相當于變量名 %timegenerated% <==顯示日志時間 %FROMHOST-IP% <==顯示主機IP %syslogtag% <==日志記錄目標 %msg%" <==日志內容 \n <==換行

    ?

    (2)測試

    ?

    (1)在發送方和接受方都清空日志文件

    [root@server ~]# > /var/log/messages[root@client ~]# > /var/log/messages [root@client ~]# > /var/log/xin

    ?

    (2)在日志發送方:

    ?

    [root@client ~]# logger world [root@client ~]# cat /var/log/messages | grep world Jun 16 16:01:29 client root: world [root@client ~]# cat /var/log/xin | grep world Jun 16 16:01:29 127.0.0.1 root: world

    ?

    (3)在日志接受方查看

    [root@server ~]# cat /var/log/messages | grep world Jun 16 16:01:29 client root: world

    ?

    四、日志文件的輪循(logrotate)

    ?

    rsyslog? 使用? daemon? 的方式來啟動,當有需求的時候立刻就會被執行,但是? logrotate? 卻是在規定的時間到了之后才來進行日志文件的輪循,所以這個? logrotate? 程序當然就是掛在? cron? 下面進行的。

    仔細看一下,/etc/cron.daily/ 里面的文件,嘿嘿,/etc/cron.daily/logrotate? 就是記錄了每天要進行的日志文件輪循的操作。

    ?

    1、logrotate 的配置文件

    ?

    既然 logrotate? 主要是針對日志文件來進行輪循的操作,所以,它當然必須要記錄【在什么狀態下才經日志文件進行輪循】的設置。那么? logrotate? 這個程序的參數配置文件在哪里?那就是:

    • /etc/logrotate.conf
    • /etc/logrotate.d/

    ?其中 logrotate.conf? 才是主要的參數文件,至于 logrotate.d? 則是一個目錄,該目錄里面的所有文件都會被主動地讀入? /etc/logrotate.conf? 當中來使用。另外,在 /etc/logrotate.d/ 里面地文件中,如果沒有規定到一些詳細設置,則以? /etc/logrotate.conf? 這個文件地規定來指定為默認值。

    ?

    下面,我們來看一下默認的? logrotate? 的內容吧!

    [root@server ~]# vim /etc/logrotate.conf # 下面的設置是"logrotate 的默認設置值",如果個別的文件設置了其他的參數, # 則將以個別的文件設置為主,若該文件沒有設置到的參數則以這個文件的內容為默認值。3 weekly <==默認每個星期對日志文件進行一次輪循的任務6 rotate 4 <==保留幾個日志文件,默認是保留4個9 create <==由于日志文件被更名,因此建立一個新的來繼續存儲之意12 dateext <==就是這個設置值,可以讓被輪循的文件名稱加上日期18 include /etc/logrotate.d <==將 /etc/logrotate.d 這個目錄中的所有文件都讀進來執行輪循的任務21 /var/log/wtmp { <==僅針對/var/log/wtmp 所設置的參數22 monthly <==每個月一次,替換每周23 create 0664 root utmp <==指定新建文件的權限與所屬賬號/組24 minsize 1M <==文件容量一定要超過 1M 后才進行輪循(略過時間參數)25 rotate 1 <==僅保留一個,亦即僅有 wtmp.1 保留而已26 }

    現將 /etc/logrotate.conf 文件的語法總結如下:

    日志文件的絕對路徑與文件名...{

    ????????????? 個別的參數設置值,如 monthly,compress 等

    }

    ?

    下面,我們再以? /etc/logrotate.d/syslog? 這個輪循 rsyslog.service? 服務的文件,來看看該如何設置它的輪循?

    [root@server ~]# vim /etc/logrotate.d/syslog /var/log/cron /var/log/maillog /var/log/messages /var/log/secure /var/log/spooler {sharedscriptspostrotate/bin/kill -HUP `cat /var/run/syslogd.pid 2> /dev/null` 2> /dev/null || trueendscript }

    在上面的語法當中,我們知道正確的? logrotate? 的寫法為:

    • 文件名:被處理的日志文件絕對路徑文件名寫在前面,可以使用空格符分隔多個日志文件;
    • 參數:上述文件名進行輪循的參數使用 {} 包括起來;
    • 執行腳本:可調用外部命令來進行額外的命令執行,這個設置值需與 sharedscripts...endscript 設置合用才行。至于可用的環境為:
  • prerotate:在啟動? logrotate? 之前進行的命令,例如修改日志文件的屬性等操作;
  • postrotate:在做完 logrotate? 之后啟動的命令,例如重新啟動(kill? -HUP)某個服務;
  • prerotate? 與? postrotate:對于已機上特殊屬性的文件處理上面,是相當重要的執行程序。
  • 那么? /etc/logrotate.d/syslog? 內設置的 5 個文件的輪循功能就變成了:

  • 該設置只對? /var/log? 內的cron、maillog、messages、secure、spoller 有效;
  • 日志文件輪循每周一次,保留4個且輪循下來的日志文件不進行壓縮(未給該默認值)
  • 輪循完畢后(postrotate)取得 syslog? 的PID 后,以 kill? -HUP? 重新啟動? syslogd。
  • 請特別留意,那么/bin/kill? -HUP? 的意義,這一行的目的在于將系統的? rsyslogd? 重新以其參數文件(rsyslog.conf)的數據讀入一次,也可以想成是? reload? 的意思。由于我們建立了一個空的記錄文件,如果不執行此行來重新啟動服務的話,那么記錄的時候將會發生錯誤。

    ?

    假設我們針對? /var/log/message? 這個文件增加? chattr? +a? 的屬性時,依據? logrotate? 的工作原理,我們知道,這個? /var/log/messages 這個文件將被更名成為? /var/log/messages.1。但是由于加上這個? +a? 的參數,所以更名是不可能成功的。那怎么辦?就利用? prerotate? 與 postrotate? 來進行日志文件輪循前、后所需要做的操作。

    [root@server ~]# vim /etc/logrotate.d/syslog /var/log/cron /var/log/maillog /var/log/messages /var/log/secure /var/log/spooler {sharedscriptsprerotate /usr/bin/chattr -a /var/log/messages <==新增的內容endscript <==新增的內容sharedscripts <==新增的內容postrotate/bin/kill -HUP `cat /var/run/syslogd.pid 2> /dev/null` 2> /dev/null || true/usr/bin/chattr -a /var/log/messages <==新增的內容endscript }

    ?

    2、實際測試 logrotate 的操作

    ?

    logrotate [-vf] logfile 選項與參數: -v:啟動顯示模式,會顯示 logrotate 運行的過程 -f:不論是否符合配置文件的數據,強制每個日志文件都進行輪循的操作

    ?

    【1】、范例一:強制執行一次 logrotate? 看看整個流程是什么

    [root@server ~]# logrotate -v /etc/logrotate.conf reading config file /etc/logrotate.conf <==讀取主要配置文件 including /etc/logrotate.d <==調用外部的設置 reading config file chrony <==就是外部設置 ...(中間省略)... Handling 20 logs <==共有20個日志文件被記錄 ...(中間省略)... rotating pattern: /var/log/cron /var/log/maillog /var/log/messages /var/log/secure /var/log/spoolerweekly (4 rotations) empty log files are rotated, old logs are removed considering log /var/log/cron <==開始處理 messagelog does not need rotating <==因為時間未到,不需要修改

    ?

    五、systemd-journald.service? 簡介

    ?

    雖然? systemd-journald? 所記錄的數據在內存中,但是系統還是利用文件屬性是將它記錄到? /run/log? 下面。不過? /run? 在 Redhat? 7.x 的系統上,其實是內存中的數據,所以重新啟動后,這個? /run/log? 下面的數據當然就被刷新,舊的就不存在了。

    ?

    1、使用 journalctl? 查看登錄信息

    ?

    journalctl [-nrpf] [--since TIME] [--util TIME] _optional 選項與參數: 默認會顯示全部的 log 內容,從舊的輸出到最新的信息 -n:顯示最近的幾行的意思,找最新的信息相當有用 -r:反向輸出,從罪新娘的輸出到最舊的信息 -p:顯示后面所接的信息重要性排序。參看上面的 rsyslogd 的信息等級對應的表格 -f:類似 tail -f 的功能,持續顯示 journal 日志的內容(即時監控時相當有幫助) --since --util:設置開始與結束的時間,讓在該期間內的數據輸出而已 _SYSTEMD_UNIT=unit.service:只輸出 unit.service 的信息而已 _COMM=bash:只輸出與 bash 有關的信息 _PID=pid:只輸出此 PID 號的信息 _UID=uid:只輸出此 UID 號的信息 SYSLOG_FACILITY=[0-23]:使用 syslog.h 規范的服務對應的序號來調用出正確的數據。參看上面的 rsyslogd 的服務名稱對應的表格

    ?

    【1】、范例一:顯示目ian系統中所有的 journal 日志數據

    通過? less? 一頁頁翻動給管理員查看,數據量相當大。

    ?

    【2】、范例二:僅顯示出 2019/06/16 整天以及(2)僅今天(3)僅昨天的日志數據內容

    ?

    ?

    ?

    通過? less? 一頁頁翻動給管理員查看,數據量相當大。

    ?

    【3】、范例三:只找出 crond.service 的數據,同時只列出最新的 10 條即可

    通過? less? 一頁頁翻動給管理員查看,數據量相當大。

    ?

    【4】、范例四:找出 su 、login 執行的日志文件,同時只列出最新的 10 條即可

    ?

    【5】、范例五:找出信息嚴重等級為錯誤(error)的信息

    通過? less? 一頁頁翻動給管理員查看,數據量相當大。

    ?

    【6】、范例六、找出與登錄認證服務(auth、authprive)有關的日志文件信息

    ?

    【7】、查看日志的詳細參數

    sshd服務重啟之后,進程號發生改變

    ?

    2、logger? 命令的應用

    ?

    logger [-p 服務名稱.等級] "信息" 選項與參數: 服務名稱.等級:參考上面 rsyslogd 的內容

    ?

    【1】、范例一:指定一下,讓 root 來使用? logger? 來傳送數據到日志文件中

    ?

    3、保存 journal? 的方式

    ?

    再強調一次,這個? systemd-journald.service? 的信息是不會放到下一次開機啟動后的,所以,重新啟動后,之前的記錄會丟失。雖然我們大概都有啟動? rsyslogd? 這個服務來進行后續的日志文件放置,不過如果你比較喜歡? journalctl? 的讀寫方式,那么可以將這些數據保存下來。

    ?

    systemd-journald.service? 的配置文件為:/etc/systemd/journald.conf。也可以通過? 【man 5 journald.conf】 來查看。

    ?

    第一步:mkdir? /var/log/journal

    ?

    第二步:chown root:systemd-journal /var/log/journal/

    ?

    第三步:chmod? 2775? /var/log/journal

    ?

    第四步:重新加載該配置進程

    killall -1 systemd-journald?? 或? systemctl? restart? systemd-journald.service

    ?

    第五步:ls /var/log/journal,會發現生成了b398e018986f4c65894352dec2a79216目錄(用于存放journal日志)

    系統重啟之后的日志,存放在/var/log/journal/b398e018986f4c65894352dec2a79216/目錄中

    ?

    六、分析日志文件

    ?

    1、Redhat? 默認提供的? logwatch

    ?

    Redhat? 7.x? 上面默認的? logwatch? 所提供的分析工具,它會每天分析一次日志文件,并且將數據以? email? 的格式寄送給? root。

    ?

    不過,在我們的安裝方式里面,默認并沒有安裝 logwatch,所以,需要手動安裝? logwatch。

    ?

    [root@server ~]# yum install logwatch -y <==安裝 logwatch [root@server ~]# ll /etc/cron.daily/0logwatch -rwxr-xr-x. 1 root root 434 Dec 29 2013 /etc/cron.daily/0logwatch

    安裝完畢后,logwatch? 就已經寫入到了? cron? 的執行列表中。未來則每天會發送一封郵件給? root。因為我們剛剛安裝,那可以來分析一下。很簡單,直接執行 0logwatch? 即可。

    [root@server ~]# /etc/cron.daily/0logwatch [root@server ~]# mail Heirloom Mail version 12.5 7/5/10. Type ? for help. "/var/spool/mail/root": 1 message 1 new >N 1 logwatch@server.loca Mon Jun 17 16:00 138/5131 "Logwatch for server (L" & 1 Message 1: From root@server.localdomain Mon Jun 17 16:00:40 2019 Return-Path: <root@server.localdomain> X-Original-To: root Delivered-To: root@server.localdomain To: root@server.localdomain From: logwatch@server.localdomain Subject: Logwatch for server (Linux) Auto-Submitted: auto-generated Precedence: bulk Content-Type: text/plain; charset="iso-8859-1" Date: Mon, 17 Jun 2019 16:00:39 +0800 (CST) Status: R# logwatch 會說明分析的時間與 logwatch 版本等信息 ################### Logwatch 7.4.0 (03/01/11) #################### Processing Initiated: Mon Jun 17 16:00:38 2019Date Range Processed: yesterday( 2019-Jun-16 )Period is day.Detail Level of Output: 0Type of Output/Format: mail / textLogfiles for Host: server################################################################## # 開始一項一項的進行數據分析。--------------------- Cron Begin ------------------------ **Unmatched Entries**INFO (RANDOM_DELAY will be scaled with factor 53% if used.)INFO (RANDOM_DELAY will be scaled with factor 25% if used.)---------------------- Cron End ------------------------- ...(中間省略)... # 當然也得說明一下目前系統的磁盤使用狀況。--------------------- Disk Space Begin ------------------------ Filesystem Size Used Avail Use% Mounted on/dev/vda3 8.4G 3.4G 5.0G 40% /devtmpfs 489M 0 489M 0% /dev/dev/vda1 197M 102M 95M 52% /boot---------------------- Disk Space End -------------------------

    ?

    七、時間同步服務(chronyd.service)

    ?

    (1)服務端——172.25.254.1

    ?

    1、編輯配置文件 [root@server ~]# vim /etc/chrony.conf22 allow 172.25.254.0/24 允許哪些客戶端來同步本機時間29 local stratum 10 本機不同步任何主機的時間,本機作為時間源2、重啟服務 [root@server ~]# systemctl restart chronyd.service

    ?

    ?

    (2)客戶端——172.25.254.2

    ?

    1、編輯配置文件 [root@client ~]# vim /etc/chrony.conf3 server 0.rhel.pool.ntp.org iburst4 server 1.rhel.pool.ntp.org iburst5 server 2.rhel.pool.ntp.org iburst6 server 3.rhel.pool.ntp.org iburst # 刪除 4、5、6行,并將第 3 行內容修改為如下的內容3 server 172.25.254.1 iburst2、重啟服務 [root@client ~]# systemctl restart chronyd.service

    ?

    (3)測試:

    ?

    在客戶端:chronyc sources -v

    看到*,表示時間同步成功

    ?

    七、timedatectl命令——永久修改

    ?

    1、timedatectl? ? ?? 管理系統時間,顯示當前時間信息

    ?

    2、timedatectl? ? list-timezones? ? ? ? ?? 查看支持的所有時區

    ?

    3、timedatectl? ? set-timezone?? 時區 ? ? ? ? ? ? 設定當前時區

    ?

    4、cat /etc/adjtime? ? ? ? ? ? ?? 用于查看UTC時間還是Local時間

    ?

    5、timedatectl? ? set-local-rtc? ? ?? 0|1 ? ? ? ? ? ?? 設定是否使用UTC時間

    ?

    6、timedatectl? ? set-time? ?? 時間 ? ? ? ? 設定當前時間

    ?

    7、timedatectl? ? status? ? ? ? ? ? 管理系統時間,顯示當前時間信息(效果同1)


    總結

    以上是生活随笔為你收集整理的Linux运维之认识与分析日志文件(rsyslog服务),时间同步服务(chronyd服务)及时间管理命令(timedatectl)的全部內容,希望文章能夠幫你解決所遇到的問題。

    如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

    久草综合在线观看 | 97超碰在线免费 | 国产精品国产三级国产专区53 | 天天天天爽 | 天天av综合网 | 最近最新最好看中文视频 | 在线观看免费国产小视频 | 国产亚洲在线视频 | 色婷婷成人网 | 欧美日韩精品影院 | 最近乱久中文字幕 | 国内精品久久久久久久久久清纯 | 欧洲色吧 | 国产成人综合在线观看 | 开心色激情网 | 中文字幕在线观看完整 | 日本中文在线观看 | 天堂av在线中文在线 | 一区二区三区电影大全 | 免费黄色网止 | 在线观看视频黄色 | 中文字幕五区 | 91大神电影 | 国产999| 日韩网站在线免费观看 | 日韩欧美xxx| 亚洲欧美婷婷六月色综合 | 亚洲精品小区久久久久久 | 国内成人精品视频 | 久久久久免费网站 | 亚洲美女在线一区 | 久久8精品| 91av99| 久久9视频 | 久久婷婷网 | 色亚洲网 | 91免费试看| 狠狠躁日日躁夜夜躁av | 精品一区二区三区在线播放 | 欧美成人播放 | 热久久99这里有精品 | 99热99re6国产在线播放 | 久久久国产精品久久久 | 国产成人在线看 | 亚洲激情五月 | 婷婷六月丁香激情 | 成人av免费网站 | 午夜一级免费电影 | 精品在线99 | 黄网站色视频免费观看 | 成年人免费看片网站 | 欧美激情视频一二区 | 中文字幕日本在线观看 | 国产成人久久av免费高清密臂 | 视频二区| 日本一区二区免费在线观看 | 91成人免费看片 | 久久精品三级 | 国产在线精品二区 | 少妇bbbb搡bbbb搡bbbb| 91在线播放视频 | 欧美黑吊大战白妞欧美 | 9在线观看免费 | 欧美国产精品久久久久久免费 | 国产一级免费播放 | 精品欧美日韩 | 欧美久久久影院 | 亚洲黑丝少妇 | 国产精品久久久久久久久久免费看 | 天天色综合天天 | 国产一区二区精 | 国产一卡在线 | 99re在线视频观看 | 国产中文字幕视频在线 | 免费a v观看 | 国产福利在线免费 | 国产18精品乱码免费看 | 久久九九久久精品 | 五月婷婷六月丁香激情 | 国产一级片网站 | 国产高清视频免费观看 | 久久人人爽人人爽人人片av软件 | 国产日本亚洲高清 | 精品国产精品久久一区免费式 | 热久久视久久精品18亚洲精品 | 黄色小网站免费看 | 日日操网| 日韩精品专区在线影院重磅 | 9999在线视频 | 中文字幕刺激在线 | 久久久久成人精品亚洲国产 | 亚洲一区久久久 | 色九色| 97人人人人| 97超碰成人在线 | 婷婷午夜 | 狠狠色丁香婷婷综合基地 | 亚洲午夜不卡 | 狠狠网 | 一级黄色片在线免费看 | 精品99在线 | 日韩免费观看一区二区三区 | 婷婷五月色综合 | 91超级碰碰 | 国产传媒中文字幕 | 欧美精品中文在线免费观看 | 中文字幕中文字幕在线一区 | 成年人免费在线观看 | 天天爽天天搞 | 日韩高清久久 | 午夜久久电影网 | 欧美一级性视频 | 亚洲精品videossex少妇 | 爱爱av网| 国产成人一区二区三区影院在线 | 日日插日日干 | 久久精品官网 | 精品国产免费看 | 国产91av视频在线观看 | 波多野结衣在线播放一区 | 国产精品第 | 久久久高清视频 | 麻豆视频免费入口 | 成人性生爱a∨ | 国产精品视频 | www.国产精品 | 亚州精品天堂中文字幕 | 欧美成人免费在线 | 国产对白av | 韩日av在线| 五月开心婷婷网 | 欧美va日韩va | 久久av观看 | 中文字幕亚洲精品在线观看 | 免费福利视频网 | 国产精品美女久久 | 亚洲涩涩网站 | 四虎免费在线观看视频 | 国产高清福利在线 | 狠狠色丁香久久婷婷综合五月 | 狠狠色狠狠色终合网 | 四虎永久国产精品 | 国产美女无遮挡永久免费 | 精品国产乱码 | 色操插| 久草在线视频网 | 夜夜操天天干 | 婷婷综合av | 久久成人高清 | 成人aaa毛片 | 日韩欧美一区二区在线观看 | 麻花豆传媒一二三产区 | 天天曰天天曰 | 精品一区三区 | 国产精品久久久久久久久久久久 | 日韩最新理论电影 | 香蕉久草在线 | 久草干 | 天天射日| 91在线看视频免费 | 日韩毛片在线免费观看 | 精品国产一区二区三区av性色 | 久久国产精品成人免费浪潮 | 在线 视频 一区二区 | 国产精品午夜免费福利视频 | 少妇视频一区 | 五月婷婷狠狠 | 久久在视频 | 亚洲开心色 | 国产99久久久国产 | 日日夜夜狠狠 | 一区二区三区国 | 久久久久国产视频 | 日韩一区二区三区不卡 | 色久网| 色视频在线免费观看 | 四虎成人精品永久免费av | 免费看黄的视频 | 91精品啪在线观看国产 | 国产一级性生活 | 日韩精品中文字幕一区二区 | 国产午夜三级一区二区三桃花影视 | 久久精品国产亚洲精品 | 亚在线播放中文视频 | 黄色国产在线观看 | 久久精品79国产精品 | 午夜美女wwww | 操老逼免费视频 | 中文字幕在线播放第一页 | 福利视频一二区 | 国内成人av | 日韩免费一级a毛片在线播放一级 | 丁香六月久久综合狠狠色 | 毛片在线播放网址 | 最新一区二区三区 | 国产精品成久久久久三级 | 伊人视频 | 久久国产综合视频 | 日韩激情视频在线 | 久久久久国产精品免费免费搜索 | 亚洲在线看 | 啪啪免费观看网站 | 18性欧美xxxⅹ性满足 | 又大又硬又黄又爽视频在线观看 | 亚洲理论在线 | 青青河边草免费直播 | 又黄又色又爽 | 国产精品高清在线观看 | 日本成人中文字幕在线观看 | 亚洲国产中文在线 | 国产黄影院色大全免费 | 国产精品久久久久久69 | 激情五月激情综合网 | 在线观看蜜桃视频 | 日色在线视频 | 天天干天天操天天操 | 一区二区三区韩国免费中文网站 | 五月天丁香 | 欧美日韩亚洲在线观看 | 黄色中文字幕在线 | 亚洲成人免费 | 精品久久久久久亚洲综合网站 | 午夜视频在线观看欧美 | 亚洲精品国产自产拍在线观看 | 久久国产精品精品国产色婷婷 | 91爱爱免费观看 | 色婷婷导航 | 国产日韩欧美在线播放 | 波多野结衣在线观看一区二区三区 | 四虎永久网站 | 色综合综合 | 亚洲另类久久 | 激情五月婷婷激情 | 99精品视频一区 | 国产免费高清 | 九九九热精品免费视频观看 | 久久精品香蕉视频 | 日韩精品免费在线观看视频 | 亚洲精品一区二区三区四区高清 | 首页国产精品 | 亚洲精品在线免费看 | 综合天堂av久久久久久久 | 热re99久久精品国产99热 | 精品 激情| 久久久久成 | 免费色视频网站 | 91自拍成人 | 成人黄色免费在线观看 | 成人亚洲欧美 | 黄色综合 | 国产精品成人免费一区久久羞羞 | 免费观看完整版无人区 | 超碰在线公开免费 | 亚洲精品理论 | 亚洲天堂网视频在线观看 | 黄色精品免费 | 国产成人精品在线播放 | 精品久久综合 | 亚洲国产理论片 | 五月天网站在线 | 99精品免费久久久久久日本 | 国产成人久久av免费高清密臂 | 欧美日韩午夜爽爽 | 天天综合网久久综合网 | 国产在线日韩 | 欧美视频二区 | 成人免费网站在线观看 | 91精品国产99久久久久久久 | 中文av在线免费观看 | 狠狠狠的干| 日本久久电影网 | 国产精品片| 69久久夜色精品国产69 | 亚洲国产中文字幕在线观看 | 国产不卡在线播放 | 久久久久久久久综合 | 国产999视频在线观看 | 插婷婷| 亚洲三级网站 | 国产精品久久久久久久久费观看 | 日韩av快播电影网 | 69国产成人综合久久精品欧美 | 欧美日韩精品久久久 | 日韩网站在线免费观看 | 欧美日韩一区二区三区视频 | 精品无人国产偷自产在线 | 国产精品a久久 | 国产一级免费视频 | 欧美精品国产综合久久 | 激情五月亚洲 | 成人在线观看免费视频 | 久久精品网站免费观看 | 国产亚洲精品久久久久久 | 亚洲成人精品久久久 | 久久视频国产 | 成人午夜网 | 中文av一区二区 | 亚洲综合视频在线播放 | 成人电影毛片 | 一区二区三区免费在线观看 | 久久视频在线 | 亚洲欧洲一区二区在线观看 | 黄色成品视频 | 狠狠躁夜夜躁人人爽超碰97香蕉 | 最新国产在线 | 四虎永久精品在线 | 国产亚洲欧美日韩高清 | 超碰999| 中文字幕乱码亚洲精品一区 | 在线视频观看亚洲 | 国内精品久久久久久久久久久 | 成人在线黄色电影 | 2021av在线 | 欧美日韩国产免费视频 | 美女视频免费一区二区 | 日韩在线观看电影 | 亚洲精品视频在线播放 | 成人一区二区在线 | 日日躁天天躁 | 日韩a在线播放 | 美女在线国产 | 欧美日本不卡高清 | 国产青春久久久国产毛片 | av一级黄| 国产精品9999| 91精品国产网站 | 国产一区二区在线精品 | av一级片网站 | 日韩av在线资源 | 久久久精品一区二区 | 激情综合国产 | 欧美男女爱爱视频 | 久久久91精品国产一区二区精品 | 久国产在线播放 | 最新高清无码专区 | 久久久久久高潮国产精品视 | 中文字幕一区二区三区视频 | 一区二精品 | 精品无人国产偷自产在线 | 欧美人人 | 国产一性一爱一乱一交 | 午夜国产福利在线 | 91视频免费播放 | 69国产盗摄一区二区三区五区 | 婷婷色社区 | 成人av.com| 久久久久久高潮国产精品视 | 国产精品视频免费在线观看 | 激情综合一区 | 亚洲国产精品推荐 | 麻豆影视网站 | 91在线蜜桃臀 | 中文字幕影片免费在线观看 | 18女毛片 | 国产在线国偷精品产拍 | 久久久久久激情 | 免费看污污视频的网站 | 久久精品国产亚洲 | 91天天视频 | 99精品国产99久久久久久97 | 天堂网av在线 | 2024av在线播放| 国产精品正在播放 | 精品久久1 | 午夜视频一区二区三区 | 九九热免费在线视频 | 天天操天天添天天吹 | 久久免费国产精品1 | 久久av网址 | 亚洲精品一区二区久 | 国产va饥渴难耐女保洁员在线观看 | 99欧美视频 | 天天射天天射 | 麻花天美星空视频 | 色偷偷网站视频 | 99热最新地址 | 国产精品网红直播 | 国产又粗又猛又黄视频 | 久久成人精品电影 | 亚洲成a人片77777kkkk1在线观看 | 久久精品一二三区 | 九九视频网 | 最新中文字幕在线资源 | 久草在线中文888 | 亚洲精品理论片 | 中文字幕一区二区在线播放 | 亚洲精品xxxx | 免费福利片2019潦草影视午夜 | 国产精品久久久久久久久久妇女 | 亚洲成人精品国产 | 91亚洲精品久久久 | 69国产成人综合久久精品欧美 | 中文字幕免费观看 | 在线观看免费成人av | 午夜视频在线网站 | 婷婷综合网 | 色综合久久中文综合久久牛 | 五月婷婷久久丁香 | 国产精品久久久久久久久久了 | 97精品国产91久久久久久 | 久久精品亚洲一区二区三区观看模式 | 欧美一级性 | 五月天天色| 国产精品欧美久久久久天天影视 | 免费亚洲精品视频 | 欧美午夜理伦三级在线观看 | 少妇自拍av | 久久久免费高清视频 | 91精品在线免费 | 国产精品专区在线 | 欧美成人黄| 亚洲精品在 | 西西人体4444www高清视频 | 97视频网址 | 国产一区二区三区午夜 | 亚洲高清在线观看视频 | 国产色影院 | 黄色av成人在线观看 | 久久综合欧美精品亚洲一区 | 四虎影院在线观看av | 久草五月| 欧美在线1 | 亚洲精品网址在线观看 | 美女黄频网站 | 国产一区二区不卡视频 | 久久最新视频 | 婷婷久久网站 | 五月激情丁香图片 | 色视频在线免费观看 | 91香蕉视频色版 | 中字幕视频在线永久在线观看免费 | 日日夜夜噜 | 成人一区二区三区中文字幕 | www.婷婷色| 黄色成人免费电影 | 99国产精品免费网站 | 欧美日韩在线精品一区二区 | 亚洲国产精品电影 | 福利一区二区在线 | 国产在线精品一区二区不卡了 | 国产精品 视频 | 看毛片网站 | 激情一区二区三区欧美 | 国产午夜影院 | 亚洲在线国产 | 波多野结衣视频一区 | 欧美aaaxxxx做受视频 | 国产资源免费在线观看 | 国产系列在线观看 | 黄色av网站在线免费观看 | 精品在线一区二区三区 | 欧美日韩国产精品爽爽 | 国产精品久久久久久久久久久杏吧 | 久久久久久久久久免费 | 国内丰满少妇猛烈精品播 | 黄色a级片在线观看 | 亚洲免费公开视频 | 婷婷六月网 | 精品国偷自产国产一区 | 中文字幕在线观看网站 | 香蕉视频国产在线 | 亚洲精品国产自产拍在线观看 | 国产午夜精品一区二区三区 | 一区二区三区四区五区六区 | 欧美大片mv免费 | 免费观看特级毛片 | 国产香蕉久久 | 午夜久久影视 | 九九九九精品 | 久久久国产精品成人免费 | 狠狠躁日日躁狂躁夜夜躁av | 91精品天码美女少妇 | 四虎最新入口 | 亚洲国内精品 | 毛片网站在线看 | 欧美在线你懂的 | 涩涩网站在线观看 | 玖玖在线免费视频 | 亚州欧美视频 | 在线观看国产亚洲 | 亚洲成av | 亚洲a色| 国产a国产 | 69国产成人综合久久精品欧美 | 亚洲综合涩 | 亚洲成人网av | 免费在线中文字幕 | 亚洲精品tv久久久久久久久久 | 最近免费观看的电影完整版 | 国产美女精品在线 | 亚洲欧美日韩一区二区三区在线观看 | 亚洲国产视频网站 | 亚洲最大色 | av福利在线免费观看 | 久久草在线免费 | 国产在线观看av | 国产免费一区二区三区最新6 | 高潮久久久 | 九九在线视频 | 精品国产一区二区三区四区vr | 亚洲午夜精品一区 | 亚洲精品美女免费 | 精品国产一区二区三区久久久 | 美女视频久久久 | 日韩一二三 | 免费v片| 中文字幕一区二区三区乱码不卡 | 久久人人爽人人爽人人片av免费 | 久久精品人人做人人综合老师 | 综合激情婷婷 | 国产成人免费网站 | 欧美日韩一区二区在线 | 国产成人精品av在线观 | 久久婷婷精品 | 国产精品久久久久高潮 | 丰满少妇在线观看网站 | 一区二区三区日韩视频在线观看 | 97视频一区 | 国产成人99av超碰超爽 | 欧美永久视频 | 伊人狠狠 | 久久综合综合久久综合 | 黄色在线观看免费网站 | 国产精品美女久久久久久 | 久久久精品综合 | 欧美国产亚洲精品久久久8v | 黄色字幕网 | 精品国产三级a∨在线欧美 免费一级片在线观看 | av品善网 | 国产三级国产精品国产专区50 | 在线视频观看国产 | 色婷婷综合在线 | av午夜电影 | 四虎www. | 激情偷乱人伦小说视频在线观看 | 日本天天色 | 91最新视频 | 麻豆视频在线 | 91精品视频导航 | 中文字幕综合在线 | 久操中文字幕在线观看 | 97香蕉久久超级碰碰高清版 | 欧美激情综合网 | av官网| 久久精品国产美女 | 久久欧洲视频 | 国产日韩精品一区二区 | 国产又黄又硬又爽 | 中文字幕日韩免费视频 | 精品久久91 | 在线亚洲日本 | 天天射夜夜爽 | 天天干夜夜擦 | 中文字幕精品www乱入免费视频 | 国产精品v a免费视频 | 国产精品久久久亚洲 | 四虎永久免费在线观看 | 免费视频黄色 | 国产亚洲视频在线免费观看 | 国产理论片在线观看 | 国产女人40精品一区毛片视频 | 精油按摩av | 久久99热久久99精品 | 国产日韩欧美视频 | 久久综合色一综合色88 | 一区二区三区电影 | av性网站| 综合色中色 | 国产精品美女久久久久aⅴ 干干夜夜 | 久久99精品波多结衣一区 | 久久艹影院| 丁香婷婷色 | 日韩成人av在线 | 亚洲人成在线观看 | 久久九九九九 | 国产日韩精品一区二区 | 久久九九影视 | 国产中文视频 | 日韩在线视频网站 | 玖玖视频精品 | 青青草国产精品 | 国产一区二区免费在线观看 | 91人人射 | 中文免费观看 | 国产一级淫片免费看 | 国产一区二区三区久久久 | 国产69熟 | 激情五月色播五月 | 国产精品麻豆视频 | 久久曰视频| 国产精品麻豆视频 | 亚洲涩涩色 | 午夜视频一区二区三区 | 在线观看涩涩 | 91免费的视频在线播放 | 久久在线免费 | 精品国产乱码久久久久久三级人 | 午夜精品久久久久久久久久久久久久 | 91成人免费在线 | 黄色av一级 | 日本中文字幕网 | 国产国语在线 | 久久国产精品免费一区二区三区 | 97久久久免费福利网址 | 91热这里只有精品 | 免费精品视频在线观看 | 久久久久高清毛片一级 | 婷婷在线免费观看 | av 一区二区三区四区 | 韩国在线一区 | 亚洲欧洲精品视频 | 99久久超碰中文字幕伊人 | 丁香婷婷综合色啪 | 久久99精品视频 | 久久综合久久八八 | 西西4444www大胆视频 | 久久a v电影 | 97成人在线视频 | 伊人天天狠天天添日日拍 | www.在线观看视频 | 91黄色免费看 | 久草在线中文视频 | 免费看片日韩 | 日韩av一区二区三区在线观看 | 伊人超碰在线 | 婷婷精品| 国产一卡在线 | 天天干,天天射,天天操,天天摸 | 91视视频在线直接观看在线看网页在线看 | 日韩av电影国产 | 久久大片网站 | 91视频免费看网站 | 综合久久婷婷 | 国产高清不卡一区二区三区 | 三级av网站| 国产亚洲精品久久久久秋 | 日韩成人中文字幕 | 国产精品国内免费一区二区三区 | 96av视频| 亚洲精品456在线播放第一页 | 人人爽人人爽人人爽学生一级 | 狠狠色丁香久久婷婷综合_中 | 亚洲女裸体| 夜夜高潮夜夜爽国产伦精品 | 91丨九色丨蝌蚪丨老版 | 免费看一及片 | 日本一区二区不卡高清 | 又黄又爽又色无遮挡免费 | 91成人黄色 | 91色网址 | 999热线在线观看 | 4438全国亚洲精品观看视频 | 久在线 | 国产精品理论片在线播放 | 日日爱影视 | 国产精品久久久久久久久久免费 | 国产精品视频观看 | 免费高清在线观看成人 | 91成人网在线播放 | 国产亚洲精品bv在线观看 | 久久无码精品一区二区三区 | 中文字幕高清av | 免费日韩 精品中文字幕视频在线 | 99精品国自产在线 | 婷婷亚洲综合 | 国产精品久久久久久久久久久久久久 | 天天操夜夜叫 | 香蕉视频18 | 国产精品亚洲片在线播放 | 九九视频免费观看视频精品 | 日日天天 | 成人久久视频 | 国产一区在线看 | 韩国精品福利一区二区三区 | 天天在线免费视频 | 奇米网8888 | 久久久久福利视频 | 亚洲国产人午在线一二区 | 国产精品区免费视频 | 色偷偷中文字幕 | 日韩av福利在线 | 国产精品美女久久久久久久网站 | 免费av在线网站 | 毛片一二区 | 久草免费新视频 | 中文字幕在线久一本久 | 97免费公开视频 | 一区二区视频播放 | 麻豆91网站 | 色老板在线视频 | 99精品国产免费久久 | 亚洲人成免费网站 | 天天曰天天干 | av电影中文字幕 | 欧美极品一区二区三区 | 五月婷香 | 操久| 日韩欧美精品一区 | 成人理论在线观看 | 狠狠做六月爱婷婷综合aⅴ 日本高清免费中文字幕 | 免费成人在线观看视频 | 91av在| 国产精成人品免费观看 | 91.精品高清在线观看 | 就要色综合 | 色com | 日韩女同一区二区三区在线观看 | 91精品秘密在线观看 | 日韩精品视频在线观看网址 | 久草精品视频在线播放 | 精品视频在线看 | 国色天香第二季 | 亚洲五月婷婷 | 天天射网站 | 亚洲japanese制服美女 | 亚洲国产网站 | 免费看的国产视频网站 | 91看片淫黄大片在线播放 | 黄色三级网站 | 久草爱视频 | 91中文在线视频 | 久久激情五月婷婷 | 东方av免费在线观看 | 国产一区欧美在线 | 中文字幕高清有码 | 六月激情| 玖草影院| 国产精品免费久久久久久久久久中文 | 国产精品亚州 | 日韩中文字幕视频在线 | 国产成人久久77777精品 | 午夜久久影视 | 91大片成人网 | 在线精品观看国产 | 色婷婷激情电影 | 久草在线精品观看 | 视频一区亚洲 | 99婷婷狠狠成为人免费视频 | 国产一级在线观看 | 国产高清久久久久 | 亚洲涩涩网站 | 亚洲综合精品视频 | 国产91区| 二区三区毛片 | 精品播放 | 久久99九九99精品 | 久久久久女人精品毛片 | 中文有码在线视频 | 国产精品久久久久久久免费大片 | 中文字幕欲求不满 | 国产日韩欧美综合在线 | 国产一区国产精品 | 久久久麻豆精品一区二区 | 亚洲精品mv在线观看 | 美女精品在线 | 天天射网 | 91在线成人 | 黄色影院在线观看 | 日韩专区av| 久久久精品视频成人 | 亚洲理论电影 | 2019av在线视频 | 午夜男人影院 | 五月婷婷影视 | 成人国产精品免费 | 天天干天天干天天干天天干天天干天天干 | 成人av动漫在线观看 | 婷婷五月在线视频 | 成人永久在线 | 午夜成人影视 | 2018亚洲男人天堂 | 午夜视频在线观看一区二区三区 | 亚洲国产精品推荐 | 欧美在线观看小视频 | 成人免费视频网站在线观看 | 免费日韩三级 | 九九三级毛片 | 综合久久婷婷 | 欧洲精品久久久久毛片完整版 | 性日韩欧美在线视频 | 婷婷网址 | 伊人婷婷久久 | 国产男女爽爽爽免费视频 | 国产黄色特级片 | 成全免费观看视频 | 日韩精品一区二区在线观看视频 | 6699私人影院| 久久久私人影院 | 一级精品视频在线观看宜春院 | 久久免费国产电影 | 亚洲精品午夜久久久久久久 | 日韩国产欧美视频 | 中文字幕九九 | 在线一区二区三区 | 激情五月婷婷激情 | 久久成人免费电影 | 在线观看国产一区二区 | 精品国产一区二区三区四区在线观看 | 一区二区精| 免费能看的av| 久久久精品影视 | 国产 视频 高清 免费 | 国产一级二级av | 91精选 | 色综合久久久久综合99 | 成人黄色影片在线 | 热久久免费视频 | 精品国产一区二 | 天堂中文在线视频 | 96在线| 国产黄色片网站 | 91av视频免费观看 | 国产小视频你懂的在线 | 国产精品久久久久久久久久99 | 天天插狠狠插 | 欧美精品久久久久久久久久丰满 | 99在线视频播放 | 中文乱码视频在线观看 | 超碰在线人人爱 | 免费91麻豆精品国产自产在线观看 | 成人av电影在线播放 | 天堂网一区 | 久久中文字幕视频 | 99久久精品一区二区成人 | 国产正在播放 | 综合激情av | 日韩av免费观看网站 | 少妇精品久久久一区二区免费 | 中文字幕亚洲综合久久五月天色无吗'' | 亚洲成人精品在线观看 | 黄色国产高清 | 91大神电影 | 成人午夜电影在线 | 久久国产亚洲视频 | 欧美一级在线 | 国产欧美精品一区二区三区四区 | 91av蜜桃| 国产精品久久久久久电影 | 夜夜澡人模人人添人人看 | 黄色精品一区二区 | 亚洲va欧美va人人爽春色影视 | 免费a视频在线 | 亚洲成av人片在线观看香蕉 | 91.精品高清在线观看 | 成人污视频在线观看 | 国产亚洲va综合人人澡精品 | 婷婷色中文网 | 91av视频在线观看免费 | 日韩av一区二区三区四区 | 九九九免费视频 | 亚洲国产成人精品电影在线观看 | 91tv国产成人福利 | 欧美一级性生活 | 91视频免费播放 | 狠狠精品| 热精品 | 日韩电影中文字幕在线 | 久久精品国产99 | 91丨九色丨高潮丰满 | 国产亚洲精品久久久久久移动网络 | 91亚洲在线观看 | 福利视频导航网址 | 国产精品1024 | 在线观看你懂的网站 | 嫩小bbbb摸bbb摸bbb | 欧美成人性网 | 中文在线√天堂 | 久久精品播放 | 亚洲男男gaygayxxxgv | 有码中文字幕在线观看 | 97超碰中文字幕 | 国产日韩在线观看一区 | 久久精品久久精品久久 | 日韩电影一区二区三区在线观看 | 婷婷色网站 | 国产视频在线免费观看 | 欧美 日韩 国产 中文字幕 | 免费人成网 | 久久精品一区二区三 | 久久久www成人免费毛片 | 亚洲黄色在线观看 | 免费观看午夜视频 | 久久精品一区二区三区中文字幕 | 午夜精品福利影院 | 色天天天| 国产亚洲成av片在线观看 | 久久论理| 国产在线观看你懂得 | 天天综合网在线观看 | 国产成人99av超碰超爽 | 天天爱天天操天天爽 | 久久精品99国产国产 | 婷婷天天色 | 国产精品毛片久久蜜 | 久久久999| 日韩特黄一级欧美毛片特黄 | 久久r精品 | 中文字幕在线观看视频一区 | 五月亚洲 | 在线免费观看视频一区二区三区 | 精品国产一区二区三区久久影院 | 免费在线黄网 | 在线观看精品一区 | 国产精品人人做人人爽人人添 | 四虎国产视频 | 欧美午夜一区二区福利视频 | 欧美a级片免费看 | 97在线视频免费观看 | 亚洲国产999 | 精品久久国产一区 | 在线不卡中文字幕播放 | 亚洲九九九在线观看 | 亚洲自拍av在线 | 日韩av免费大片 | 日韩精品免费一区二区三区 | 国产不卡视频在线 | 91精品国产福利在线观看 | 色婷婷激情电影 | 2021国产精品视频 | 成人国产综合 | 97视频人人免费看 | 偷拍精偷拍精品欧洲亚洲网站 | 欧美一二三区播放 | 精品久久久久久久久久久久 | 婷久久| 操操操日日日干干干 | 亚洲五月 | 视频在线一区二区三区 | 欧美性久久久 | 日韩色综合网 | 黄色三级网站在线观看 | 一本之道乱码区 | 91理论电影| 香蕉91视频 | av在线一级| 久久免费看视频 | 国产黄色理论片 | 9999在线视频 | 亚洲精品免费视频 | 国产精品婷婷 | 91精品国产自产老师啪 | 亚洲欧美一区二区三区孕妇写真 | 97夜夜澡人人爽人人免费 | 久久在线播放 | 亚洲国产精品女人久久久 | 在线观看 国产 | 国产精品一区二区三区视频免费 | 久久国产一区 | 欧美一区影院 | 成人a级大片 | 国产一区二区播放 | 韩国一区二区在线观看 | 日韩中文字幕一区 | 午夜av影院 | 在线视频精品 | 99热精品国产一区二区在线观看 | 激情五月婷婷综合 | 黄色在线网站噜噜噜 | 国内精品视频一区二区三区八戒 | 日韩xxxbbb| 91热视频 | 精品婷婷 | 国产在线精品一区二区 | 99久高清在线观看视频99精品热在线观看视频 | 亚洲欧美日韩国产一区二区 | 国产精品色婷婷 | 国产热re99久久6国产精品 | 日韩一区二区三区不卡 | 97碰视频| 97电影手机 | 99这里都是精品 | 91网站免费观看 | 三级黄色大片在线观看 | 欧美精品免费一区二区 | 在线免费观看黄色小说 | 日韩在线不卡av | 日韩精品一区二区三区丰满 | 亚洲日本一区二区在线 | www日韩精品 | 亚洲精品一区二区三区新线路 | 欧美一区成人 | 一区二区激情视频 | 天天操夜夜曰 | 日韩欧美精品在线 | 天天草视频 | 精品播放 | 天堂视频一区 | 久久国语| 亚洲 欧美日韩 国产 中文 | 国产精品国产自产拍高清av | 欧美一区二区伦理片 | 激情综合久久 | 婷婷视频在线播放 | av网址在线播放 | 亚洲精品视频网站在线观看 | 大胆欧美gogo免费视频一二区 | 国产精品免费麻豆入口 | 久久久久国产精品一区二区 |