数据库日志管理
數據庫日志
?
數據庫備份：
1>?mysqldump
mysqldump 數據庫 > 備份文件
mysqldump 數據庫數據表 > 備份文件
mysqldump --databases 數據庫1 數據庫2> 備份文件
mysqldump?--all－databases> 備份文件
??? 還原：mysql? 數據庫 < 備份文件
2>?mysqlhotcopy（支持正則表達式）
mysqlhotcopy –u=’用戶名’? -p=’密碼’? --regexp=^my（正則）? /aa（備份目錄）? (備份以my開頭的數據表)
還原：cp? –rpf? /aa?/var/lib/mysql
日志類型：
日志文件 | 記入文件中的信息類型 |
錯誤日志 | 記錄啟動、運行或停止時出現的問題。 |
查詢日志 | 記錄建立的客戶端連接和執(zhí)行的語句。 |
二進制日志 | 記錄所有更改數據的語句。主要用于復制和即時點恢復。 |
慢日志 | 記錄所有執(zhí)行時間超過long_query_time秒的所有查詢或不使用索引的查詢。 |
事務日志 | 記錄InnoDB等支持事務的存儲引擎執(zhí)行事務時產生的日志。 |
查看日志文件：
mysql> SHOW GLOBALVARIABLES LIKE '%log%';
錯誤日志：
錯誤日志主要記錄如下幾種日志：
§?服務器啟動和關閉過程中的信息
§?服務器運行過程中的錯誤信息
§?事件調度器運行一個時間時產生的信息
§?在從服務器上啟動從服務器進程時產生的信息
錯誤日志定義：
可以用--log-error[=file_name]選項來指定mysqld保存錯誤日志文件的位置。如果沒有給定file_name值，mysqld使用錯誤日志名host_name.err 并在數據目錄中寫入日志文件。如果你執(zhí)行FLUSH LOGS，錯誤日志用-old重新命名后綴并且mysqld創(chuàng)建一個新的空日志文件。(如果未給出--log-error選項，則不會重新命名）。
查看當前錯誤日志配置：
mysql> SHOWGLOBAL VARIABLES LIKE '%log_error%';
是否記錄警告日志：
mysql> SHOW GLOBAL VARIABLES LIKE '%log_warnings%';?
通用查詢日志
§?啟動開關：general_log={ON|OFF}
§?日志文件變量：general_log_file[=/PATH/TO/file]
§?全局日志開關：log={ON|OFF}??該開關打開后，所有日志都會被啟用
§?記錄類型：log_output={TABLE|FILE|NONE}
因此，要啟用通用查詢日志，需要至少配置general_log=ON，log_output={TABLE|FILE}。而general_log_file如果沒有指定，默認名是host_name.log。
mysql> SHOWGLOBAL VARIABLES LIKE '%general_log%';
mysql> SHOWGLOBAL VARIABLES LIKE '%log_output%';
慢查詢日志：
MySQL如果啟用了slow_query_log=ON選項，就會記錄執(zhí)行時間超過long_query_time的查詢（初使表鎖定的時間不算作執(zhí)行時間）。
日志記錄文件為slow_query_log_file[=file_name]，如果沒有給出file_name值， 默認為主機名，后綴為-slow.log。如果給出了文件名，但不是絕對路徑名，文件則寫入數據目錄。
默認與慢查詢相關變量：
mysql> SHOW GLOBAL VARIABLES LIKE '%slow_query_log%';
服務器參數設定方法與通用查詢日志相同，不做解釋。
默認沒有啟用慢查詢，為了服務器調優(yōu)，建議開啟。
mysql> SETGLOBAL slow_query_log=ON;（臨時開啟）
##如果要長久生效，則需要在配置文件中定義。（vi /etc/my.cnf）
那么多久算是慢呢？
如果查詢時長超過long_query_time的定義值（默認10秒），即為慢查詢：
mysql> SHOWGLOBAL VARIABLES LIKE 'long_query_time';
二進制日志：
二進制日志啟動開關：log-bin [= file_name]（開啟二進制日志文件 vi /etc/my.cnf 插入log-bin=mysql-bin）
在5.6及以上版本一定要手動指定。5.6以下版本默認file_name為$datadir/mysqld-binlog
二進制日志用于記錄所有更改數據的語句。主要用于復制和即時點恢復。
查看二進制日志的工具為：mysqlbinlog
二進制日志包含了所有更新了數據或者已經潛在更新了數據（例如，沒有匹配任何行的一個DELETE）的所有語句。語句以“事件”的形式保存，它描述數據更改。二進制日志還包含關于每個更新數據庫的語句的執(zhí)行時間信息。它不包含沒有修改任何數據的語句。
二進制日志的主要目的是在數據庫存在故障時，恢復時能夠最大可能地更新數據庫（即時點恢復），因為二進制日志包含備份后進行的所有更新。二進制日志還用于在主復制服務器上記錄所有將發(fā)送給從服務器的語句。
二進制日志的管理：
§?日志的滾動：
在my.cnf中設定max_binlog_size = 200M，表示限制二進制日志最大尺寸為200M，超過200M后進行滾動。MySQL的滾動方式與其他日志不太一樣，滾動時會創(chuàng)建一個新的編號大1的日志用于記錄最新的日志，而原日志名字不會被改變。
每次重啟MySQL服務，日志都會自動滾動一次。
另外如果需要手動滾動，則使用命令：
mysql> FLUSH LOGS;
§?日志的查看：
查看有哪些二進制日志文件：（必須開啟二進制日志才可以查看）
mysql> SHOWBINARY LOGS;
查看當前正在使用的是哪一個二進制日志文件：
mysql> SHOWMASTER STATUS;（必須開啟二進制日志才可以查看）
查看二進制日志內容：
mysql> SHOW BINLOGEVENTS IN 'mysql-bin.000001';
使用命令mysqlbinlog查看二進制日志內容：
基本語法：
mysqlbinlog[options] log-files
常用options（選項）：
--start-position????：開始位置
--stop-position???? ?：結束位置
--start-datetime'yyyy-mm-dd hh:mm:ss'? ：開始時間
--stop-datetime ?'yyyy-mm-ddhh:mm:ss'? ：結束時間
例：[root@localhost mysql]#mysqlbinlog --start-datetime '2015-10-26 23:30:00' mysql-bin.000001
[root@localhostmysql]# mysqlbinlog --start-position 203 --stop-position 389?mysql-bin.000001
使用二進制日志還原數據：
使用mysqlbinlog讀取需要的日志內容，使用標準輸入重定向到一個sql文件，然后在mysql服務器上導入即可，如下：
[root@localhost mysql]#mysqlbinlog mysql-bin.000001 > /root/temp_date.sql
刪除二進制日志文件：
二進制日志文件不能直接刪除的，如果使用rm等命令直接刪除日志文件，可能導致數據庫的崩潰。
必須使用命令PURGE刪除日志，語法如下：
PURGE { BINARY |MASTER } LOGS
{ TO 'log_name' | BEFORE datetime_expr }
查看當前所有日志文件：
[root@localhostmysql]# ll mysql-bin.0*
刪除mysql-bin.000006以前的日志文件：
mysql>?PURGE BINARY LOGS TO?'mysql-bin.000006';
MySQL中日志相關常用的服務器變量說明：
expire_logs_days={0..99}
設定二進制日志的過期天數，超出此天數的二進制日志文件將被自動刪除。默認為0，表示不啟用過期自動刪除功能。如果啟用此功能，自動刪除工作通常發(fā)生在MySQL啟動時或FLUSH日志時。作用范圍為全局，可用于配置文件，屬動態(tài)變量。
general_log={ON|OFF}
設定是否啟用查詢日志，默認值為取決于在啟動mysqld時是否使用了--general_log選項。如若啟用此項，其輸出位置則由--log_output選項進行定義，如果log_output的值設定為NONE，即使用啟用查詢日志，其也不會記錄任何日志信息。作用范圍為全局，可用于配置文件，屬動態(tài)變量。
general_log_file=FILE_NAME
查詢日志的日志文件名稱，默認為“hostname.log"。作用范圍為全局，可用于配置文件，屬動態(tài)變量。
binlog-format={ROW|STATEMENT|MIXED}
指定二進制日志的類型，默認為STATEMENT，建議更改為MIXED。如果設定了二進制日志的格式，卻沒有啟用二進制日志，則MySQL啟動時會產生警告日志信息并記錄于錯誤日志中。作用范圍為全局或會話，可用于配置文件，且屬于動態(tài)變量。
log={YES|NO}
是否啟用記錄所有語句的日志信息于一般查詢日志(general query log)中，默認通常為OFF。MySQL 5.6已經棄用此選項。
log-bin={YES|NO}
是否啟用二進制日志，如果為mysqld設定了--log-bin選項，則其值為ON，否則則為OFF。其僅用于顯示是否啟用了二進制日志，并不反應log-bin的設定值。作用范圍為全局級別，屬非動態(tài)變量。
log_bin_trust_function_creators={TRUE|FALSE}
此參數僅在啟用二進制日志時有效，用于控制創(chuàng)建存儲函數時如果會導致不安全的事件記錄二進制日志條件下是否禁止創(chuàng)建存儲函數。默認值為0，表示除非用戶除了CREATE ROUTING或ALTER ROUTINE權限外還有SUPER權限，否則將禁止創(chuàng)建或修改存儲函數，同時，還要求在創(chuàng)建函數時必需為之使用DETERMINISTIC屬性，再不然就是附帶READS SQL DATA或NO SQL屬性。設置其值為1時則不啟用這些限制。作用范圍為全局級別，可用于配置文件，屬動態(tài)變量。
log_error=/PATH/TO/ERROR_LOG_FILENAME
定義錯誤日志文件。作用范圍為全局或會話級別，可用于配置文件，屬非動態(tài)變量。
log_output={TABLE|FILE|NONE}
定義一般查詢日志和慢查詢日志的保存方式，可以是TABLE、FILE、NONE，也可以是TABLE及FILE的組合(用逗號隔開)，默認為TABLE。如果組合中出現了NONE，那么其它設定都將失效，同時，無論是否啟用日志功能，也不會記錄任何相關的日志信息。作用范圍為全局級別，可用于配置文件，屬動態(tài)變量。
log_query_not_using_indexes={ON|OFF}
設定是否將沒有使用索引的查詢操作記錄到慢查詢日志。作用范圍為全局級別，可用于配置文件，屬動態(tài)變量。
log_slave_updates
用于設定復制場景中的從服務器是否將從主服務器收到的更新操作記錄進本機的二進制日志中。本參數設定的生效需要在從服務器上啟用二進制日志功能。
log_slow_queries={YES|NO}
是否記錄慢查詢日志。慢查詢是指查詢的執(zhí)行時間超出long_query_time參數所設定時長的事件。MySQL 5.6將此參數修改為了slow_query_log。作用范圍為全局級別，可用于配置文件，屬動態(tài)變量。
log_warnings=#
設定是否將警告信息記錄進錯誤日志。默認設定為1，表示啟用；可以將其設置為0以禁用；而其值為大于1的數值時表示將新發(fā)起連接時產生的“失敗的連接”和“拒絕訪問”類的錯誤信息也記錄進錯誤日志。
long_query_time=#
設定區(qū)別慢查詢與一般查詢的語句執(zhí)行時間長度。這里的語句執(zhí)行時長為實際的執(zhí)行時間，而非在CPU上的執(zhí)行時長，因此，負載較重的服務器上更容易產生慢查詢。其最小值為0，默認值為10，單位是秒鐘。它也支持毫秒級的解析度。作用范圍為全局或會話級別，可用于配置文件，屬動態(tài)變量。
max_binlog_cache_size{4096.. 18446744073709547520}
二進定日志緩存空間大小，5.5.9及以后的版本僅應用于事務緩存，其上限由max_binlog_stmt_cache_size決定。作用范圍為全局級別，可用于配置文件，屬動態(tài)變量。
max_binlog_size={4096.. 1073741824}
設定二進制日志文件上限，單位為字節(jié)，最小值為4K，最大值為1G，默認為1G。某事務所產生的日志信息只能寫入一個二進制日志文件，因此，實際上的二進制日志文件可能大于這個指定的上限。作用范圍為全局級別，可用于配置文件，屬動態(tài)變量。
max_relay_log_size={4096..1073741824}
設定從服務器上中繼日志的體積上限，到達此限度時其會自動進行中繼日志滾動。此參數值為0時，mysqld將使用max_binlog_size參數同時為二進制日志和中繼日志設定日志文件體積上限。作用范圍為全局級別，可用于配置文件，屬動態(tài)變量。
innodb_log_buffer_size={262144.. 4294967295}
設定InnoDB用于輔助完成日志文件寫操作的日志緩沖區(qū)大小，單位是字節(jié)，默認為8MB。較大的事務可以借助于更大的日志緩沖區(qū)來避免在事務完成之前將日志緩沖區(qū)的數據寫入日志文件，以減少I/O操作進而提升系統(tǒng)性能。因此，在有著較大事務的應用場景中，建議為此變量設定一個更大的值。作用范圍為全局級別，可用于選項文件，屬非動態(tài)變量。
innodb_log_file_size={108576.. 4294967295}
設定日志組中每個日志文件的大小，單位是字節(jié)，默認值是5MB。較為明智的取值范圍是從1MB到緩存池體積的1/n，其中n表示日志組中日志文件的個數。日志文件越大，在緩存池中需要執(zhí)行的檢查點刷寫操作就越少，這意味著所需的I/O操作也就越少，然而這也會導致較慢的故障恢復速度。作用范圍為全局級別，可用于選項文件，屬非動態(tài)變量。
innodb_log_files_in_group={2.. 100}
設定日志組中日志文件的個數。InnoDB以循環(huán)的方式使用這些日志文件。默認值為2。作用范圍為全局級別，可用于選項文件，屬非動態(tài)變量。
innodb_log_group_home_dir=/PATH/TO/DIR
設定InnoDB重做日志文件的存儲目錄。在缺省使用InnoDB日志相關的所有變量時，其默認會在數據目錄中創(chuàng)建兩個大小為5MB的名為ib_logfile0和ib_logfile1的日志文件。作用范圍為全局級別，可用于選項文件，屬非動態(tài)變量。
innodb_support_xa={TRUE|FLASE}
存儲引擎事務在存儲引擎內部被賦予了ACID屬性，分布式(XA)事務是一種高層次的事務，它利用“準備”然后“提交”(prepare-then-commit)兩段式的方式將ACID屬性擴展到存儲引擎外部，甚至是數據庫外部。然而，“準備”階段會導致額外的磁盤刷寫操作。XA需要事務協(xié)調員，它會通知所有的參與者準備提交事務(階段1)。當協(xié)調員從所有參與者那里收到“就緒”信息時，它會指示所有參與者進行真正的“提交”操作。
此變量正是用于定義InnoDB是否支持兩段式提交的分布式事務，默認為啟用。事實上，所有啟用了二進制日志的并支持多個線程同時向二進制日志寫入數據的MySQL服務器都需要啟用分布式事務，否則，多個線程對二進制日志的寫入操作可能會以與原始次序不同的方式完成，這將會在基于二進制日志的恢復操作中或者是從服務器上創(chuàng)建出不同原始數據的結果。因此，除了僅有一個線程可以改變數據以外的其它應用場景都不應該禁用此功能。而在僅有一個線程可以修改數據的應用中，禁用此功能是安全的并可以提升InnoDB表的性能。作用范圍為全局和會話級別，可用于選項文件，屬動態(tài)變量。
relay_log=file_name
設定中繼日志的文件名稱，默認為host_name-relay-bin。也可以使用絕對路徑，以指定非數據目錄來存儲中繼日志。作用范圍為全局級別，可用于選項文件，屬非動態(tài)變量。
relay_log_index=file_name
設定中繼日志的索引文件名，默認為為數據目錄中的host_name-relay-bin.index。作用范圍為全局級別，可用于選項文件，屬非動態(tài)變量。
relay-log-info-file=file_name
設定中繼服務用于記錄中繼信息的文件，默認為數據目錄中的relay-log.info。作用范圍為全局級別，可用于選項文件，屬非動態(tài)變量。
relay_log_purge={ON|OFF}
設定對不再需要的中繼日志是否自動進行清理。默認值為ON。作用范圍為全局級別，可用于選項文件，屬動態(tài)變量。
relay_log_space_limit=#
設定用于存儲所有中繼日志文件的可用空間大小。默認為0，表示不限定。最大值取決于系統(tǒng)平臺位數。作用范圍為全局級別，可用于選項文件，屬非動態(tài)變量。
slow_query_log={ON|OFF}
設定是否啟用慢查詢日志。0或OFF表示禁用，1或ON表示啟用。日志信息的輸出位置取決于log_output變量的定義，如果其值為NONE，則即便slow_query_log為ON，也不會記錄任何慢查詢信息。作用范圍為全局級別，可用于選項文件，屬動態(tài)變量。
slow_query_log_file=/PATH/TO/SOMEFILE
設定慢查詢日志文件的名稱。默認為hostname-slow.log，但可以通過--slow_query_log_file選項修改。作用范圍為全局級別，可用于選項文件，屬動態(tài)變量。
sql_log_bin={ON|OFF}
用于控制二進制日志信息是否記錄進日志文件。默認為ON，表示啟用記錄功能。用戶可以在會話級別修改此變量的值，但其必須具有SUPER權限。作用范圍為全局和會話級別，屬動態(tài)變量。
sql_log_off={ON|OFF}
用于控制是否禁止將一般查詢日志類信息記錄進查詢日志文件。默認為OFF，表示不禁止記錄功能。用戶可以在會話級別修改此變量的值，但其必須具有SUPER權限。作用范圍為全局和會話級別，屬動態(tài)變量。
sync_binlog=#
設定多久同步一次二進制日志至磁盤文件中，0表示不同步，任何正數值都表示對二進制每多少次寫操作之后同步一次。當autocommit的值為1時，每條語句的執(zhí)行都會引起二進制日志同步，否則，每個事務的提交會引起二進制日志同步。 建議設置為1。
網頁管理日志：
安裝工具：
開啟服務：
寫測試頁：
rsyslog可以管理系統(tǒng)日志和數據庫模塊
安裝連接數據庫所需包：
進入目錄并導入數據庫：
查看是否導入成功：
授權rsyslog用戶在本地可以以‘123456’的密碼訪問：
刷新：
配置服務端支持rsyslog-mysql 模塊，并開啟UDP服務端口獲取網內其他LINUX系統(tǒng)日志：
# vi /etc/rsyslog.conf
$ModLoad ommysql?
*.* :ommysql:localhost,Syslog,rsyslog,123456
在 ####MODULES #### 下添加上面兩行。
說明：localhost 表示本地主機，Syslog 為數據庫名，rsyslog 為數據庫的用戶，123456為該用戶密碼
開啟相關日志模塊：
重啟服務：
客戶端配置：
檢查rsyslog 是否安裝：
配置rsyslog客戶端發(fā)送本地日志到服務端
vi/etc/rsyslog.conf
行尾新增上面這行內容，即客戶端將本地日志發(fā)送到服務器。
重啟rsyslog 服務
編輯/etc/bashrc，將客戶端執(zhí)行的所有命令寫入系統(tǒng)日志/var/log/messages中。
vi/etc/bashrc
設置其生效
測試Rsyslog Server是否可以正常接受Client端日志
Client 端測試：
Server 端偵測：
安裝LogAnalyzer
# wget?http://download.adiscon.com/loganalyzer/loganalyzer-3.6.5.tar.gz
# tar zxfloganalyzer-3.6.5.tar.gz
# cd loganalyzer-3.6.5
# mkdir -p/var/www/html/loganalyzer
# rsync -a src/*/var/www/html/loganalyzer/
打開網頁（192.168.216.10/loganalyzer/）
提示沒有配置文件，點擊 here 利用向導生成。
修改權限：
?
?
?
?
?
轉載于:https://blog.51cto.com/lt519/1701733
總結
- 上一篇： NetSetMan IP地址切换工具
- 下一篇： FMDB/SQLCipher数据库管理