MySQL数据库“十宗罪”(十大经典错误案例)
各位技術(shù)老鐵們,福利來了!今天給大家說說《數(shù)據(jù)庫中十大經(jīng)典錯誤案例》
老張我在剛開始學(xué)習(xí)數(shù)據(jù)庫的時候,沒少走彎路。經(jīng)常會遇到各種稀奇古怪的 error 信息,遇到報錯會很慌張,急需一個解決問題的辦法。跟無頭蒼蠅一樣,會不加思索地把錯誤粘到百度上,希望趕緊查找一下有沒有好的處理問題的方法。我想這個應(yīng)該是剛從事數(shù)據(jù)庫的小白,都會遇到窘境。
今天就給大家列舉 MySQL 數(shù)據(jù)庫中,最經(jīng)典的十大錯誤案例,并附有處理問題的解決思路和方法,希望能給剛?cè)胄?#xff0c;或數(shù)據(jù)庫愛好者一些幫助,今后再遇到任何報錯,我們都可以很淡定地去處理。
學(xué)習(xí)任何一門技術(shù)的同時,其實就是自我修煉的過程。沉下心,嘗試去擁抱數(shù)據(jù)的世界!
Top 1:
Too many connections(連接數(shù)過多,導(dǎo)致連接不上數(shù)據(jù)庫,業(yè)務(wù)無法正常進(jìn)行)
問題還原
mysql>?show?variables?like?'%max_connection%'; |?Variable_name???|?Value?| max_connections?|?151???|? mysql>?set?global?max_connections=1;Query?OK,?0?rows?affected?(0.00?sec) [root@node4?~]#?mysql?-uzs?-p123456?-h?192.168.56.132 ERROR?1040?(00000):?Too?many?connections解決問題的思路:??
1、首先先要考慮在我們 MySQL 數(shù)據(jù)庫參數(shù)文件里面,對應(yīng)的 max_connections 這個參數(shù)值是不是設(shè)置的太小了,導(dǎo)致客戶端連接數(shù)超過了數(shù)據(jù)庫所承受的最大值。
- 該值默認(rèn)大小是151,我們可以根據(jù)實際情況進(jìn)行調(diào)整。
- 對應(yīng)解決辦法:set global max_connections=500
但這樣調(diào)整會有隱患,因為我們無法確認(rèn)數(shù)據(jù)庫是否可以承擔(dān)這么大的連接壓力,就好比原來一個人只能吃一個饅頭,但現(xiàn)在卻非要讓他吃 10 個,他肯定接受不了。反應(yīng)到服務(wù)器上面,就有可能會出現(xiàn)宕機(jī)的可能。
所以這又反應(yīng)出了,我們在新上線一個業(yè)務(wù)系統(tǒng)的時候,要做好壓力測試。保證后期對數(shù)據(jù)庫進(jìn)行優(yōu)化調(diào)整。
2、其次可以限制 Innodb 的并發(fā)處理數(shù)量,如果 innodb_thread_concurrency = 0(這種代表不受限制) 可以先改成 16或是64 看服務(wù)器壓力。如果非常大,可以先改的小一點讓服務(wù)器的壓力下來之后,然后再慢慢增大,根據(jù)自己的業(yè)務(wù)而定。個人建議可以先調(diào)整為 16 即可。
MySQL 隨著連接數(shù)的增加性能是會下降的,可以讓開發(fā)配合設(shè)置 thread pool,連接復(fù)用。在MySQL商業(yè)版中加入了thread pool這項功能
另外對于有的監(jiān)控程序會讀取 information_schema 下面的表,可以考慮關(guān)閉下面的參數(shù)
innodb_stats_on_metadata=0
set global innodb_stats_on_metadata=0
Top 2:(主從復(fù)制報錯類型)
Last_SQL_Errno: 1062? (從庫與主庫數(shù)據(jù)沖突)?
Last_Errno:?1062 ???Last_Error:?Could?not?execute?Write_rows?event?on?table?test.t;? ???Duplicate?entry?'4'?for?key?'PRIMARY',? ???Error_code:?1062;?handler?error?HA_ERR_FOUND_DUPP_KEY;? ???the?event's?master?log?mysql-bin.000014,?end_log_pos?1505針對這個報錯,我們首先要考慮是不是在從庫中誤操作導(dǎo)致的。結(jié)果發(fā)現(xiàn),我們在從庫中進(jìn)行了一條針對有主鍵表的 sql 語句的插入,導(dǎo)致主庫再插入相同 sql 的時候,主從狀態(tài)出現(xiàn)異常。發(fā)生主鍵沖突的報錯。
解決方法:
在確保主從數(shù)據(jù)一致性的前提下,可以在從庫進(jìn)行錯誤跳過。一般使用 percona-toolkit 中的 pt-slave-restart 進(jìn)行。
在從庫完成如下操作
[root@zs bin]# ./pt-slave-restart -uroot -proot123
2017-07-20T14:05:30 p=…,u=root node4-relay-bin.000002??????? 1506 1062?
之后最好在從庫中開啟 read_only 參數(shù),禁止在從庫進(jìn)行寫入操作
Last_IO_Errno: 1593(server-id沖突)
??Last_IO_Error:?Fatal?error:?The?slave?I/O?thread?stops?because?master?and?slave?have?equal?MySQL?server?ids;? ??these?ids?must?be?different?for?replication?to?work? ??(or?the?--replicate-same-server-id?option?must?be?used?on?slave?but?this? ??does?not?always?make?sense;?please?check?the?manual?before?using?it)這個報錯出現(xiàn)之后,就看一目了然看到兩臺機(jī)器的 server-id 是一樣的。
在搭建主從復(fù)制的過程中,我們要確保兩臺機(jī)器的 server-id 是唯一的。這里再強(qiáng)調(diào)一下 server-id 的命名規(guī)則(服務(wù)器 ip 地址的最后一位+本 MySQL 服務(wù)的端口號)
解決方法:
在主從兩臺機(jī)器上設(shè)置不同的 server-id。
Last_SQL_Errno: 1032(從庫少數(shù)據(jù),主庫更新的時候,從庫報錯)
Last_SQL_Error: Could?not?execute?Update_rows?event?on?table?test.t;?Can't?find?record? in?'t',?Error_code:?1032;?handler?error?HA_ERR_KEY_NOT_FOUND;?the? event's?master?log?mysql-bin.000014,?end_log_pos?1708解決問題的辦法:
根據(jù)報錯信息,我們可以獲取到報錯日志和position號,然后就能找到主庫執(zhí)行的哪條sql,導(dǎo)致的主從報錯。
在主庫執(zhí)行:
/usr/local/mysql/bin/mysqlbinlog –no-defaults -v -v –base64-output=decode-rows /data/mysql/mysql-bin.000014 |grep -A 10 1708 > 1.log
cat 1.log
#170720?14:20:15?server?id?3??end_log_pos?1708?CRC32?0x97b6bdec?????Update_rows:?table?id?113?flags:?STMT_END_F ###?UPDATE?`test`.`t` ###?WHERE ###???@1=4?/*?INT?meta=0?nullable=0?is_null=0?*/ ###???@2='dd'?/*?VARSTRING(60)?meta=60?nullable=1?is_null=0?*/ ###?SET ###???@1=4?/*?INT?meta=0?nullable=0?is_null=0?*/ ###???@2='ddd'?/*?VARSTRING(60)?meta=60?nullable=1?is_null=0?*/ #?at?1708 #170720?14:20:15?server?id?3??end_log_pos?1739?CRC32?0xecaf1922?????Xid?=?654 COMMIT/*!*/; DELIMITER?; #?End?of?log?file ROLLBACK?/*?added?by?mysqlbinlog?*/; /*!50003?SET?COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/; /*!50530?SET?@@SESSION.PSEUDO_SLAVE_MODE=0*/;獲取到 sql 語句之后,就可以在從庫反向執(zhí)行 sql 語句。把從庫缺少的 sql 語句補(bǔ)全,解決報錯信息。
在從庫依次執(zhí)行:
mysql> insert into t (b) values (‘ddd’);
Query OK, 1 row affected (0.01 sec)
mysql> stop slave;
Query OK, 0 rows affected (0.00 sec)
mysql> exit
Bye
[root@node4 bin]# ./pt-slave-restart -uroot -proot123
2017-07-20T14:31:37 p=…,u=root node4-relay-bin.000005???????? 283 1032
Top 3:MySQL安裝過程中的報錯
[root@zs?data]#?/usr/local/mysql/bin/mysqld_safe?--defaults-file=/etc/my.cnf?&[1]?3758 [root@zs?data]#?170720?14:41:24?mysqld_safe?Logging?to?'/data/mysql/error.log'. 170720?14:41:24?mysqld_safe?Starting?mysqld?daemon?with?databases?from?/data/mysql170720? 14:41:25?mysqld_safe?mysqld?from?pid?file?/data/mysql/node4.pid?ended 170720?14:41:24?mysqld_safe?Starting?mysqld?daemon?with?databases?from?/data/mysql2017-07-20? 14:41:25?0?[Warning]?TIMESTAMP?with?implicit?DEFAULT?value?is?deprecated.? Please?use?--explicit_defaults_for_timestamp?server?option? (see?documentation?for?more?details)./usr/local/mysql/bin/mysqld:? File?'/data/mysql/mysql-bin.index'?not?found?(Errcode:?13?-?Permission?denied) 2017-07-20?14:41:25?4388?[ERROR]?Aborting解決思路:
遇到這樣的報錯信息,我們要學(xué)會時時去關(guān)注錯誤日志 error log 里面的內(nèi)容。看見了關(guān)鍵的報錯點?Permission denied。證明當(dāng)前 MySQL 數(shù)據(jù)庫的數(shù)據(jù)目錄沒有權(quán)限。
解決方法:
[root@zs data]# chown mysql:mysql -R mysql
[root@zs data]# /usr/local/mysql/bin/mysqld_safe –defaults-file=/etc/my.cnf &
[1] 4402
[root@zs data]# 170720 14:45:56 mysqld_safe Logging to ‘/data/mysql/error.log’.
170720 14:45:56 mysqld_safe Starting mysqld daemon with databases from /data/mysql
啟動成功。
如何避免這類問題,個人建議在安裝 MySQL 初始化的時候,一定加上–user=mysql,這樣就可以避免權(quán)限問題。
./mysql_install_db –basedir=/usr/local/mysql/ –datadir=/data/mysql/ –defaults-file=/etc/my.cnf –user=mysql
Top 4:數(shù)據(jù)庫密碼忘記的問題
[root@zs?~]#?mysql?-uroot?-p Enter?password:? ERROR?1045?(28000):?Access?denied?for?user?'root'@'localhost'?(using?password:?YES) [root@zs?~]#?mysql?-uroot?-p Enter?password:? ERROR?1045?(28000):?Access?denied?for?user?'root'@'localhost'?(using?password:?YES)我們有可能剛剛接手別人的 MySQL 數(shù)據(jù)庫,而且沒有完善的交接文檔。root 密碼可以丟失或者忘記了。
解決思路:
目前是進(jìn)入不了數(shù)據(jù)庫的情況,所以我們要考慮是不是可以跳過權(quán)限。因為在數(shù)據(jù)庫中,mysql數(shù)據(jù)庫中user表記錄著我們用戶的信息。
解決方法:
啟動 MySQL 數(shù)據(jù)庫的過程中,可以這樣執(zhí)行:
/usr/local/mysql/bin/mysqld_safe –defaults-file=/etc/my.cnf? –skip-grant-tables &
這樣啟動,就可以不用輸入密碼,直接進(jìn)入 mysql 數(shù)據(jù)庫了。然后在修改你自己想要改的root密碼即可。
update mysql.user set password=password(‘root123′) where user=’root’;
Top 5:truncate 刪除數(shù)據(jù),導(dǎo)致自動清空自增ID,前端返回報錯 not found。
這個問題的出現(xiàn),就要考慮下 truncate 和 delete 的區(qū)別了。
看下實驗演練:
首先先創(chuàng)建一張表;
CREATE?TABLE?`t`?( ??`a`?int(11)?NOT?NULL?AUTO_INCREMENT, ??`b`?varchar(20)?DEFAULT?NULL, ??PRIMARY?KEY?(`a`), ??KEY?`b`?(`b`) )?ENGINE=InnoDB?AUTO_INCREMENT=300?DEFAULT?CHARSET=utf8插入三條數(shù)據(jù):
mysql>?insert?into?t?(b)?values?('aa'); Query?OK,?1?row?affected?(0.00?sec) mysql>?insert?into?t?(b)?values?('bb'); Query?OK,?1?row?affected?(0.00?sec) mysql>?insert?into?t?(b)?values?('cc'); Query?OK,?1?row?affected?(0.00?sec) mysql>?select?*?from?t; +-----+------+ |?a???|?b????| +-----+------+ |?300?|?aa???| |?301?|?bb???| |?302?|?cc???| +-----+------+ 3?rows?in?set?(0.00?sec)先用 delete 進(jìn)行刪除全表信息,再插入新值。
結(jié)果發(fā)現(xiàn) truncate 把自增初始值重置了,自增屬性從1開始記錄了。當(dāng)前端用主鍵id進(jìn)行查詢時,就會報沒有這條數(shù)據(jù)的錯誤。
個人建議不要使用 truncate 對表進(jìn)行刪除操作,雖然可以回收表空間,但是會涉及自增屬性問題。這些坑,我們不要輕易鉆進(jìn)去。
Top 6:
阿里云 MySQL 的配置文件中,需要注意一個參數(shù)設(shè)置就是:
lower_case_table_names = 0;默認(rèn)情況
lower_case_table_names = 1;是不區(qū)分大小寫 . 如果報你小寫的表名找不到, 那你就把遠(yuǎn)端數(shù)據(jù)庫的表名改成小寫 , 反之亦然 . 注意 Mybatis 的 Mapper 文件的所有表名也要相應(yīng)修改
Top 7:
有同學(xué)經(jīng)常會問張老師,為什么我的數(shù)據(jù)庫總會出現(xiàn)中文亂碼的情況。一堆????不知道怎么回事。當(dāng)向數(shù)據(jù)庫中寫入創(chuàng)建表,并插入中文時,會出現(xiàn)這種問題。此報錯會涉及數(shù)據(jù)庫字符集的問題。
解決思路:
對于中文亂碼的情況,記住老師告訴你的三個統(tǒng)一就可以。還要知道在目前的mysql數(shù)據(jù)庫中字符集編碼都是默認(rèn)的UTF8
處理辦法:
1、數(shù)據(jù)終端,也就是我們連接數(shù)據(jù)庫的工具設(shè)置為 utf8
2、操作系統(tǒng)層面;可以通過 cat /etc/sysconfig/i18n 查看;也要設(shè)置為 utf8
3、數(shù)據(jù)庫層面;在參數(shù)文件中的 mysqld 下,加入 character-set-server=utf8。
Emoji 表情符號錄入 mysql 數(shù)據(jù)庫中報錯。
Caused by: java.sql.SQLException: Incorrect?string?value:?'ee...'?for?column?'CONTENT'?at row?1 at?com.mysql.jdbc.SQLError.createSQLException(SQLError.java:1074) at?com.mysql.jdbc.MysqlIO.checkErrorPacket(MysqlIO.java:4096) at?com.mysql.jdbc.MysqlIO.checkErrorPacket(MysqlIO.java:4028) at?com.mysql.jdbc.MysqlIO.sendCommand(MysqlIO.java:2490) at?com.mysql.jdbc.MysqlIO.sqlQueryDirect(MysqlIO.java:2651) at?com.mysql.jdbc.ConnectionImpl.execSQL(ConnectionImpl.java:2734) at?com.mysql.jdbc.PreparedStatement.executeInternal(PreparedStatement.java:2155) at?com.mysql.jdbc.PreparedStatement.execute(PreparedStatement.java:1379)解決思路:針對表情插入的問題,一定還是字符集的問題。
處理方法:我們可以直接在參數(shù)文件中,加入
vim /etc/my.cnf
[mysqld]
init-connect=’SET NAMES utf8mb4′
character-set-server=utf8mb4
注:utf8mb4 是 utf8 的超集。
Top 8:使用 binlog_format=statement 這種格式,跨庫操作,導(dǎo)致從庫丟失數(shù)據(jù),用戶訪問導(dǎo)致出現(xiàn)錯誤數(shù)據(jù)信息。
當(dāng)前數(shù)據(jù)庫二進(jìn)制日志的格式為:binlog_format=statement
在主庫設(shè)置binlog-do-db=mydb1(只同步mydb1這一個庫)
在主庫執(zhí)行use mydb2;
insert into mydb1.t1 values (‘bb’);這條語句不會同步到從庫。
但是這樣操作就可以;
use mydb1;
insert into mydb1.t1 values (‘bb’);因為這是在同一個庫中完成的操作。
在生產(chǎn)環(huán)境中建議使用binlog的格式為row,而且慎用binlog-do-db參數(shù)。
Top 9:MySQL 數(shù)據(jù)庫連接超時的報錯 ;
org.hibernate.util.JDBCExceptionReporter?-?SQL?Error:0,?SQLState:?08S01 org.hibernate.util.JDBCExceptionReporter?-?The?last?packet?successfully?received?from?the?server?was43200?milliseconds?ago.The?last?packet?sent?successfully?to?the?server?was?43200?milliseconds?ago,?which?is?longer?than?the?server?configured?value?of?'wait_timeout'.?You?should?consider?either?expiring?and/or?testing?connection?validity?before?use?in?your?application,?increasing?the?server?configured?values?for?client?timeouts,?or?using?the?Connector/J?connection?'autoReconnect=true'?to?avoid?this?problem. org.hibernate.event.def.AbstractFlushingEventListener?-?Could?not?synchronize?database?state?with?session org.hibernate.exception.JDBCConnectionException:?Could?not?execute?JDBC?batch?update com.mysql.jdbc.exceptions.jdbc4.MySQLNonTransientConnectionException:?Connection.close()?has?already?been?called.?Invalid?operation?in?this?state. org.hibernate.util.JDBCExceptionReporter?-?SQL?Error:0,?SQLState:?08003 org.hibernate.util.JDBCExceptionReporter?-?No?operations?allowed?after?connection?closed.?Connection?was?implicitly?closed?due?to?underlying?exception/error: ?**?BEGIN?NESTED?EXCEPTION?轉(zhuǎn)載于:https://www.cnblogs.com/syncnavigator/p/10189448.html
總結(jié)
以上是生活随笔為你收集整理的MySQL数据库“十宗罪”(十大经典错误案例)的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: log4j2分层输出日志
- 下一篇: 时序数据库InfluxDB