日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當(dāng)前位置: 首頁 > 运维知识 > 数据库 >内容正文

数据库

mysql数据库truncate 夯住_MySQL如何优雅的删除大表实例详解

發(fā)布時間:2025/3/21 数据库 31 豆豆
生活随笔 收集整理的這篇文章主要介紹了 mysql数据库truncate 夯住_MySQL如何优雅的删除大表实例详解 小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.

前言

刪除表,大家下意識想到的命令可能是直接使用DROP TABLE "表名",這是初生牛犢的做法,因為當(dāng)要刪除的表達空間到幾十G,甚至是幾百G的表時候。這樣一條命令下去,MySQL可能就直接夯住了,外在表現(xiàn)就是QPS急速下降,客戶請求變慢。

解決辦法

1.業(yè)務(wù)低峰時間手動執(zhí)行刪除

這個可能就需要DBA不辭辛勞,大晚上爬起來刪表了。

2.先清除數(shù)據(jù),最后再刪除的方式

譬如1000萬條數(shù)據(jù),寫腳本每次刪除20萬,睡眠一段時間,繼續(xù)執(zhí)行。這樣也能做到對用戶無感知。

3.對表文件(idb文件)做一個硬鏈接來加速刪除

這個方法利用了linux下硬鏈接的知識,來進行快速刪除,不記得話可以回去翻一下《鳥哥的linux私房菜》

ln data_center_update_log.ibd data_center_update_log.ibd.hdlk

[root@mysql01 sports_center]# ll

總用量 19903792

-rw-r----- 1 mysql mysql 9076 10月 17 13:15 data_center_update_log.frm

-rw-r----- 2 mysql mysql 8447328256 12月 23 11:35 data_center_update_log.ibd

-rw-r----- 2 mysql mysql 8447328256 12月 23 11:35 data_center_update_log.ibd.hdlk

執(zhí)行上面命令后,我們就多了一個data_center_update_log.ibd.hdlk文件。此操作實際上不會占用磁盤空間,只是增加了一次對磁盤上文件的引用。

當(dāng)我們刪除其中任何一個文件時,都不會影響磁盤上真實的文件,只是將其引用數(shù)目減去1。當(dāng)被引用的數(shù)目變?yōu)?的時候,再去刪除文件,才會真正做IO來刪除它。

正是利用這個特點,將由原來mysql來刪除大文件的操作,轉(zhuǎn)換為一個簡單的操作系統(tǒng)級的文件刪除,從而減少了對mysql的影響。

4.登陸mysql,執(zhí)行drop表操作

很快,200萬條數(shù)據(jù)只用了1秒完成,此操作是在創(chuàng)建硬鏈接后執(zhí)行的

mysql> drop tables data_center_update_log;

Query OK, 0 rows affected (1.02 sec)

mysql> exit

Bye

退出來,再次查看數(shù)據(jù)目錄,發(fā)現(xiàn)就只剩data_center_update_log.ibd.hdlk硬鏈接文件了

[root@mysql01 sports_center]# ll

總用量 19903792

-rw-r----- 2 mysql mysql 8447328256 12月 23 11:35 data_center_update_log.ibd.hdlk

5.如何正確刪除ibd.hdlk硬鏈接文件呢

雖然drop table之后,剩下的硬鏈接文件已經(jīng)和mysql沒有關(guān)系了。但如果文件過大,直接用rm命令來刪除,也是會造成IO開銷飆升,CPU負(fù)載過高,進而影響到MySQL。

這里我們用到的方法,可以循環(huán)分塊刪除,慢慢地清理文件,通過一個腳本即可搞定

Truncate命令通常用于將文件縮小或擴展到指定的大小。如果文件大于指定的大小,則會丟失額外的數(shù)據(jù)。如果文件較短,則會對其進行擴展,并且擴展部分的讀數(shù)為零字節(jié)。

5.1 安裝truncate命令

[root@mysql01 ~]# cruncate

-bash: cruncate: 未找到命令

通常操作系統(tǒng)會安裝truncate命令,該命令在coreutils安裝包里面,如果沒有安裝可以使用下面命令安裝

[root@mysql01 ~]# yum provides truncate

coreutils-8.22-24.el7.x86_64 : A set of basic GNU tools commonly used in shell scripts

源 :base

匹配來源:

文件名 :/usr/bin/truncate

可以看到truncate由coreutils安裝包提供,下面安裝coreutils安裝包:

[root@mysql01 ~]# yum install -y coreutils

5.2 truncate常用選項

-c, --no-create --> 不創(chuàng)建任何文件

-o, --io-blocks --> 將大小視為存儲塊的數(shù)量,而不是字節(jié)

-r, --reference=RFILE --> 參考指定的文件大小

-s, --size=SIZE --> 按照指定的字節(jié)設(shè)置文件大小

5.3 truncate_bigfile.sh腳本

原理:使用truncate -s選項可以指定文件大小,通過腳本指定每次文件減少的大小,并sleep睡眠一定時間,從而達到可控的刪除文件

附:truncate_bigfile.sh腳本

#! /bin/bash

#

TRUNCATE=/usr/bin/truncate

FILE=$1

if [ x"$1" = x ];then

echo "Please input filename in"

exit 1;

else

SIZE_M=$(du -sm "$1" | awk "{print $1}")

for i in $(seq "${SIZE_M}" -100 0)

do

sleep 1

echo "${TRUNCATE} -s ${i}M ${FILE}"

${TRUNCATE} -s "${i}"M "${FILE}"

done

fi

if [ $? -eq 0 ];then

m -f "${FILE}"

else

echo "Please check file"

fi

總結(jié)

到此這篇關(guān)于MySQL如何優(yōu)雅的刪除大表的文章就介紹到這了,更多相關(guān)MySQL優(yōu)雅刪除大表內(nèi)容請搜索云海天教程以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持云海天教程!

總結(jié)

以上是生活随笔為你收集整理的mysql数据库truncate 夯住_MySQL如何优雅的删除大表实例详解的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯,歡迎將生活随笔推薦給好友。