利用硬鏈接和truncate降低droptable對(duì)線(xiàn)上環(huán)境的影響_MySQL

首先，我們看一下為什么drop容量大的table會(huì)影響線(xiàn)上服務(wù)

　　直接執(zhí)行drop table，mysql會(huì)將表定義和表數(shù)據(jù)全都刪除，包括磁盤(pán)上的物理文件，也包括buffer pool中的內(nèi)存數(shù)據(jù)。

　　這就分兩步，第一步從buffer pool中刪除，這會(huì)涉及到table_cache的lock，如果持有table_cache的lock，這將導(dǎo)致其他查詢(xún)都無(wú)法執(zhí)行。這種情況在沒(méi)有innodb_per_table之前尤為嚴(yán)重。另外，mysql5.5.23之后添加lazy drop table功能，這個(gè)功能用來(lái)解決mutex on the LRU list。其中心思想就是加鎖，找到需要被刪除的page，刪除1024個(gè)page之后釋放鎖讓其他thread工作，之后loop。而percona的lazy drop處理起來(lái)更優(yōu)雅一些，其會(huì)先加鎖，然后找到需要被刪除的page，標(biāo)記，釋放鎖，后臺(tái)慢慢刪除。

　　之后就是第二步，這步在大容量表的時(shí)候更為消耗時(shí)間，那就是在os上刪除物理文件。大家都知道在ext3上rm一個(gè)200G的文件會(huì)非常耗時(shí)，這是由于ext3存儲(chǔ)數(shù)據(jù)的結(jié)構(gòu)導(dǎo)致，如果一個(gè)很大的文件，ext3的i_block無(wú)法直接存放，需要多層嵌套才能完全存儲(chǔ)下，在這種情況下由于映射的層次多，并且由于多層映射也不會(huì)是順序存儲(chǔ)的，就導(dǎo)致了很大的隨機(jī)IO，這就導(dǎo)致了刪除物理文件非常慢的現(xiàn)象。在這種情況下，建議升級(jí)到ext4，這是由于ext4比ext3使用extent分配存儲(chǔ)空間，其最大的優(yōu)勢(shì)就是順序存儲(chǔ)。

ext3：

ext4：

知道了原因，我們來(lái)說(shuō)說(shuō)如何解決。具體步驟如下：

　1、建立硬鏈接。

ln table.ibd table.idb.hdlk

　　2、mysql執(zhí)行drop table操作。

drop table if exists tablename；

　　3、使用truncate刪除物理文件。

truncate -s 1024*1024*4 filename

　　其實(shí)硬鏈接和drop table就不用多說(shuō)了，在建立硬鏈接之后，mysql會(huì)認(rèn)為rm了硬鏈接文件之后就算操作完畢，不會(huì)真正去刪除物理文件從而提高了速度。但是對(duì)于服務(wù)器來(lái)說(shuō)，實(shí)際的物理文件還在，如果手動(dòng)rm，還是會(huì)產(chǎn)生很多的io影響，這時(shí)候就用到了truncate這個(gè)工具。這個(gè)工具會(huì)根據(jù)指定的size大小進(jìn)行逐步刪除，會(huì)將對(duì)IO造成的影響降到最低。

Usage: truncate OPTION... FILE...Shrink or extend the size of each FILE to the specified sizeA FILE argument that does not exist is created.If a FILE is larger than the specified size, the extra data is lost.If a FILE is shorter, it is extended and the extended part (hole)reads as zero bytes.Mandatory arguments to long options are mandatory for short options too. -c, --no-create do not create any files -o, --io-blocks treat SIZE as number of IO blocks instead of bytes -r, --reference=RFILE base size on RFILE -s, --size=SIZE set or adjust the file size by SIZE --help display this help and exit --version output version information and exitSIZE may be (or may be an integer optionally followed by) one of following:KB 1000, K 1024, MB 1000*1000, M 1024*1024, and so on for G, T, P, E, Z, Y.SIZE may also be prefixed by one of the following modifying characters:`+' extend by, `-' reduce by, `<' at most, `>' at least,`/' round down to multiple of, `%' round up to multiple of.Report truncate bugs to bug-coreutils@gnu.orgGNU coreutils home page: General help using GNU software: For complete documentation, run: info coreutils 'truncate invocation'

聲明：本網(wǎng)頁(yè)內(nèi)容旨在傳播知識(shí)，若有侵權(quán)等問(wèn)題請(qǐng)及時(shí)與本網(wǎng)聯(lián)系，我們將在第一時(shí)間刪除處理。TEL:177 7030 7066 E-MAIL:11247931@qq.com