日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

MyISAM表加字段的特殊方法

發布時間:2023/12/10 编程问答 28 豆豆
生活随笔 收集整理的這篇文章主要介紹了 MyISAM表加字段的特殊方法 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

最近一個統計系統的大表需要加字段,表的引擎是myisam,表大小在3億,物理文件在106G。想想都蛋疼。那么這種情況下怎么把字段擼上去呢?

1. 首先想到了《高性能MySQL》提到的直接更改表結構文件(frm),但是在經過測試以后,發現提示表損壞了,需要repair,只好放棄了。

2. 使用pt-online-schema-change,剛開始跑沒有問題,后面在凌晨發現影響業務了,也只好放棄了。

3. 最近GitHub開源的gh-ost,屬于新鮮玩意,還沒有研究,只好放棄。

4. 創建新表,load數據,最后rename表。(前提是表只有insert,表是myisam引擎)

?

最后使用了第四種方案把字段加上了。那么下面就來詳細說說第三種方案。

我們假設要把tb_yayun表加兩個字段,uid,age。

老表(業務在使用的表):

mysql> show create table tb_yayun\G *************************** 1. row ***************************Table: tb_yayun Create Table: CREATE TABLE `tb_yayun` (`id` int(11) NOT NULL AUTO_INCREMENT,`name` char(20) DEFAULT NULL,`enter_time` datetime NOT NULL,PRIMARY KEY (`id`),KEY `enter_time` (`enter_time`) ) ENGINE=MyISAM DEFAULT CHARSET=utf8 1 row in set (0.00 sec)


環境準備:

1. 一臺空閑的服務器,沒跑業務,安裝了mysql實例的。在該服務器上面創建新表。

mysql> show create table tb_yayun_new\G *************************** 1. row ***************************Table: tb_yayun_new Create Table: CREATE TABLE `tb_yayun_new` (`id` int(11) NOT NULL AUTO_INCREMENT,`name` char(20) DEFAULT NULL,`enter_time` datetime NOT NULL,`uid` int(11) DEFAULT NULL,`age` int(11) DEFAULT NULL,PRIMARY KEY (`id`),KEY `enter_time` (`enter_time`) ) ENGINE=MyISAM DEFAULT CHARSET=utf8 1 row in set (0.00 sec)

2. 在線上服務器導出tb_yayun表的數據(這里有一個技巧,不需要全部導出,截止到某一天就行。)可以用下面下面命令:

mysql -uroot -p -q -s -e "use test;select *,'','' from tb_yayun where enter_time >= '2016-08-01 00:00:00'" > /data/tb_yayun.txt

3. 把導出的文件拷貝到上面提到的空閑服務器導入(時間會很長,我當時導入3億的表花了6小時):

LOAD DATA INFILE '/data/tb_yayun.txt' INTO TABLE tb_yayun_new;

4. 和開發確定一個切換時間;我們的數據都是先入隊列,所以是可以暫停一會兒寫入的。和開發確定好一個時間以后,比如要在2016-08-02 15:00:00以后切換,那么此時還需要做下面工作。還需要補一次數據,因為新表的數據只導入到了2016-08-01 00:00:00。所以再次從線上服務器導數據。

mysql -uroot -p -q -s -e "use test;select *,'','' from tb_yayun where enter_time >= '2016-08-02 00:00:00' and enter_time <= '2016-08-02 15:00:00' > /data/02_tb_yayun.txt

再次拷貝到空閑的服務器導入:

LOAD DATA INFILE '/data/02_tb_yayun.txt' INTO TABLE tb_yayun_new;

5. 當導入完成以后,把tb_yayun_new表的物理文件拷貝到線上服務器。(MYD,MYI,frm),注意權限。如果線上有1主3從,那么4臺服務器都需要拷貝。拷貝完成以后執行flush tables,然后每臺服務器檢查表是否正常。limit一下或者count一下都行。

6. 通知開發停止寫入,一般是把程序停止一會兒。具體時間不會超過10分鐘。當開發說已經停了導入數據的程序以后,我們要看看老表是否還有數據寫入,對于myisam表來說直接count看條數是否有變化就行。如果沒有數據寫入以后。執行下面的命令:

(1)再次從老服務器導數據,我們需要把數據補一致。(線上服務器)

mysql -uroot -p -q -s -e "use test;select *,'','' from tb_yayun where enter_time >= '2016-08-02 15:00:00' > /data/15_tb_yayun.txt

(2)load數據到tb_yayun_new(注意:會導致從庫延時,具體延時多久看導入的數據大小)

LOAD DATA INFILE '/data/15_tb_yayun.txt' INTO TABLE tb_yayun_new;

(3)對比新表老表數據是否一致。如果操作沒有錯誤的話,數據肯定是一致的。新表(tb_yayun_new),老表(tb_yayun)進行count確認。
(4)老表進行rename操作

alter table tb_yayun rename to tb_yayun_old_20160802;

(5)新表rename操作

alter table tb_yayun_new rename to tb_yayun;

?

7. 通知開發那邊開啟數據導入程序。至此大表加字段完成。

?

總結:

上面提到的方法有非常大的局限性,比如必須是myisam表,該表只有insert,還有就是業務能夠忍受5-10分鐘沒有最新數據。對于前臺業務當然無法忍受,不過如果是公司的統計系統,或者內部人員使用。則完全沒問題,影響非常小,溝通到位就行。

?

轉載于:https://www.cnblogs.com/gomysql/p/5747545.html

總結

以上是生活随笔為你收集整理的MyISAM表加字段的特殊方法的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。