前段時(shí)間使用MySQL作為數(shù)據(jù)存儲(chǔ)做了一個(gè)小項(xiàng)目。項(xiàng)目上線運(yùn)行了幾十天之后，數(shù)據(jù)已經(jīng)越來越多，達(dá)到了100多M。用mysqldump每天備份全量數(shù)據(jù)然后傳輸?shù)搅硗庖慌_(tái)機(jī)器上這種方式進(jìn)行數(shù)據(jù)備份，久而久之越來越慢。于是開始研究如何利用mysql的主從同步功能實(shí)現(xiàn)自動(dòng)備份。如果實(shí)現(xiàn)自動(dòng)備份，主從服務(wù)器之間只需要在有數(shù)據(jù)更新時(shí)同步一點(diǎn)增量數(shù)據(jù)，不會(huì)在備份時(shí)占用大量的CPU和內(nèi)網(wǎng)的網(wǎng)絡(luò)帶寬資源了。介紹主從同步之前，還是先從基礎(chǔ)的mysqldump備份開始講起。

mysqldump

mysqldump是mysql數(shù)據(jù)庫提供的一個(gè)數(shù)據(jù)備份工具。顧名思義，mysqldump可以把mysql數(shù)據(jù)庫導(dǎo)出成sql語句文件，并保存到磁盤上。mysqldump命令產(chǎn)生的.sql文件包含一系列SQL?INSERT語句，可以用來進(jìn)行數(shù)據(jù)恢復(fù)。

假定我們在星期日下午1點(diǎn)進(jìn)行了備份，此時(shí)負(fù)荷較低。下面的命令可以完全備份所有數(shù)據(jù)庫中的所有表：

1	shell> mysqldump?--single-transaction --all-databases > backup_sunday_1_PM.sql

使用mysqldump進(jìn)行數(shù)據(jù)備份，至少有兩個(gè)問題：

1 mysqldump運(yùn)行時(shí)，需要消耗一定的計(jì)算資源。而且數(shù)據(jù)庫越大，消耗的計(jì)算資源也就越多，因此可能會(huì)造成系統(tǒng)在備份時(shí)運(yùn)行效率低，容易造成用戶卡死。

2 對(duì)mysqldump備份的數(shù)據(jù)進(jìn)行恢復(fù)，會(huì)丟掉從備份點(diǎn)開始的更新數(shù)據(jù)。

為了解決第2點(diǎn)的問題， mysql文檔中給出了一個(gè)解決辦法。那就是利用mysqlbinlog二進(jìn)制文件保存增量的數(shù)據(jù)。采用全量mysqldump+增量mysqlbinlog的方式進(jìn)行數(shù)據(jù)恢復(fù)。

下面介紹mysqlbinlog

mysqlbinlog

?

mysqlbinlog就是mysql的二進(jìn)制數(shù)據(jù)文件。在對(duì)mysql進(jìn)行一些配置之后，mysql會(huì)把數(shù)據(jù)庫的更新操作都記錄在一個(gè)文件中。mysqlbinlog可以在mysqld的--bin-log選項(xiàng)或者在配置文件(my.cnf或者my.ini)中打開。

[mysqld]

log-bin=mysql-bin???//[必須]啟用二進(jìn)制日志

?

在啟用了二進(jìn)制日志以后，在mysql的數(shù)據(jù)目錄下，會(huì)出現(xiàn)一些以數(shù)字為結(jié)尾的文件，例如：

-rw-rw---- 1 guilhem? guilhem?? 1277324 Nov 10 23:59 mysql-bin.000001 -rw-rw---- 1 guilhem? guilhem???????? 4 Nov 10 23:59 mysql-bin.000002

?

?

這些文件就是二進(jìn)制的日志文件。每次mysql啟動(dòng)都會(huì)增加一個(gè)文件。

?

下面回到上節(jié)提出的問題，如何采用全量mysqldump+增量mysqlbinlog的方式進(jìn)行數(shù)據(jù)恢復(fù)？

方法其實(shí)很簡單，在每次使用mysqldump進(jìn)行全量數(shù)據(jù)備份時(shí)，用--flush-logs選項(xiàng)：

?

mysqldump --single-transaction --flush-logs --master-data=2 > backup.sql

?

在使用這樣的語句進(jìn)行備份之后，mysql就會(huì)關(guān)閉原來的二進(jìn)制日志文件，開啟一個(gè)新的二進(jìn)制日志文件。比如，新開啟的二進(jìn)制日志文件為 mysql-bin.000003。?那么在進(jìn)行數(shù)據(jù)恢復(fù)的時(shí)候，你可以利用backup.sql進(jìn)行全量恢復(fù)+ mysql-bin.000003進(jìn)行增量同步。

數(shù)據(jù)恢復(fù)的方法也很簡單。

?

1	cat backup.sql | mysql -uroot -ppassword

2	mysqlbinlog mysql-bin.000003 | mysql -uroot -ppassword

mysqlbinlog是一個(gè)讀取 mysql二進(jìn)制日志輸出sql語句的命令行工具。使用方法可以從http://doc.mysql.cn/mysql5/refman-5.1-zh.html-chapter/client-side-scripts.html#mysqlbinlog?查到。

還記得上文提出的mysqldump備份的兩個(gè)問題嗎，現(xiàn)在第二個(gè)問題解決了，第一個(gè)問題還沒有解決

“ mysqldump運(yùn)行時(shí)，需要消耗一定的計(jì)算資源。而且數(shù)據(jù)庫越大，消耗的計(jì)算資源也就越多，因此可能會(huì)造成系統(tǒng)在備份時(shí)運(yùn)行效率低，容易造成用戶卡死。”

下文中我們利用mysql主從同步來解決這個(gè)問題。

主從同步

主從同步的含義非常簡單。通過一定的設(shè)置，讓兩臺(tái)或者多臺(tái)mysql服務(wù)器的數(shù)據(jù)保持一致。設(shè)置的方法網(wǎng)上已經(jīng)有很多方法了，推薦這篇帖子http://369369.blog.51cto.com/319630/790921

設(shè)置成主從同步之后，基本上就免去了每天全量備份之苦。而且一但主數(shù)據(jù)庫出問題，可以馬上切換到從數(shù)據(jù)庫進(jìn)行服務(wù)，大大減少了故障恢復(fù)的時(shí)間。

?

我講一講我在配置中遇到的2個(gè)問題：

?

1 在從服務(wù)器上 show slave status時(shí)，顯示 Slave_SQL_Running: No. 錯(cuò)誤的原因是 mysql 數(shù)據(jù)庫的db表已經(jīng)存在，不能再建立。

?

錯(cuò)誤的原因是這樣的， 我在每臺(tái)數(shù)據(jù)上都運(yùn)行了 mysql_install_db這個(gè)命令安裝了 mysql test info_schema這3個(gè)數(shù)據(jù)庫。當(dāng)我主從同步開始時(shí)，主數(shù)據(jù)庫要向從數(shù)據(jù)庫同步建立mysql數(shù)據(jù)庫的操作。而從數(shù)據(jù)庫已經(jīng)建立了mysql數(shù)據(jù)庫。

?

我解決的方法是在配置文件里指明寫二進(jìn)制文件的數(shù)據(jù)庫名稱。只有真正需要同步的業(yè)務(wù)數(shù)據(jù)庫才寫二進(jìn)制文件。

主數(shù)據(jù)庫：

[mysqld]

binlog-do-db=exampledb

?

從數(shù)據(jù)庫：

[mysqld]

replicate-do-db=exampledb

?

2 我的主數(shù)據(jù)庫已經(jīng)運(yùn)行有一段時(shí)間了。在從服務(wù)器設(shè)置master_log_pos的時(shí)候設(shè)置成主服務(wù)器的當(dāng)前日志位置。結(jié)果同步時(shí)也出現(xiàn)了Slave_SQL_Running: No. 錯(cuò)誤的原因是： 執(zhí)行Insert語句時(shí)數(shù)據(jù)表沒有建立。

?

錯(cuò)誤的原因也很簡單，我在從數(shù)據(jù)庫里面還沒有建立對(duì)應(yīng)的數(shù)據(jù)庫，而同步的操作為插入數(shù)據(jù)。

?

解決的方法是通過mysqldump對(duì)主數(shù)據(jù)庫進(jìn)行一次全量數(shù)據(jù)備份，并且在從數(shù)據(jù)庫中恢復(fù)這個(gè)備份之后才開始進(jìn)行主從同步。

轉(zhuǎn)載于:https://www.cnblogs.com/martinjinyu/articles/3750422.html

總結(jié)

以上是生活随笔為你收集整理的MySQL 数据备份与同步的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。