mysql使用主从复制迁移,[MySQL进阶之路][No.0003] 主从复制(Replication)在运维中的运用...
前序
在之前的兩章里,主要介紹的主從復(fù)制(Replication)的基本使用方法和show slave status一些基本參數(shù),這一章我們講一下主從復(fù)制在生產(chǎn)環(huán)境中的一些在運(yùn)維中的常見(jiàn)用途。下面將要介紹的一些運(yùn)用可能在不同的地方有不同的叫法, 我取的名字可能比較隨意, 如果有不準(zhǔn)確或者有歧義的地方還請(qǐng)多多指教。
整體遷移
首先最常見(jiàn)的是主從 數(shù)據(jù)庫(kù) 整體的遷移。具體的運(yùn)用場(chǎng)景例如,當(dāng)要換一批新的 服務(wù)器 的時(shí)候,需要將當(dāng)前舊服務(wù)器的數(shù)據(jù)庫(kù)服務(wù)遷移到新的服務(wù)器上。這個(gè)時(shí)候就可以利用主從復(fù)制來(lái)進(jìn)行服務(wù)器的更換。具體流程如下圖。
圖例很簡(jiǎn)單,把新的主從集群做為slave掛在原來(lái)的集群下。之后把寫入讀取的指向改到新服務(wù)器上,整個(gè)遷移工作也就算完成了。
需要注意的是new master中一定要設(shè)置log_slave_updates為有效,不然不會(huì)將更新寫入binlog文件中。
整體合并
合并兩個(gè)或者多個(gè)主從數(shù)據(jù)庫(kù)群也是在運(yùn)維中經(jīng)常見(jiàn)到的。為了節(jié)省成本,需要將多個(gè)主從集群合并到一個(gè)集群中,這時(shí)可以運(yùn)用replication來(lái)整合數(shù)據(jù)。從多個(gè)主服務(wù)器獲取數(shù)據(jù)需要運(yùn)用multi-source replication(MSR)。其實(shí)就是通過(guò)change master命令的channel參數(shù)來(lái)區(qū)分多個(gè)復(fù)制源。
大體的原理如上圖所示, 這里需要注意的是如果你使用的是5.7, 并且設(shè)置了binlog_format=row, binlog_rows_query_log_events=on。
使用MSR會(huì)出現(xiàn)memory leak的bug。所以在5.7版本下,把binlog_format設(shè)成statement之后再做MSR吧。
https://bugs.mysql.com/bug.ph...
數(shù)據(jù)表分割
當(dāng)一張表越來(lái)越到大的時(shí)候, 其查詢速度也會(huì)變的越來(lái)越慢。 為了優(yōu)化性能, 我們需要對(duì)數(shù)據(jù)表進(jìn)行分割。數(shù)據(jù)表分割分為垂直分割和水平分割。
垂直分割是對(duì)表的列(column)進(jìn)行分割。如果一張表里有一些列不經(jīng)常用,可以用這種分割方法來(lái)提高搜索速度。缺點(diǎn)就是提高了業(yè)務(wù)層面的復(fù)雜度。
水平分割是將一張數(shù)據(jù)表的數(shù)據(jù)(record)分散到多個(gè)表里。這樣不僅可以減小索引B+樹(shù)的層數(shù),減少磁盤的讀取次數(shù)提高索引速度。(只有當(dāng)索引是比較大的值的時(shí)候優(yōu)化提升比較顯著)
水平分割和垂直分割的實(shí)現(xiàn)方法可能有很多種, 用replication來(lái)實(shí)現(xiàn)數(shù)據(jù)表分割個(gè)人覺(jué)得理解和實(shí)現(xiàn)比較簡(jiǎn)單。
水平分割
例如上面的例子,本來(lái)的數(shù)據(jù)庫(kù)里Table1表里的user1和user2的兩個(gè)數(shù)據(jù),通過(guò)replication將數(shù)據(jù)復(fù)制到兩個(gè)新的主從集群中,再將不要的數(shù)據(jù)刪除, 簡(jiǎn)單的水平分割就完成了。
垂直分割
和水平分割一樣,只是在刪除數(shù)據(jù)的時(shí)候刪除column。
小結(jié)
簡(jiǎn)單介紹了幾種比較常見(jiàn)的replication運(yùn)用的實(shí)例。這里只是介紹了最基本的實(shí)現(xiàn)原理,在實(shí)際生產(chǎn)環(huán)境中需要注意的東西還有很多。在以后有機(jī)會(huì)再同大家分享。
總結(jié)
以上是生活随笔為你收集整理的mysql使用主从复制迁移,[MySQL进阶之路][No.0003] 主从复制(Replication)在运维中的运用...的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: 可能是史上最美手机!魅族20系列来了:视
- 下一篇: linux cmake编译源码,linu