MySQL集群是一種在無共享架構(gòu)(SNA，Share Nothing Architecture)系統(tǒng)里應(yīng)用內(nèi)存數(shù)據(jù)庫集群的技術(shù)。這種無共享的架構(gòu)可以使得系統(tǒng)使用低廉的硬件獲取高的可擴展性。

MySQL集群是一種分布式設(shè)計，目標(biāo)是要達(dá)到?jīng)]有任何單點故障點。因此，任何組成部分都應(yīng)該擁有自己的內(nèi)存和磁盤。任何共享存儲方案如網(wǎng)絡(luò)共享，網(wǎng)絡(luò)文件系統(tǒng)和SAN設(shè)備是不推薦或不支持的。通過這種冗余設(shè)計，MySQL聲稱數(shù)據(jù)的可用度可以達(dá)到99.999%。

實際上，MySQL集群是把一個叫做NDB的內(nèi)存集群存儲引擎集成與標(biāo)準(zhǔn)的MySQL服務(wù)器集成。它包含一組計算機，每個都跑一個或者多個進程，這可能包括一個MySQL服務(wù)器，一個數(shù)據(jù)節(jié)點，一個管理服務(wù)器和一個專有的一個數(shù)據(jù)訪問程序。它們之間的關(guān)系如下圖所示：

存儲引擎

MySQL Cluster 使用了一個專用的基于內(nèi)存的存儲引擎，這樣做的好處是速度快， 沒有磁盤I/O的瓶頸，但是由于是基于內(nèi)存的，所以數(shù)據(jù)庫的規(guī)模受系統(tǒng)總內(nèi)存的限制， 如果運行NDB的MySQL服務(wù)器一定要內(nèi)存夠大，比如4G, 8G, 甚至16G。NDB引擎是分布式的，它可以配置在多臺服務(wù)器上來實現(xiàn)數(shù)據(jù)的可靠性和擴展性，理論上 通過配置2臺NDB的存儲節(jié)點就能實現(xiàn)整個數(shù)據(jù)庫集群的冗余性和解決單點故障問題。

該存儲引擎有下列弊端：

基于內(nèi)存，數(shù)據(jù)庫的規(guī)模受集群總內(nèi)存的大小限制

基于內(nèi)存，斷電后數(shù)據(jù)可能會有數(shù)據(jù)丟失，這點還需要通過測試驗證。

多個節(jié)點通過網(wǎng)絡(luò)實現(xiàn)通訊和數(shù)據(jù)同步、查詢等操作，因此整體性受網(wǎng)絡(luò)速度影響，

因此速度也比較慢

當(dāng)然也有它的優(yōu)點：

多個節(jié)點之間可以分布在不同的地理位置，因此也是一個實現(xiàn)分布式數(shù)據(jù)庫的方案。

擴展性很好，增加節(jié)點即可實現(xiàn)數(shù)據(jù)庫集群的擴展。

冗余性很好，多個節(jié)點上都有完整的數(shù)據(jù)庫數(shù)據(jù)，因此任何一個節(jié)點宕機都不會造成服務(wù)中斷。

實現(xiàn)高可用性的成本比較低，不象傳統(tǒng)的高可用方案一樣需要共享的存儲設(shè)備和專用的軟件才能實現(xiàn)，NDB 只要有足夠的內(nèi)存就能實現(xiàn)。

體系結(jié)構(gòu)

MySQL Cluster 由3個不同功能的服務(wù)構(gòu)成，每個服務(wù)由一個專用的守護進程提供，一項 服務(wù)也叫做一個節(jié)點，下面來介紹每個節(jié)點的功能。

The management (MGM) node

管理節(jié)點，用來實現(xiàn)整個集群的管理，理論上一般只啟動一個，而且宕機也不影響 cluster 的服務(wù)，這個進程只在cluster 啟動以及節(jié)點加入集群時起作用， 所以這個節(jié)點不是很需要冗余，理論上通過一臺服務(wù)器提供服務(wù)就可以了。

通過 ndb_mgmd 命令啟動，使用 config.ini 配置文件

The storage or database (DB) node:

數(shù)據(jù)庫節(jié)點，用來存儲數(shù)據(jù)，可以和管理節(jié)點(MGM) , 用戶端節(jié)點(API) 可以處在 不同的機器上，也可以在同一個機器上面，集群中至少要有一個DB節(jié)點，2個以上 時就能實現(xiàn)集群的高可用保證，DB節(jié)點增加時，集群的處理速度會變慢。

通過 ndbd 命令啟動，第一次創(chuàng)建好cluster DB 節(jié)點時，需要使用 –init參數(shù)初始化。

例如： bin/ndbd –ndb-connectstring=ndb_mgmd.mysqlcluster.net –initial

The client (API) node:

客戶端節(jié)點，通過他實現(xiàn) cluster DB 的訪問，這個節(jié)點也就是普通的 mysqld 進程， 需要在配置文件中配置ndbcluster 指令打開 NDB Cluster storage engine 存儲引擎，增加 API 節(jié)點會提高整個集群的并發(fā)訪問速度和整體的吞吐量，該節(jié)點 可以部署在Web應(yīng)用服務(wù)器上，也可以部署在專用的服務(wù)器上，也開以和DB部署在 同一臺服務(wù)器上。

通過 mysqld_safe 命令啟動，

這3類節(jié)點可以分布在不同的主機上，比如 DB 可以是多臺專用的服務(wù)器，也可以 每個DB都有一個API，當(dāng)然也可以把API分布在Web前端的服務(wù)器上去，通常來說， API越多cluster的性能會越好。

Mysql集群探索與實踐

1. 準(zhǔn)備好3臺機器，從官網(wǎng)下載最新的mysql集群版本，此處用到mysql-cluster-gpl-7.1.5.tar.gz源碼包， 配置并安裝，記得加上

–with-plugins=innobase,ndbcluster (innobase可選)

3臺機器分別是192.168.207.153，192.168.208.3，192.168.208.9，具體分配如下

管理節(jié)點(ndb_mgmd):192.168.207.153

數(shù)據(jù)節(jié)點(ndbd): 192.168.208.3

數(shù)據(jù)節(jié)點(ndbd): 192.168.208.9

SQL節(jié)點(mysqld): 192.168.208.3

SQL節(jié)點(mysqld): 192.168.208.9

2. 在mysql目錄下新建mysql-cluster文件夾，切換到mysql-cluster，新建config.ini

[NDBD DEFAULT]

NoOfReplicas=2 #備份，副本，這樣的話2臺數(shù)據(jù)節(jié)點的數(shù)據(jù)就會同步

DataMemory=200M

IndexMemory=100M

[TCP DEFAULT]

portnumber=2202

[NDB_MGMD] #管理節(jié)點

id=1

hostname=192.168.207.153

datadir=/home/taozi/mysql/mysql-cluster

[NDBD] #數(shù)據(jù)節(jié)點

id=2

hostname=192.168.208.3

datadir=/home/taozi/mysql/data

[NDBD] #數(shù)據(jù)節(jié)點

id=3

hostname=192.168.208.9

datadir=/home/taozi/mysql/data

[MySQLD] #sql節(jié)點

id=4

hostname=192.168.208.3

[MySQLD] #sql節(jié)點

id=5

hostname=192.168.208.9

[MySQLD] #sql節(jié)點

id=6

3. 在管理節(jié)點服務(wù)器上啟動管理節(jié)點服務(wù) (如果不存在ndb_mgmd那么要從libexec下面復(fù)制過來)

~/mysql/bin/ndb_mgmd -f ~/mysql/mysql-cluster/config.ini

4. 進入2臺數(shù)據(jù)節(jié)點服務(wù)器，分別啟動數(shù)據(jù)節(jié)點服務(wù)

~/mysql/bin/ndbd (第一次啟動使用 ~/mysql/bin/ndbd --initial)

5. 最后分別進入sql節(jié)點服務(wù)器，修改my.cnf，加入

[MYSQL_CLUSTER]

ndb-connectstring=192.168.207.153

[MYSQLD]

ndbcluster

ndb-connectstring=192.168.207.153

啟動mysql服務(wù)

/home/taozi/mysql/bin/mysqld_safe --ledir=/home/taozi/mysql/bin /

--log-error=/home/taozi/mysql/data/t.err --datadir=/home/taozi/mysql/data /

--socket=/home/taozi/mysql/tmp/mysql.sock --pid-file=/home/taozi/mysql/data/mysqld.pid &

6. 此時回到管理節(jié)點

~/mysql/bin/ndb_mgm -e show

可以看到顯示如下

[taozi@search153 mysql]$ ./show.sh

Connected to Management Server at: localhost:1186

Cluster Configuration

---------------------

[ndbd(NDB)] 2 node(s)

id=2 @192.168.208.3 (mysql-5.1.47 ndb-7.1.5, Nodegroup: 0, Master)

id=3 @192.168.208.9 (mysql-5.1.47 ndb-7.1.5, Nodegroup: 0)

[ndb_mgmd(MGM)] 1 node(s)

id=1 @192.168.207.153 (mysql-5.1.47 ndb-7.1.5)

[mysqld(API)] 3 node(s)

id=4 @192.168.208.3 (mysql-5.1.47 ndb-7.1.5)

id=5 @192.168.208.9 (mysql-5.1.47 ndb-7.1.5)

id=6 (not connected, accepting connect from any host)

7. 進入sql節(jié)點，在test數(shù)據(jù)庫創(chuàng)建表

CREATE TABLE `t1` (

`id` int(11) NOT NULL AUTO_INCREMENT,

PRIMARY KEY (`id`)

) ENGINE=ndbcluster DEFAULT CHARSET=gbk

切換到2臺數(shù)據(jù)節(jié)點服務(wù)器~/mysql/data/ndb_2_fs和~/mysql/data/ndb_3_fs看看，

或者直接去數(shù)據(jù)庫查，數(shù)據(jù)已經(jīng)同步了！

8. 關(guān)閉集群服務(wù)

關(guān)閉sql節(jié)點等同于停止mysql服務(wù)，此時外界數(shù)據(jù)不將再進來。然后關(guān)閉管理節(jié)點

~/mysql/bin/ndb_mgm -e shutdown

rm ~/mysql/mysql-cluster/ndb_1_config.bin.1 #不是必須的，如果config.ini有改動則要加上

這樣操作后，管理節(jié)點和數(shù)據(jù)節(jié)點都將停止服務(wù)

Notes:

1:如果發(fā)現(xiàn)關(guān)閉一臺機器的ndbd進程，另一臺機器的ndbd的進程也關(guān)閉，則需要修改參數(shù)NoOfReplicas。

2:./ndbd --initial 不能同時在所有數(shù)據(jù)節(jié)點機器上執(zhí)行，如執(zhí)行，會刪除所有數(shù)據(jù)

3:可以像操作非簇類型的數(shù)據(jù)庫那樣，操作mysqld節(jié)點

4:每次修改config.ini文件，重啟ndb_mgmd時，需要刪除mysql-cluster文件下的ndb_1_config.bin.1文件，

因為他默認(rèn)調(diào)用此文件

5:NDB 簇不支持自動發(fā)現(xiàn)數(shù)據(jù)庫的功能，這點很重要,一旦在一個數(shù)據(jù)節(jié)點上創(chuàng)建了世界(world)數(shù)據(jù)庫和它的表，

在簇中的每個SQL節(jié)點上還需要發(fā)出命令 CREATE DATABASE world,后跟FLUSH TABLES。這樣，節(jié)點就能

識別數(shù)據(jù)庫并讀取其表定義。(在本版本MySQL Cluster 7.1.5下數(shù)據(jù)庫也會自動同步的)

6:如果在相關(guān)節(jié)點服務(wù)器啟動時,注意查看~/mysql/mysql-cluster目錄內(nèi)的相關(guān)日志文件以獲取錯誤信息.

7:在管理節(jié)點的配置文件里各[mysqld],[ndbd]和[ndb_mgmd]配置的選項值順序應(yīng)該如下:

[mysqld]

Id=4

HostName=192.168.208.3

Id在頂端緊跟其后的是HostName,如果順序錯了,當(dāng)SQL或數(shù)據(jù)節(jié)點連接管理節(jié)點時,管理節(jié)點無法正確的定位

到其對應(yīng)的節(jié)點配置上.

因為無法定位到對應(yīng)的節(jié)點配置,當(dāng)沒有剩余的[空節(jié)點]時,客戶端節(jié)點啟動時(./mysqld or ./ndbd)

還會報:

Configuration error: Error : Could not alloc node id at 192.168.0.231 port 1186: No free

node id found for mysqld

(API).Failed to initialize consumers

8:[空節(jié)點]是沒有指定HostName選項的節(jié)點配置均為空節(jié)點,空節(jié)點可以用來動態(tài)配置一些動態(tài)IP的節(jié)點,

一般管理節(jié)點的 配置文件要預(yù)留3個以上的空節(jié)點,因為備份時需要連接一個節(jié)點,如下:

[mysqld]

Id=6

總結(jié)

以上是生活随笔為你收集整理的mysql 集群实践_MySQL Cluster集群探索与实践的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。