分布式存储解决方案zData
云和大數(shù)據(jù)時(shí)代的到來導(dǎo)致各行各業(yè)數(shù)據(jù)量的爆發(fā),面對(duì)業(yè)務(wù)數(shù)據(jù)的日益劇增,企業(yè)的IT系統(tǒng)在性能、穩(wěn)定性和擴(kuò)展性等方面都面臨前所未有的巨大挑戰(zhàn)。如何有效應(yīng)對(duì)云和大數(shù)據(jù)的浪潮去擁抱變化,成為企業(yè)迫切面臨的問題。
數(shù)據(jù)驅(qū)動(dòng)的時(shí)代,一切競(jìng)爭的核心都會(huì)歸結(jié)于IT系統(tǒng)的競(jìng)爭,然而傳統(tǒng)數(shù)據(jù)庫系統(tǒng)架構(gòu)面臨以下困境:
1、中心化的存儲(chǔ)系統(tǒng)成為I/O存取的瓶頸,擴(kuò)展成本高昂
2、小型機(jī)+高端存儲(chǔ),成本高昂,相對(duì)比較封閉,擴(kuò)展能力差。
3、復(fù)雜的系統(tǒng)帶來部署及操作、運(yùn)維和管理的復(fù)雜性
分布式存儲(chǔ)解決方案zData
為更好地保障企業(yè)數(shù)據(jù)安全,數(shù)據(jù)一致性和業(yè)務(wù)連續(xù)性,同時(shí)能夠低成本、靈活地進(jìn)行系統(tǒng)擴(kuò)展和變更,幫助企業(yè)實(shí)現(xiàn)云化的系統(tǒng)轉(zhuǎn)型,云和恩墨專家團(tuán)隊(duì)基于多年的數(shù)據(jù)服務(wù)經(jīng)驗(yàn),研發(fā)出一套分布式存儲(chǔ)解決方案 zData.?
zData方案以x86服務(wù)器為基礎(chǔ),使用閃存卡、Infiniband 交換機(jī),為Oracle 數(shù)據(jù)庫提供超高處理能力和IO吞吐量。
zData 超高性能指標(biāo)
zData Light Storage存儲(chǔ)軟件可支持10000個(gè)設(shè)備,最大容量20P,最大支持1024個(gè)存儲(chǔ)節(jié)點(diǎn),單個(gè)節(jié)點(diǎn)支持設(shè)備數(shù)31,計(jì)算節(jié)點(diǎn)支持32個(gè),資源池最大為64個(gè),支持不同存儲(chǔ)介質(zhì)構(gòu)成的存儲(chǔ)資源池。高達(dá)超百萬IOPS,吞吐量超過10GB/s。
由于采用開放的x86架構(gòu),以及高帶寬和低延遲的Infiniband網(wǎng)絡(luò),可以隨時(shí)在線增加存儲(chǔ)容量、存儲(chǔ)節(jié)點(diǎn)和數(shù)據(jù)庫節(jié)點(diǎn),實(shí)現(xiàn)隨時(shí)擴(kuò)容,以及擴(kuò)容后系統(tǒng)性能和處理能力的近線性增長。
zData方案以下面兩種形態(tài)為企業(yè)提供優(yōu)質(zhì)服務(wù):
分布式存儲(chǔ)管理軟件zData Light Storage
zData Light Storage 充分利用基于x86服務(wù)器的內(nèi)部直連式存儲(chǔ)來創(chuàng)建虛擬的、可擴(kuò)展的 SAN,性能優(yōu)于外部傳統(tǒng)光纖通道 SAN,而成本和復(fù)雜性成倍降低。支持 Infiniband 網(wǎng)絡(luò)下的 RDMA 協(xié)議,大幅減少 CPU 占用的同時(shí)能夠顯著降低 IO 訪問延遲,具有無可比擬的性能優(yōu)勢(shì)。
在基準(zhǔn)測(cè)試下,三個(gè)存儲(chǔ)節(jié)點(diǎn)的zData架構(gòu),可以實(shí)現(xiàn)近 100萬 IOPS,以及超過10GB/s的吞吐量。
zData 數(shù)據(jù)庫一體機(jī)
zData 數(shù)據(jù)庫一體機(jī)是云和恩墨自主研發(fā)的超融合解決方案,通過高帶寬、低時(shí)延的 Infiniband 互聯(lián),將高性能X86服務(wù)器節(jié)點(diǎn)和以閃存為核心的分布式存儲(chǔ),實(shí)現(xiàn)了資源池化,動(dòng)態(tài)資源與性能的線性擴(kuò)展,配合具備多租戶功能的數(shù)據(jù)庫軟件實(shí)現(xiàn)多租戶集中管理、高可用性、可擴(kuò)展性的云數(shù)據(jù)庫服務(wù),為用戶企業(yè)解決當(dāng)前性能瓶頸和未來的資源敏捷擴(kuò)展問題,大幅改善用戶企業(yè)管理和性能體驗(yàn)。
在滿足企業(yè)高性能需求的同時(shí),zData 數(shù)據(jù)庫一體機(jī)實(shí)現(xiàn)了一站式交付,一鍵式部署,自動(dòng)化運(yùn)維,不但降低對(duì)IT人員的技能要求,而且大幅節(jié)省客戶采購和管理成本,從而很好的解決了傳統(tǒng)IT架構(gòu)對(duì)企業(yè)所帶來的一系列負(fù)面影響。另外,zData 可以輕松實(shí)現(xiàn)計(jì)算資源和存儲(chǔ)資源隨業(yè)務(wù)變化的多維動(dòng)態(tài)發(fā)展、性能線性增長以及動(dòng)態(tài)添加磁盤和存儲(chǔ)節(jié)點(diǎn)需求。
資源池化實(shí)現(xiàn)快速部署和動(dòng)態(tài)擴(kuò)展
傳統(tǒng)的IT系統(tǒng)擴(kuò)展和變更從硬件的選購配置到數(shù)據(jù)庫的安裝,會(huì)帶來高昂的時(shí)間和人力成本。現(xiàn)在基于zData的PaaS平臺(tái),能夠低成本、低要求的實(shí)現(xiàn)數(shù)據(jù)庫的部署、運(yùn)維和擴(kuò)展,通過zData分布式存儲(chǔ)管理軟件將資源池化,實(shí)現(xiàn)資源的按需分配和靈活回收。
zData架構(gòu)特點(diǎn):
1、多維動(dòng)態(tài)擴(kuò)展:計(jì)算節(jié)點(diǎn)和存儲(chǔ)節(jié)點(diǎn)可以按需動(dòng)態(tài)擴(kuò)展,容量和性能線性增長
2、資源池化&云化 :計(jì)算資源和存儲(chǔ)資源池化,統(tǒng)一管理,按需分配擴(kuò)展
3、高性能:x86服務(wù)器為基礎(chǔ)、使用閃存卡、Infiniband交換機(jī)實(shí)現(xiàn)高處理能力和IO吞吐量
4、安全&冗余:所有組件均有冗余,存儲(chǔ)自動(dòng)鏡像及故障自動(dòng)重構(gòu),無需人工干預(yù)和不影響在線業(yè)務(wù)。
zData的高可用實(shí)現(xiàn)
zData數(shù)據(jù)的冗余和鏡像
zData存儲(chǔ)故障數(shù)據(jù)遷移
zData彈性多維度擴(kuò)展
對(duì)于計(jì)算節(jié)點(diǎn)和存儲(chǔ)節(jié)點(diǎn)的資源不足,都能夠方便地進(jìn)行動(dòng)態(tài)擴(kuò)展。計(jì)算資源可以隨業(yè)務(wù)變化多維動(dòng)態(tài)擴(kuò)展,性能線性增長;存儲(chǔ)資源可以隨業(yè)務(wù)變化多維動(dòng)態(tài)擴(kuò)展,既可以動(dòng)態(tài)添加磁盤也可以動(dòng)態(tài)添加存儲(chǔ)節(jié)點(diǎn)。
zCache緩存機(jī)制
基于zData的緩存機(jī)制zCache能實(shí)現(xiàn)以下功能:
支持writeback和直通模式
支持在線啟動(dòng)和關(guān)閉cache
支持自動(dòng)/手動(dòng)刷新臟數(shù)據(jù)
支持臟塊的刷新頻率和速度動(dòng)態(tài)的控制
zMonitor監(jiān)控軟件
同時(shí)為了更好地監(jiān)控分布式存儲(chǔ)架構(gòu)下的數(shù)據(jù)庫運(yùn)行狀況和性能,專門針對(duì)zData light 一體機(jī)系統(tǒng)研發(fā)了zMonitor監(jiān)控軟件,能夠?qū)iT對(duì)一體機(jī)資源性能可視化監(jiān)控;對(duì)一體機(jī)所有組件一體化可視監(jiān)控,自動(dòng)拓?fù)鋱D,多維度監(jiān)控整個(gè)zData一體機(jī)性能。
zMonitor具有完備的告警功能,告警內(nèi)容包含詳細(xì)的系統(tǒng)事件告警功能,包含主機(jī),數(shù)據(jù)庫,硬盤壽命等;同時(shí)會(huì)自動(dòng)發(fā)現(xiàn)和管理計(jì)算及存儲(chǔ)資源;具有詳細(xì)的日志及趨勢(shì)分析功能。
zData架構(gòu)的擴(kuò)展:
zData容災(zāi):通過遠(yuǎn)程部署容災(zāi)中心,實(shí)現(xiàn)數(shù)據(jù)的多重防護(hù)
zData備份:通過RMAN或者NFS,實(shí)現(xiàn)數(shù)據(jù)的遠(yuǎn)程備份中心
依托客戶需求,打造場(chǎng)景化解決方案
zData方案在多個(gè)企業(yè)和單位有過最佳實(shí)踐,以其高計(jì)算能力、高 I/O 能力、高可用能力、高可伸縮能力且極具穩(wěn)健性的分布式存儲(chǔ)架構(gòu),是具有高并發(fā)高IO需求的系統(tǒng)的最佳選擇。在過去的實(shí)踐中也得到證實(shí)和認(rèn)可。
貴州交警
貴州交警某業(yè)務(wù)系統(tǒng)隨著系統(tǒng)應(yīng)用的深入和廣泛,原有基礎(chǔ)架構(gòu)、數(shù)據(jù)架構(gòu)規(guī)劃和設(shè)計(jì)上的問題逐漸凸現(xiàn)出來,主要表現(xiàn)為業(yè)務(wù)數(shù)據(jù)爆炸增長、業(yè)務(wù)應(yīng)用增多、系統(tǒng)響應(yīng)緩慢、物理擴(kuò)容達(dá)到瓶頸、設(shè)備達(dá)到服務(wù)年限。在經(jīng)過zData一體機(jī)整合之后,整體用戶體驗(yàn)得到了大幅改善,業(yè)務(wù)受理和辦理效率均得到了用戶贊譽(yù)。
性能提升效果:
1、整體性能提升18倍:重構(gòu)前核心指標(biāo)DBTIME每日最高單小時(shí)為3563.15,重構(gòu)后每日最高單個(gè)小時(shí)指標(biāo)為199.68,性能效果提升17.8倍。
2、I/O響應(yīng)提升1000倍:重構(gòu)前平均單次I/O請(qǐng)求時(shí)間為10.07毫秒,重構(gòu)后平均I/O的請(qǐng)求時(shí)間縮短為0.01毫秒,I/O效率提升1007倍。
3、SQL性能提升117倍:考察違法審批報(bào)表SQL執(zhí)行效率,重構(gòu)前SQL執(zhí)行需10206.1秒,重構(gòu)后SQL執(zhí)行完成只需87.07秒,執(zhí)行效率提升117倍。
天安人壽
天安人壽隨著公司業(yè)務(wù)的迅猛發(fā)展,其核心系統(tǒng)和報(bào)表系統(tǒng)的業(yè)務(wù)支撐壓力也越來越大,高峰期每秒的吞吐量超過 1G,原有的系統(tǒng)架構(gòu)已經(jīng)無法滿足快速發(fā)展的業(yè)務(wù)增長勢(shì)頭。
面對(duì)這種現(xiàn)狀,天安決定采取高性能存儲(chǔ)優(yōu)先解決 I/O 問題。云和恩墨憑借具備高計(jì)算能力、高 I/O 能力和高可用能力的 zData 架構(gòu),輕松提供超過百萬級(jí)的 IOPS,超過 10GB/s 的吞吐能力,全面支撐起了有著巨量 IOPS 需求的高并發(fā)交易,以及海量數(shù)據(jù)吞吐需求的報(bào)表、數(shù)據(jù)倉庫等系統(tǒng)的高效運(yùn)行,為天安人壽實(shí)現(xiàn)高性能需求的同時(shí),也大幅縮減了整個(gè)系統(tǒng)的時(shí)間成本與資源成本,成為保險(xiǎn)行業(yè)業(yè)務(wù)系統(tǒng)一體機(jī)化的典范。
更多客戶成功案例:
四川電信:從小型機(jī)到x86:四川電信核心數(shù)據(jù)庫遷移到虛擬化平臺(tái)
北京電信:積極擁抱互聯(lián)網(wǎng)化 北京電信核心數(shù)據(jù)庫完成跨平臺(tái)遷移
青海移動(dòng):云和恩墨zData多租戶整合,青海移動(dòng)數(shù)據(jù)庫云化起航
云和恩墨,致力于做您最值得信賴的數(shù)據(jù)管家。
云和恩墨
數(shù)據(jù)驅(qū)動(dòng),成就未來。整合業(yè)界頂尖的技術(shù)與合作伙伴資源,圍繞數(shù)據(jù)及相關(guān)領(lǐng)域,提供解決方案和專業(yè)服務(wù)。
IT基礎(chǔ)架構(gòu)
zData一體機(jī) -?分布式存儲(chǔ)解決方案
數(shù)據(jù)架構(gòu)
Oracle? SQL DB2 MySQL NoSQL
專項(xiàng)服務(wù):架構(gòu) / 安全 / 高可用 / 容災(zāi) / 優(yōu)化 / SQL 質(zhì)量管控
運(yùn)維服務(wù):運(yùn)維服務(wù) ?| 代維服務(wù)
人才培養(yǎng):個(gè)人認(rèn)證 | 企業(yè)內(nèi)訓(xùn)
軟件產(chǎn)品:SQL審核 - Z3 | 監(jiān)控 - Zone | 數(shù)據(jù)恢復(fù) - ODU|智能巡檢 - Bethune
應(yīng)用架構(gòu)
應(yīng)用軟件開發(fā):數(shù)據(jù)建模?|?SQL審核和優(yōu)化?| 中間件服務(wù)
業(yè)務(wù)架構(gòu)
電子渠道(網(wǎng)絡(luò)銷售)分析系統(tǒng) | 數(shù)據(jù)治理
恩墨學(xué)院
恩墨學(xué)院是云和恩墨(北京)信息技術(shù)有限公司旗下的培訓(xùn)事業(yè)部,創(chuàng)業(yè)數(shù)年專注于數(shù)據(jù)庫認(rèn)證、技能培訓(xùn),以專業(yè)的講師塑造品牌,以專業(yè)的訓(xùn)練保證就業(yè),目前已經(jīng)發(fā)展成為國內(nèi)數(shù)據(jù)庫領(lǐng)域培訓(xùn)領(lǐng)導(dǎo)品牌。
總結(jié)
以上是生活随笔為你收集整理的分布式存储解决方案zData的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。