【公测中】阿里云发布国内首个大数据双活容灾服务,满足高要求大数据灾备场景
在6月上旬舉行的云棲大會上海峰會上,阿里云發布了國內首個大數據集群雙活容災產品-混合云容災服務下的混合云大數據容災服務(HDR for Big Data, 簡稱 HDR-BD),并已經在7月份開始邀測。HDR-BD采用業界領先的數據雙向實時復制技術,可以實現Hadoop集群雙活和準0 RPO容災,為大數據災備制定了全新的標準。
常見Hadoop災備技術的挑戰
當前比較常見的Hadoop集群災備方式是用distcp將數據定期復制到一個備用集群做容災用途,或者將數據復制到只讀集群、二級存儲作為多恢復點的備份。這些方案都有明顯弱點。
RPO和RTO是衡量災備方案的兩個重要指標,RPO-恢復點目標,決定了丟失多少數據,RTO-恢復時間目標,決定了業務中斷了多長時間。由于傳統的Hadoop集群災備方式使用的是distcp來做容災,也就意味著數據復制不是實時的,因此用戶必須承受至少小時級到天級的RPO。并且主站宕機后,將只讀集群或二級存儲中的數據恢復出來會占用大量時間,而拉起standby集群重新啟動業務依然是一個耗時的操作。因此,傳統的Hadoop集群災備方式在RPO和RTO方面都有較大挑戰。
除此之外,由于災備集群平時處于備用狀態,不能用于運行業務,對于用戶來說也屬于資源浪費。
以上這些問題長期困擾著Hadoop集群的用戶和管理員們,如何突破RPO和RTO瓶頸,大數據集群的災備領域亟需一種全新的技術來徹底解決目前的困境。
HDR- BD此次帶來的雙向實時復制技術可以在兩個Hadoop集群之間建立雙活架構,RPO接近0;RTO因為數據隨時可讀寫而極大壓縮;雙活架構可以讓兩個集群運行不同的應用,避免資源浪費。這些特性將Hadoop災備標準提高到了一個全新的高度,為Hadoop用戶帶來了極高的價值。
HDR-BD引入大數據雙向復制技術,滿足高要求的大數據災備場景
阿里云此次推出的Hadoop雙活容災方案HDR-BD引入了業界領先的大數據雙向復制技術,結合強大的公共云基礎設施,可以滿足極高要求的大數據災備場景,為企業Hadoop集群數據保護提供了全新的選擇。
HDR-BD的優勢在于:
在自建數據中心和阿里云之間部署HDR-BD服務器配對,用戶就可以將自建Hadoop集群與阿里云無縫集成,充分利用阿里云EMR和OSS建立極為高效的Hadoop災備,遷移系統。HDR-BD可以滿足的核心場景包括
將自建Hadoop集群的數據實時復制到阿里云EMR集群,實現接近0 RPO的Hadoop集群容災。
在自建Hadoop集群和阿里云EMR集群之間建立數據雙向復制。兩個集群共享一份數據,但是運行不同的應用,實現集群雙活,達到資源的最大化利用。
云上HDR-BD服務器可以直連至阿里云對象存儲OSS。在無需EMR集群的情況下,HDR for Big Data可以將Hadoop數據實時復制到阿里云OSS,實現接近0 RPO的云備份;同時這個機制也可以作為Hadoop數據遷移上云的理想方案。利用這個機制做Hadoop集群遷移上云,在遷移過程中無需啟動EMR集群;同時遷移過程無需復雜定制化腳本開發或者復雜的業務停機規劃。
總結
以上是生活随笔為你收集整理的【公测中】阿里云发布国内首个大数据双活容灾服务,满足高要求大数据灾备场景的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: ECS云资源可视化--资源概览
- 下一篇: 阿里云产品头条(2017年12月刊)