大话云存储，这个“对象”可能无处不在
戳藍(lán)字“CSDN云計(jì)算”關(guān)注我們哦！
文?|?pasca
? 來源?| 蛋蛋團(tuán)（ID：dandan_tuan）
前言
1、Who：誰使用對(duì)象存儲(chǔ)
2、What：對(duì)象存儲(chǔ)是什么
3、Why：為什么他們會(huì)使用對(duì)象存儲(chǔ)
4、how to do:應(yīng)用場(chǎng)景分析
5、總結(jié)
對(duì)于企業(yè)來說，隨著計(jì)算機(jī)和互聯(lián)網(wǎng)的爆發(fā)式發(fā)展，其帶來的海量非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)，無疑成為一個(gè)難點(diǎn)。
互聯(lián)網(wǎng)領(lǐng)域有個(gè)著名的“八秒定律”，指的是當(dāng)用戶訪問網(wǎng)站時(shí)，如果等待網(wǎng)頁打開的時(shí)間超過8秒，會(huì)有超過70%的用戶放棄等待。
對(duì)于企業(yè)來說，放棄等待也可能意味著用戶流失，這是不可忍受的。而對(duì)于云計(jì)算中的細(xì)分領(lǐng)域云存儲(chǔ)廠商而言，利用“中心化”的云存儲(chǔ)助推企業(yè)減少上云成本，既實(shí)現(xiàn)了企業(yè)海量非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)難點(diǎn)。最關(guān)鍵是提高了企業(yè)內(nèi)容分發(fā)效率，實(shí)現(xiàn)了雙贏。
根據(jù)IDC近日發(fā)表的《世界的數(shù)字化從邊緣到核心2025》報(bào)告中預(yù)測(cè)，全球每年產(chǎn)生的數(shù)據(jù)將從2018年的33ZB增長(zhǎng)到175ZB，相當(dāng)于每天產(chǎn)生491EB的數(shù)據(jù)，而175ZB約等于1.1萬億GB，如果這些數(shù)據(jù)存儲(chǔ)在DVD光盤中，可比那句著名某奶茶的廣告語“圍起來可繞地球一圈”還要多222倍。
而Gartner分析，2020 年，全球物聯(lián)網(wǎng)設(shè)備數(shù)量將達(dá)到204億。
因此，云也成為了新的增長(zhǎng)核心，企業(yè)不再拘束于傳統(tǒng)數(shù)據(jù)中心，而采用公有對(duì)象存儲(chǔ)服務(wù)。
IDC預(yù)測(cè)，到2025年，49%的全球已存儲(chǔ)數(shù)據(jù)將駐留在公共云環(huán)境中。而未來將不再是一座座數(shù)據(jù)孤島，大數(shù)據(jù)和云計(jì)算緊密關(guān)聯(lián)，為游離的海量提供智能服務(wù)。
企業(yè)產(chǎn)生的數(shù)據(jù)量將占到全球數(shù)據(jù)總量的60%，將取代消費(fèi)者成為全球數(shù)據(jù)量產(chǎn)生的第一大主體，這意味著存放非結(jié)構(gòu)化數(shù)據(jù)的企業(yè)級(jí)存儲(chǔ)將蓬勃發(fā)展，真正實(shí)現(xiàn)了“對(duì)象”的無處不在。
企業(yè)級(jí)存儲(chǔ)架構(gòu)經(jīng)過了多年發(fā)展，不僅性能大幅提升，功能也在向多元化發(fā)展。而對(duì)于企業(yè)而言，成本是一個(gè)繞不過去的坎。
數(shù)據(jù)越來越多，存儲(chǔ)量越來越大。而在這其中，還有一個(gè)如何去高效利用存儲(chǔ)資源高效利用的平衡點(diǎn)。為了更加高效地使用存儲(chǔ)資源，從而達(dá)到節(jié)省成本的目的，逐漸出現(xiàn)了自動(dòng)分級(jí)、去重、壓縮等技術(shù)，而這些通過被完美的運(yùn)用到了對(duì)象存儲(chǔ)。
在對(duì)象存儲(chǔ)之前，有著塊存儲(chǔ)和文件存儲(chǔ)兩種存儲(chǔ)類型，塊存儲(chǔ)兩種類型。
簡(jiǎn)單來說，塊存儲(chǔ)特點(diǎn)是高性能讀寫，有些數(shù)據(jù)，是必須在塊存儲(chǔ)運(yùn)行的，如數(shù)據(jù)庫(kù)。文件存儲(chǔ)的特點(diǎn)是共享性高，但是讀寫性能較慢。
SDN（軟件定義網(wǎng)絡(luò)）可能大家都聽說過，但是SDS（軟件定義存儲(chǔ)）就沒幾個(gè)人知道了。實(shí)際上，對(duì)象存儲(chǔ)的設(shè)計(jì)原理符合SDS的理念，其特點(diǎn)是低成本、高安全且用戶角度上存儲(chǔ)池?zé)o限拓展。
對(duì)象存儲(chǔ)是一種網(wǎng)絡(luò)存儲(chǔ)技術(shù)，其最大的特點(diǎn)就是將數(shù)據(jù)與元數(shù)據(jù)的存儲(chǔ)及操作分離，在性能上綜合了塊存儲(chǔ)和文件存儲(chǔ)的優(yōu)勢(shì)，具備了高性能讀寫和共享性高的特點(diǎn)。
主要包括對(duì)象 (Object)、OSD(對(duì)象存儲(chǔ)服務(wù)器)、文件系統(tǒng)、元數(shù)據(jù)服務(wù)器(Metadata Server，MDS)和網(wǎng)絡(luò)連接幾個(gè)組成部分。
而其和塊存儲(chǔ)最大的區(qū)別是只能存儲(chǔ)非結(jié)構(gòu)化數(shù)據(jù)，如音視頻文件、壓縮包等等。并且如果是傳統(tǒng)SAN 或 NAS架構(gòu)可以應(yīng)對(duì)TB~PB 級(jí)存儲(chǔ)規(guī)模，但當(dāng)海量數(shù)據(jù)發(fā)展到 PB~EB 級(jí)存儲(chǔ)規(guī)模時(shí)，內(nèi)部組織結(jié)構(gòu)按照樹狀結(jié)構(gòu)、文件系統(tǒng)形態(tài)的傳統(tǒng)存儲(chǔ)可能就力不從心了。
因此，對(duì)象存儲(chǔ)服務(wù)成為一個(gè)很好的選擇。
圖靈獎(jiǎng)得主Jim Gray :每18個(gè)月,新增的數(shù)據(jù)量等于有史以來數(shù)據(jù)量之和。
如果還是傳統(tǒng)架構(gòu)，對(duì)于如此龐大的數(shù)據(jù)量，無論是任何企業(yè)，都只能喊“求放過”。
而其中非結(jié)構(gòu)化數(shù)據(jù)的內(nèi)容占據(jù)了數(shù)據(jù)海洋的80%，隨著公有云的不斷普及，對(duì)象存儲(chǔ)已經(jīng)成為傳統(tǒng)存儲(chǔ)非結(jié)構(gòu)化數(shù)據(jù)的有效補(bǔ)充，根據(jù)計(jì)世資訊的報(bào)告表明，用戶最常用的對(duì)象存儲(chǔ)服務(wù)場(chǎng)景分別為以下：
而對(duì)于對(duì)象存儲(chǔ)，主要解決了以下用戶以下幾點(diǎn)需求：
冷熱分層。即通過標(biāo)準(zhǔn)存儲(chǔ)（熱數(shù)據(jù)）和低頻存儲(chǔ)（冷數(shù)據(jù)）的存儲(chǔ)方式，有效降低存儲(chǔ)成本。
豐富數(shù)據(jù)處理。存儲(chǔ)上云，現(xiàn)在企業(yè)不僅僅只是作為單一存儲(chǔ)職能。更多的是希望云廠商能夠提供一站式的數(shù)據(jù)管理方案，如音視頻/圖片的編輯和處理還有水印等功能。這兩個(gè)資源現(xiàn)在的采集源實(shí)在太多，但是某些格式兼容又不是很好。舉個(gè)例子，如在音視頻領(lǐng)域，目前兼容性最好的是H.264+aac的編碼方式，然而很多用戶上傳的確實(shí)H.265+aac或者mpeg-4+aac的編碼的視頻。這直接導(dǎo)致了這種視頻不能在瀏覽器直接觀看而必須通過特殊播放器才能支持
靜態(tài)資源分發(fā)。存儲(chǔ)上云，當(dāng)然不可能只是作為死數(shù)據(jù)存儲(chǔ)就行了，更重要的是如何送到“全世界用戶”的終端去讓展示。為了減輕源站服務(wù)器的壓力以及用戶更快的訪問到熱點(diǎn)資源， 而現(xiàn)在云廠商都搭配了對(duì)象存儲(chǔ)和CDN（內(nèi)容分發(fā)網(wǎng)絡(luò)），CDN其原理就是以存儲(chǔ)換時(shí)延，將熱點(diǎn)資源下沉，從而降低訪問延遲
容災(zāi)備份。盡管我們時(shí)常看新聞?wù)f某某廠商服務(wù)崩潰，但是如果從概率學(xué)統(tǒng)計(jì)，公有云對(duì)象存儲(chǔ)的服務(wù)不可用時(shí)間遠(yuǎn)遠(yuǎn)的低于自建IDC或者自建私有云服務(wù)。對(duì)象存儲(chǔ)其自身的三副本和糾刪碼存儲(chǔ)機(jī)制也能夠保證數(shù)據(jù)設(shè)計(jì)持久性達(dá)到11個(gè)9（七牛云、阿里云等）。同時(shí)，云存儲(chǔ)還會(huì)提供跨區(qū)域同步和異地雙活等機(jī)制來最大限度的保證服務(wù)可用性。
在公有云對(duì)象存儲(chǔ)領(lǐng)域中，視頻監(jiān)控、相冊(cè)存儲(chǔ)、視頻原創(chuàng)、智能IOT等已經(jīng)成為對(duì)象存儲(chǔ)中的前四大典型用戶。
近幾年火熱的智慧城市，智慧樓宇直接催熱了視頻監(jiān)控領(lǐng)域。如果把城市譽(yù)為一個(gè)人，那遍布城市各個(gè)地方的無數(shù)攝像頭成為了最前沿的傳感器，其傳輸回來海量的監(jiān)控視頻數(shù)據(jù)對(duì)存儲(chǔ)也是一場(chǎng)苛刻的考驗(yàn)。
為了保證監(jiān)控視頻向網(wǎng)絡(luò)化、在線化、智能化還有高清化發(fā)展，公有對(duì)象存儲(chǔ)成為了代替?zhèn)鹘y(tǒng)SD和NVR本地存儲(chǔ)方案的最佳方式。
根據(jù)中國(guó)帶寬發(fā)展聯(lián)盟發(fā)布的數(shù)據(jù)，去年Q4季度國(guó)內(nèi)的固定寬帶網(wǎng)絡(luò)平均速度達(dá)到了28.06Mb/s，同比提升47.61%，而4G移動(dòng)網(wǎng)絡(luò)的平均速度也達(dá)到了22.05Mb/s，同比提升21.29%。
人均帶寬的提高，直接影響就是娛樂音視頻行業(yè)的爆發(fā)增長(zhǎng)，無論是視頻還是圖片，都在往高清化發(fā)展，目前千元機(jī)都能購(gòu)買到4800w像素的手機(jī)以及4K視頻的拍攝，無不印證著這一點(diǎn)。
這對(duì)于對(duì)象存儲(chǔ)而言，以視頻和圖片的企業(yè)成為公有云對(duì)象存儲(chǔ)的top3用戶。
例如短視頻行業(yè)，目前已經(jīng)成為繼直播之后的新風(fēng)口。對(duì)象存儲(chǔ)服務(wù)可以覆蓋視頻的生成、上傳、處理、 分發(fā)和播放在內(nèi)的各個(gè)環(huán)節(jié)，幫助用戶以最快速度實(shí)現(xiàn)短視頻應(yīng)用的上線。
而且，隨著5G的到來，各種IOT智能設(shè)備也將呈現(xiàn)不一樣的服務(wù)方式。目前在物聯(lián)網(wǎng)領(lǐng)域最大的難點(diǎn)在于數(shù)據(jù)如何高效的傳輸和使用。
作為物聯(lián)網(wǎng)技術(shù)的重要組成部分，是感知城市各領(lǐng)域的直接終端，這些終端時(shí)時(shí)刻刻產(chǎn)生大量非結(jié)構(gòu)化數(shù)據(jù)。無論是路邊的路燈使用狀況，還是自動(dòng)售貨機(jī)的庫(kù)存信息。
“萬物互聯(lián)”就在眼前。而存儲(chǔ)這些PB甚至ZB的數(shù)據(jù)不的不運(yùn)用到海量可擴(kuò)展的對(duì)象存儲(chǔ)服務(wù)。
對(duì)于用戶而言，不僅僅希望只把數(shù)據(jù)存儲(chǔ)起來，而且 要能與他們的計(jì)算能力相適配，并且希望可以快速地獲得計(jì)算能力，以實(shí)現(xiàn)數(shù)據(jù)的靈活運(yùn)用。
對(duì)象存儲(chǔ)的趨勢(shì)是往公有云發(fā)展，其能夠滿足隨時(shí)隨地對(duì)數(shù)據(jù)的處理、分析等需求。甚至結(jié)合人工智能，對(duì)音視頻/圖片提供鑒黃、OCR識(shí)別等服務(wù)。最終，充分利用企業(yè)數(shù)據(jù)發(fā)展驅(qū)動(dòng)力，結(jié)合其他產(chǎn)品，為用戶提供一站式數(shù)據(jù)管理平臺(tái)。
福利
掃描添加小編微信，備注“姓名+公司職位”，加入【云計(jì)算學(xué)習(xí)交流群】，和志同道合的朋友們共同打卡學(xué)習(xí)！
推薦閱讀：
IEEE 回應(yīng)禁止華為系審稿人;WiFi聯(lián)盟、藍(lán)牙聯(lián)盟已恢復(fù)華為成員資格；中國(guó)計(jì)算機(jī)學(xué)會(huì)：暫時(shí)中止與IEEE通信學(xué)會(huì)合作……
ARM 發(fā)布新一代 CPU 和 GPU，實(shí)現(xiàn) 20% 性能提升！
前端開發(fā) 20 年變遷史
北漂杭漂的程序員，是如何買到第一套房子？
“愛裝X”開源組織：“教科書級(jí)”AI知識(shí)樹究竟長(zhǎng)什么樣？
500行Python代碼打造刷臉考勤系統(tǒng)
權(quán)游播完了, 你在罵爛尾, 有人卻悄悄解鎖了新操作……
真香，朕在看了！
總結(jié)
以上是生活随笔為你收集整理的大话云存储，这个“对象”可能无处不在的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問題。
- 上一篇： 平安普惠提前结清流程
- 下一篇： 为什么京东金条有额度却无法提供服务 解决