登錄
注冊
數(shù)據(jù)爆炸時代云計算廠商的對象存儲“勇?lián)敗?/h1>
作者：本站收錄
來源：至頂網(wǎng)
日期：2017-11-17 16:00:19
摘要：對象存儲在企業(yè)級存儲領(lǐng)域的應用處于早期階段，但增長的趨勢十分明顯。IDC預測在2017年到2021年期間，全球軟件定義存儲市場的復合年增長率將達到13.5%，到2021年收入接近162億美元。
對象存儲在企業(yè)級存儲領(lǐng)域的應用處于早期階段，但增長的趨勢十分明顯。IDC預測在2017年到2021年期間，全球軟件定義存儲市場的復合年增長率將達到13.5%，到2021年收入接近162億美元。
自從20世紀90年代中期首次提出概念，對象存儲已經(jīng)成為最大規(guī)模應用的數(shù)據(jù)存儲方法之一。在軟件定義存儲市場中，下一代云數(shù)據(jù)中心的要求正在有力地推動對象存儲的發(fā)展。
毋庸置疑，我們現(xiàn)在處于一個數(shù)據(jù)爆炸的年代，特別是非結(jié)構(gòu)化數(shù)據(jù)(圖片、視頻、歸檔以及企業(yè)級備份等各種數(shù)據(jù))成為企業(yè)數(shù)據(jù)的重要組成部分。這種海量數(shù)據(jù)就需要對應的存儲來解決，而傳統(tǒng)企業(yè)存儲比如NAS或者SAN等無法應對這種海量的非結(jié)構(gòu)化數(shù)據(jù)。
對象存儲看過來
通常，傳統(tǒng)的存儲技術(shù)可分為直連存儲(DAS：Direct Access Storage)、存儲區(qū)域網(wǎng)絡(SAN：Storage Area Network)和網(wǎng)絡附加存儲(NAS：Network Attached Storage)。
從存儲形態(tài)來看，DAS和SAN屬于塊存儲，也就是說存儲系統(tǒng)對磁盤(塊設備)進行操作，數(shù)據(jù)存取的接口是塊設備驅(qū)動。NAS屬于文件存儲，主要是對文件及目錄進行管理，數(shù)據(jù)存取的接口是文件協(xié)議，比如NFS。從抽象層次來說，文件存儲要高于塊存儲。
目前，整個企業(yè)級存儲市場正在從“垂直擴展”向“水平擴展”發(fā)展。業(yè)界關(guān)于新一代企業(yè)存儲有很多名詞，比如軟件定義存儲、分布式存儲、水平擴展式存儲等，它們所表達的意思是一樣的，就是在相對比較廉價的X86服務器之上通過軟件進行存儲管理。
在這種水平擴展存儲中，我們會面對塊存儲、文件存儲和對象存儲等類別，它們各自適用的場景不同。其中分布式塊存儲適用的場景相對來說比較特定，比如Oracle數(shù)據(jù)庫，需要掛高性能硬盤做數(shù)據(jù)庫的存儲;此外，最適合存儲非結(jié)構(gòu)化數(shù)據(jù)，即圖片、視頻等類型數(shù)據(jù)的是分布式文件存儲和對象存儲。
而且對象存儲與塊存儲不一樣。對象存儲沒有邏輯單元(LUN)、卷及磁盤陣列(RAID)這些概念。對象存儲與文件存儲也不一樣，對象存儲不是通過目錄來查詢文件。對象數(shù)據(jù)不是存儲在塊或者LUN中，而是在大小可變的容器(Bucket)里。
對象存儲的核心思想是將數(shù)據(jù)通路(數(shù)據(jù)讀或?qū)?和控制通路(元數(shù)據(jù))分離，并且基于對象存儲設備構(gòu)建存儲系統(tǒng)，每個對象存儲設備具有一定的智能，能夠自動管理其上的數(shù)據(jù)分布。
所以，對象存儲結(jié)合了塊存儲和文件存儲的優(yōu)點，既有塊存儲的高性能，也有文件存儲的共享便利，是目前最主要的云存儲方式。
我們訪問對象存儲中的數(shù)據(jù)，可以直接通過REST API來訪問對象存儲，就像用URI訪問一個網(wǎng)絡資源文件一樣的方便。
從對象存儲的設計思想，我們可以看出其適應了目前新技術(shù)的發(fā)展趨勢和企業(yè)的數(shù)據(jù)存儲和業(yè)務應用的需求變化。
比如在應用場景上，對象存儲可以廣泛應用于Web和移動應用、企業(yè)網(wǎng)盤、靜態(tài)網(wǎng)站托管、大數(shù)據(jù)分析、IaaS/PaaS服務、圖片處理、視頻云、備份歸檔、數(shù)據(jù)遷移等。
對象存儲成云計算廠商標配
誠如上述，對象存儲會是企業(yè)存儲的藍海市場?，F(xiàn)階段對于對象存儲進入企業(yè)級市場是一個非常好的階段，它處于被廣泛采納的早期階段，各路玩家紛紛布局。
在對象存儲市場，云計算廠商、存儲廠商、IT廠商、軟件廠商都有所布局。比如IBM、HDS、EMC、Nutanix、VMware都有自己的相應產(chǎn)品。但是公有云提供商是絕對的主力玩家。
對象存儲的發(fā)展和商業(yè)化一直與云計算行業(yè)緊密相連。云計算市場經(jīng)過這幾年發(fā)展，已經(jīng)趨向成熟，而應用比較廣的對象存儲服務，現(xiàn)成為云服務公司的一項基礎(chǔ)業(yè)務，市面上能夠提供這項服務的廠商數(shù)不勝數(shù)。
作為歷史上最早期的云存儲服務，簡稱S3的Simple Storage Service的目的和功用就是為AWS未來的云服務用戶提供最基礎(chǔ)、最簡便的云存儲服務，無論是圖片、視頻還是文本，S3都能夠提供存儲服務，簡單、集中、性價比高。
微軟Azure推出了高度可縮放的非結(jié)構(gòu)化數(shù)據(jù)對象存儲——Blob存儲，憑借百億億字節(jié)容量和巨大的伸縮性，Blob存儲可根據(jù)數(shù)據(jù)訪問頻率，將數(shù)百至數(shù)十億的對象存儲在“熱”、“冷”或“存檔”層中，企業(yè)可以輕松并經(jīng)濟高效地存儲任何類型的非結(jié)構(gòu)化數(shù)據(jù)(圖像、視頻、音頻、文檔等)。
國內(nèi)云廠商也積極布局對象存儲，比如阿里云對象存儲(Object Storage Service，簡稱OSS)已實現(xiàn)商業(yè)化服務5年以上，其是基于阿里云飛天分布式系統(tǒng)的海量、安全和高可靠的云存儲服務。
UCloud則提供了對象存儲UFile服務，UFile具有存儲無上限、支持高并發(fā)訪問、成本更低等優(yōu)勢;解決業(yè)務架構(gòu)的文件存儲問題，有效降低海量文件的存儲成本，支持熱點數(shù)據(jù)的高并發(fā)訪問，提升終端用戶訪問體驗。
企業(yè)級云服務商青云QingCloud也提供了基于公有云的QingStor對象存儲服務，還有QingStor對象存儲私有云一體化解決方案。
對象存儲在公有云的成功，已經(jīng)對企業(yè)存儲生態(tài)和部署模式產(chǎn)生了影響。比如現(xiàn)在OpenStack Swift和Ceph這些開源對象存儲的流行，Amazon S3成為事實上的對象存儲訪問標準，都是公有云對象存儲普遍部署的影響。
所以，對象存儲與云計算市場特別是公有云的快速發(fā)展息息相關(guān)。在公有云快速發(fā)展的今天，對象存儲也迎來了自己的“春天”。
在企業(yè)級市場里，對象存儲已經(jīng)過了教育階段，正處于一個比較好的時期，對象存儲將占據(jù)企業(yè)級存儲容量里75%左右的份額，它處于被廣泛采納的早期階段。
不過，雖說對象存儲迎來了快速發(fā)展的“東風”，但是如何順應發(fā)展大勢和滿足客戶需求是對象存儲提供商贏得市場的關(guān)鍵。
云計算廠商如何玩轉(zhuǎn)對象存儲?
雖說對象存儲將會是企業(yè)存儲的藍海市場，現(xiàn)在云計算廠商也紛紛布局對象存儲，但是決定市場競爭的關(guān)鍵是產(chǎn)品和技術(shù)，對象存儲如何才能幫助云計算廠商“攻城略地”，或許以下幾點可以作為參考。
從接口層(協(xié)議層)，對象存儲需要兼容AWS S3 API，支持多種協(xié)議，包括NFS、FTP、HDFS等。只有這樣才能滿足客戶的應用需求，畢竟對于企業(yè)級應用來說，接口和協(xié)議的豐富度是必不可少的。
在交付模式上，對象存儲可以通過公有云、私有云、混合云等模式進行交付，并實現(xiàn)統(tǒng)一管理。雖然最初對象存儲是公有云廠商推出的，但是對于某些行業(yè)而言，他們更傾向于在自己的數(shù)據(jù)中心里構(gòu)建一個數(shù)據(jù)池，進行統(tǒng)一的管理，以及后續(xù)的分析和利用。所以，交付方式的多樣化是必不可少的，而且對于對象存儲廠商來講，需要具備多種交付模式上的統(tǒng)一管理能力。
現(xiàn)在企業(yè)級存儲市場呈現(xiàn)融合趨勢，比如開源存儲軟件Ceph，將塊存儲、文件存儲以及對象存儲以同一套架構(gòu)輸出。
但是有的云計算廠商認為，不管是塊存儲、文件存儲還是對象存儲，它們所要解決的問題很不一樣。因此如果想從上到下都是同一套架構(gòu)去解決幾種存儲形態(tài)的話會顧此失彼。
產(chǎn)品體系化，對象存儲API的使用方式非常簡單，通常對象存儲廠商也提供了各樣語言的SDK。但是這樣還不夠，對于存儲廠商來說，產(chǎn)品體系化非常重要，因為你的產(chǎn)品需要和用戶的各種應用場景相結(jié)合，提供各種各樣的解決方案。
在架構(gòu)層面，對象存儲有兩個比較重要的趨勢：一是事件驅(qū)動的框架，因為用戶的數(shù)據(jù)并不是簡單的存儲，而是需要進一步處理，這就需要事件驅(qū)動的框架，它可以接駁各種各樣的數(shù)據(jù)處理服務，甚至用戶自己開發(fā)的處理應用，也可以接入進來。
此外，對象存儲和大數(shù)據(jù)平臺的集成或者接駁非常重要。在公有云形態(tài)上，大數(shù)據(jù)和對象存儲的關(guān)系非常緊密，大數(shù)據(jù)是對象存儲所存儲數(shù)據(jù)的主要來源。但在私有云上還是缺失的狀態(tài)，對象存儲應該在私有云上加深與大數(shù)據(jù)的集成關(guān)系。
再次，對象存儲與數(shù)據(jù)相關(guān)的SaaS服務。比如用戶希望分析對象存儲本身的使用情況，指導整個IT設施的規(guī)劃和構(gòu)建，這就屬于與數(shù)據(jù)相關(guān)的SaaS服務。
最后，企業(yè)級存儲軟件生態(tài)與合作，企業(yè)級存儲生態(tài)里不只是塊存儲、文件存儲、對象存儲，還有很多其它的，比如DR、災備、傳統(tǒng)的備份軟件等。
綜上所述，可以預見的是對象存儲技術(shù)將成為未來存儲技術(shù)的重要組成部分，隨著整個云計算市場的快速發(fā)展，對象存儲市場的發(fā)展也將被提速，從而加速企業(yè)存儲的轉(zhuǎn)型。
對象存儲在企業(yè)級存儲領(lǐng)域的應用處于早期階段，但增長的趨勢十分明顯。IDC預測在2017年到2021年期間，全球軟件定義存儲市場的復合年增長率將達到13.5%，到2021年收入接近162億美元。
自從20世紀90年代中期首次提出概念，對象存儲已經(jīng)成為最大規(guī)模應用的數(shù)據(jù)存儲方法之一。在軟件定義存儲市場中，下一代云數(shù)據(jù)中心的要求正在有力地推動對象存儲的發(fā)展。
毋庸置疑，我們現(xiàn)在處于一個數(shù)據(jù)爆炸的年代，特別是非結(jié)構(gòu)化數(shù)據(jù)(圖片、視頻、歸檔以及企業(yè)級備份等各種數(shù)據(jù))成為企業(yè)數(shù)據(jù)的重要組成部分。這種海量數(shù)據(jù)就需要對應的存儲來解決，而傳統(tǒng)企業(yè)存儲比如NAS或者SAN等無法應對這種海量的非結(jié)構(gòu)化數(shù)據(jù)。
對象存儲看過來
通常，傳統(tǒng)的存儲技術(shù)可分為直連存儲(DAS：Direct Access Storage)、存儲區(qū)域網(wǎng)絡(SAN：Storage Area Network)和網(wǎng)絡附加存儲(NAS：Network Attached Storage)。
從存儲形態(tài)來看，DAS和SAN屬于塊存儲，也就是說存儲系統(tǒng)對磁盤(塊設備)進行操作，數(shù)據(jù)存取的接口是塊設備驅(qū)動。NAS屬于文件存儲，主要是對文件及目錄進行管理，數(shù)據(jù)存取的接口是文件協(xié)議，比如NFS。從抽象層次來說，文件存儲要高于塊存儲。
目前，整個企業(yè)級存儲市場正在從“垂直擴展”向“水平擴展”發(fā)展。業(yè)界關(guān)于新一代企業(yè)存儲有很多名詞，比如軟件定義存儲、分布式存儲、水平擴展式存儲等，它們所表達的意思是一樣的，就是在相對比較廉價的X86服務器之上通過軟件進行存儲管理。
在這種水平擴展存儲中，我們會面對塊存儲、文件存儲和對象存儲等類別，它們各自適用的場景不同。其中分布式塊存儲適用的場景相對來說比較特定，比如Oracle數(shù)據(jù)庫，需要掛高性能硬盤做數(shù)據(jù)庫的存儲;此外，最適合存儲非結(jié)構(gòu)化數(shù)據(jù)，即圖片、視頻等類型數(shù)據(jù)的是分布式文件存儲和對象存儲。
而且對象存儲與塊存儲不一樣。對象存儲沒有邏輯單元(LUN)、卷及磁盤陣列(RAID)這些概念。對象存儲與文件存儲也不一樣，對象存儲不是通過目錄來查詢文件。對象數(shù)據(jù)不是存儲在塊或者LUN中，而是在大小可變的容器(Bucket)里。
對象存儲的核心思想是將數(shù)據(jù)通路(數(shù)據(jù)讀或?qū)?和控制通路(元數(shù)據(jù))分離，并且基于對象存儲設備構(gòu)建存儲系統(tǒng)，每個對象存儲設備具有一定的智能，能夠自動管理其上的數(shù)據(jù)分布。
所以，對象存儲結(jié)合了塊存儲和文件存儲的優(yōu)點，既有塊存儲的高性能，也有文件存儲的共享便利，是目前最主要的云存儲方式。
我們訪問對象存儲中的數(shù)據(jù)，可以直接通過REST API來訪問對象存儲，就像用URI訪問一個網(wǎng)絡資源文件一樣的方便。
從對象存儲的設計思想，我們可以看出其適應了目前新技術(shù)的發(fā)展趨勢和企業(yè)的數(shù)據(jù)存儲和業(yè)務應用的需求變化。
比如在應用場景上，對象存儲可以廣泛應用于Web和移動應用、企業(yè)網(wǎng)盤、靜態(tài)網(wǎng)站托管、大數(shù)據(jù)分析、IaaS/PaaS服務、圖片處理、視頻云、備份歸檔、數(shù)據(jù)遷移等。
對象存儲成云計算廠商標配
誠如上述，對象存儲會是企業(yè)存儲的藍海市場?，F(xiàn)階段對于對象存儲進入企業(yè)級市場是一個非常好的階段，它處于被廣泛采納的早期階段，各路玩家紛紛布局。
在對象存儲市場，云計算廠商、存儲廠商、IT廠商、軟件廠商都有所布局。比如IBM、HDS、EMC、Nutanix、VMware都有自己的相應產(chǎn)品。但是公有云提供商是絕對的主力玩家。
對象存儲的發(fā)展和商業(yè)化一直與云計算行業(yè)緊密相連。云計算市場經(jīng)過這幾年發(fā)展，已經(jīng)趨向成熟，而應用比較廣的對象存儲服務，現(xiàn)成為云服務公司的一項基礎(chǔ)業(yè)務，市面上能夠提供這項服務的廠商數(shù)不勝數(shù)。
作為歷史上最早期的云存儲服務，簡稱S3的Simple Storage Service的目的和功用就是為AWS未來的云服務用戶提供最基礎(chǔ)、最簡便的云存儲服務，無論是圖片、視頻還是文本，S3都能夠提供存儲服務，簡單、集中、性價比高。
微軟Azure推出了高度可縮放的非結(jié)構(gòu)化數(shù)據(jù)對象存儲——Blob存儲，憑借百億億字節(jié)容量和巨大的伸縮性，Blob存儲可根據(jù)數(shù)據(jù)訪問頻率，將數(shù)百至數(shù)十億的對象存儲在“熱”、“冷”或“存檔”層中，企業(yè)可以輕松并經(jīng)濟高效地存儲任何類型的非結(jié)構(gòu)化數(shù)據(jù)(圖像、視頻、音頻、文檔等)。
國內(nèi)云廠商也積極布局對象存儲，比如阿里云對象存儲(Object Storage Service，簡稱OSS)已實現(xiàn)商業(yè)化服務5年以上，其是基于阿里云飛天分布式系統(tǒng)的海量、安全和高可靠的云存儲服務。
UCloud則提供了對象存儲UFile服務，UFile具有存儲無上限、支持高并發(fā)訪問、成本更低等優(yōu)勢;解決業(yè)務架構(gòu)的文件存儲問題，有效降低海量文件的存儲成本，支持熱點數(shù)據(jù)的高并發(fā)訪問，提升終端用戶訪問體驗。
企業(yè)級云服務商青云QingCloud也提供了基于公有云的QingStor對象存儲服務，還有QingStor對象存儲私有云一體化解決方案。
對象存儲在公有云的成功，已經(jīng)對企業(yè)存儲生態(tài)和部署模式產(chǎn)生了影響。比如現(xiàn)在OpenStack Swift和Ceph這些開源對象存儲的流行，Amazon S3成為事實上的對象存儲訪問標準，都是公有云對象存儲普遍部署的影響。
所以，對象存儲與云計算市場特別是公有云的快速發(fā)展息息相關(guān)。在公有云快速發(fā)展的今天，對象存儲也迎來了自己的“春天”。
在企業(yè)級市場里，對象存儲已經(jīng)過了教育階段，正處于一個比較好的時期，對象存儲將占據(jù)企業(yè)級存儲容量里75%左右的份額，它處于被廣泛采納的早期階段。
不過，雖說對象存儲迎來了快速發(fā)展的“東風”，但是如何順應發(fā)展大勢和滿足客戶需求是對象存儲提供商贏得市場的關(guān)鍵。
云計算廠商如何玩轉(zhuǎn)對象存儲?
雖說對象存儲將會是企業(yè)存儲的藍海市場，現(xiàn)在云計算廠商也紛紛布局對象存儲，但是決定市場競爭的關(guān)鍵是產(chǎn)品和技術(shù)，對象存儲如何才能幫助云計算廠商“攻城略地”，或許以下幾點可以作為參考。
從接口層(協(xié)議層)，對象存儲需要兼容AWS S3 API，支持多種協(xié)議，包括NFS、FTP、HDFS等。只有這樣才能滿足客戶的應用需求，畢竟對于企業(yè)級應用來說，接口和協(xié)議的豐富度是必不可少的。
在交付模式上，對象存儲可以通過公有云、私有云、混合云等模式進行交付，并實現(xiàn)統(tǒng)一管理。雖然最初對象存儲是公有云廠商推出的，但是對于某些行業(yè)而言，他們更傾向于在自己的數(shù)據(jù)中心里構(gòu)建一個數(shù)據(jù)池，進行統(tǒng)一的管理，以及后續(xù)的分析和利用。所以，交付方式的多樣化是必不可少的，而且對于對象存儲廠商來講，需要具備多種交付模式上的統(tǒng)一管理能力。
現(xiàn)在企業(yè)級存儲市場呈現(xiàn)融合趨勢，比如開源存儲軟件Ceph，將塊存儲、文件存儲以及對象存儲以同一套架構(gòu)輸出。
但是有的云計算廠商認為，不管是塊存儲、文件存儲還是對象存儲，它們所要解決的問題很不一樣。因此如果想從上到下都是同一套架構(gòu)去解決幾種存儲形態(tài)的話會顧此失彼。
產(chǎn)品體系化，對象存儲API的使用方式非常簡單，通常對象存儲廠商也提供了各樣語言的SDK。但是這樣還不夠，對于存儲廠商來說，產(chǎn)品體系化非常重要，因為你的產(chǎn)品需要和用戶的各種應用場景相結(jié)合，提供各種各樣的解決方案。
在架構(gòu)層面，對象存儲有兩個比較重要的趨勢：一是事件驅(qū)動的框架，因為用戶的數(shù)據(jù)并不是簡單的存儲，而是需要進一步處理，這就需要事件驅(qū)動的框架，它可以接駁各種各樣的數(shù)據(jù)處理服務，甚至用戶自己開發(fā)的處理應用，也可以接入進來。
此外，對象存儲和大數(shù)據(jù)平臺的集成或者接駁非常重要。在公有云形態(tài)上，大數(shù)據(jù)和對象存儲的關(guān)系非常緊密，大數(shù)據(jù)是對象存儲所存儲數(shù)據(jù)的主要來源。但在私有云上還是缺失的狀態(tài)，對象存儲應該在私有云上加深與大數(shù)據(jù)的集成關(guān)系。
再次，對象存儲與數(shù)據(jù)相關(guān)的SaaS服務。比如用戶希望分析對象存儲本身的使用情況，指導整個IT設施的規(guī)劃和構(gòu)建，這就屬于與數(shù)據(jù)相關(guān)的SaaS服務。
最后，企業(yè)級存儲軟件生態(tài)與合作，企業(yè)級存儲生態(tài)里不只是塊存儲、文件存儲、對象存儲，還有很多其它的，比如DR、災備、傳統(tǒng)的備份軟件等。
綜上所述，可以預見的是對象存儲技術(shù)將成為未來存儲技術(shù)的重要組成部分，隨著整個云計算市場的快速發(fā)展，對象存儲市場的發(fā)展也將被提速，從而加速企業(yè)存儲的轉(zhuǎn)型。
