對象存儲的優缺點
① 什麼是對象存儲
對象存儲,也叫做基於對象的存儲,是用來描述解決和處理離散單元的方法的通用術語,這些離散單元被稱作為對象。
就像文件一樣,對象包含數據,但是和文件不同的是,對象在一個層結構中不會再有層級結構。每個對象都在一個被稱作存儲池的扁平地址空間的同一級別里,一個對象不會屬於另一個對象的下一級。
文件和對象都有與它們所包含的數據相關的元數據,但是對象是以擴展元數據為特徵的。每個對象都被分配一個唯一的標識符,允許一個伺服器或者最終用戶來檢索對象,而不必知道數據的物理地址。這種方法對於在雲計算環境中自動化和簡化數據存儲有幫助。
對象存儲經常被比作在一家高級餐廳代客停車。當一個顧客需要代客停車時,他就把鑰匙交給別人,換來一張收據。這個顧客不用知道他的車被停在哪,也不用知道在他用餐時服務員會把他的車移動多少次。在這個比喻中,一個存儲對象的唯一標識符就代表顧客的收據。
② 比較各個存儲類型的優缺點
【塊存儲】
典型設備:磁碟陣列,硬碟
塊存儲主要是將裸磁碟空間整個映射給主機使用的,就是說例如磁碟陣列裡面有5塊硬碟(為方便說明,假設每個硬碟1G),然後可以通過劃邏輯盤、做Raid、或者LVM(邏輯卷)等種種方式邏輯劃分出N個邏輯的硬碟。(假設劃分完的邏輯盤也是5個,每個也是1G,但是這5個1G的邏輯盤已經於原來的5個物理硬碟意義完全不同了。例如第一個邏輯硬碟A裡面,可能第一個200M是來自物理硬碟1,第二個200M是來自物理硬碟2,所以邏輯硬碟A是由多個物理硬碟邏輯虛構出來的硬碟。)
接著塊存儲會採用映射的方式將這幾個邏輯盤映射給主機,主機上面的操作系統會識別到有5塊硬碟,但是操作系統是區分不出到底是邏輯還是物理的,它一概就認為只是5塊裸的物理硬碟而已,跟直接拿一塊物理硬碟掛載到操作系統沒有區別的,至少操作系統感知上沒有區別。
此種方式下,操作系統還需要對掛載的裸硬碟進行分區、格式化後,才能使用,與平常主機內置硬碟的方式完全無異。
優點:
1、 這種方式的好處當然是因為通過了Raid與LVM等手段,對數據提供了保護。
2、 另外也可以將多塊廉價的硬碟組合起來,成為一個大容量的邏輯盤對外提供服務,提高了容量。
3、 寫入數據的時候,由於是多塊磁碟組合出來的邏輯盤,所以幾塊磁碟可以並行寫入的,提升了讀寫效率。
4、 很多時候塊存儲採用SAN架構組網,傳輸速率以及封裝協議的原因,使得傳輸速度與讀寫速率得到提升。
缺點:
1、採用SAN架構組網時,需要額外為主機購買光纖通道卡,還要買光纖交換機,造價成本高。
2、主機之間的數據無法共享,在伺服器不做集群的情況下,塊存儲裸盤映射給主機,再格式化使用後,對於主機來說相當於本地盤,那麼主機A的本地盤根本不能給主機B去使用,無法共享數據。
3、不利於不同操作系統主機間的數據共享:另外一個原因是因為操作系統使用不同的文件系統,格式化完之後,不同文件系統間的數據是共享不了的。例如一台裝了WIN7/XP,文件系統是FAT32/NTFS,而Linux是EXT4,EXT4是無法識別NTFS的文件系統的。就像一隻NTFS格式的U盤,插進Linux的筆記本,根本無法識別出來。所以不利於文件共享。
【文件存儲】
典型設備:FTP、NFS伺服器
為了克服上述文件無法共享的問題,所以有了文件存儲。
文件存儲也有軟硬一體化的設備,但是其實普通拿一台伺服器/筆記本,只要裝上合適的操作系統與軟體,就可以架設FTP與NFS服務了,架上該類服務之後的伺服器,就是文件存儲的一種了。
主機A可以直接對文件存儲進行文件的上傳下載,與塊存儲不同,主機A是不需要再對文件存儲進行格式化的,因為文件管理功能已經由文件存儲自己搞定了。
優點:
1、造價交低:隨便一台機器就可以了,另外普通乙太網就可以,根本不需要專用的SAN網路,所以造價低。
2、方便文件共享:例如主機A(WIN7,NTFS文件系統),主機B(Linux,EXT4文件系統),想互拷一部電影,本來不行。加了個主機C(NFS伺服器),然後可以先A拷到C,再C拷到B就OK了。(例子比較膚淺,請見諒……)
缺點:
讀寫速率低,傳輸速率慢:乙太網,上傳下載速度較慢,另外所有讀寫都要1台伺服器裡面的硬碟來承擔,相比起磁碟陣列動不動就幾十上百塊硬碟同時讀寫,速率慢了許多。
【對象存儲】
典型設備:內置大容量硬碟的分布式伺服器
對象存儲最常用的方案,就是多台伺服器內置大容量硬碟,再裝上對象存儲軟體,然後再額外搞幾台服務作為管理節點,安裝上對象存儲管理軟體。管理節點可以管理其他伺服器對外提供讀寫訪問功能。
之所以出現了對象存儲這種東西,是為了克服塊存儲與文件存儲各自的缺點,發揚它倆各自的優點。簡單來說塊存儲讀寫快,不利於共享,文件存儲讀寫慢,利於共享。能否弄一個讀寫快,利 於共享的出來呢。於是就有了對象存儲。
首先,一個文件包含了了屬性(術語叫metadata,元數據,例如該文件的大小、修改時間、存儲路徑等)以及內容(以下簡稱數據)。
以往像FAT32這種文件系統,是直接將一份文件的數據與metadata一起存儲的,存儲過程先將文件按照文件系統的最小塊大小來打散(如4M的文件,假設文件系統要求一個塊4K,那麼就將文件打散成為1000個小塊),再寫進硬碟裡面,過程中沒有區分數據/metadata的。而每個塊最後會告知你下一個要讀取的塊的地址,然後一直這樣順序地按圖索驥,最後完成整份文件的所有塊的讀取。
這種情況下讀寫速率很慢,因為就算你有100個機械手臂在讀寫,但是由於你只有讀取到第一個塊,才能知道下一個塊在哪裡,其實相當於只能有1個機械手臂在實際工作。
而對象存儲則將元數據獨立了出來,控制節點叫元數據伺服器(伺服器+對象存儲管理軟體),裡面主要負責存儲對象的屬性(主要是對象的數據被打散存放到了那幾台分布式伺服器中的信息),而其他負責存儲數據的分布式伺服器叫做OSD,主要負責存儲文件的數據部分。當用戶訪問對象,會先訪問元數據伺服器,元數據伺服器只負責反饋對象存儲在哪些OSD,假設反饋文件A存儲在B、C、D三台OSD,那麼用戶就會再次直接訪問3台OSD伺服器去讀取數據。
這時候由於是3台OSD同時對外傳輸數據,所以傳輸的速度就加快了。當OSD伺服器數量越多,這種讀寫速度的提升就越大,通過此種方式,實現了讀寫快的目的。
另一方面,對象存儲軟體是有專門的文件系統的,所以OSD對外又相當於文件伺服器,那麼就不存在文件共享方面的困難了,也解決了文件共享方面的問題。
所以對象存儲的出現,很好地結合了塊存儲與文件存儲的優點。
最後為什麼對象存儲兼具塊存儲與文件存儲的好處,還要使用塊存儲或文件存儲呢?
1、有一類應用是需要存儲直接裸盤映射的,例如資料庫。因為資料庫需要存儲裸盤映射給自己後,再根據自己的資料庫文件系統來對裸盤進行格式化的,所以是不能夠採用其他已經被格式化為某種文件系統的存儲的。此類應用更適合使用塊存儲。
2、對象存儲的成本比起普通的文件存儲還是較高,需要購買專門的對象存儲軟體以及大容量硬碟。如果對數據量要求不是海量,只是為了做文件共享的時候,直接用文件存儲的形式好了,性價比高。
③ 塊存儲、文件存儲、對象存儲這三者的本質差別是什麼
存儲設備不同:對象存儲的對應存儲設備為swift,鍵值存儲。文件存儲的對應存儲設備為FTP、NFS伺服器。塊存儲的對應存儲設備為cinder,硬碟。
特點不同:對象存儲的特點是具備塊存儲的高速以及文件存儲的共享等特性,文件存儲的特點是一個大文件夾,大家都可以獲取文件。塊存儲的特點是分區、格式化後,可以使用,與平常主機內置硬碟的方式完全無異。
塊存儲注意事項
要運行任何新的RAID+功能,陣列控制器都需要一個元數據基礎,看起來很像文件系統那樣。以重復數據刪除為例來說,陣列必須將數據分解成4K到1MB的塊,解算出哪些塊存儲的是同樣的數據,然後構建一個指針列表將LUN邏輯塊地址映射到所儲存的塊。
自動分層要求更多的元數據,因為系統必須跟蹤數據塊的邏輯塊地址,而這些數據塊分處在不同的存儲類型上的不同的RAID集中。除了要解算出哪些是必須升級到更快的存儲層的熱數據和哪些是必須降級的冷數據外,系統還必須收集訪問頻率元數據。
④ 什麼是對象存儲
什麼是對象存儲?
存儲區域網(SAN)和網路附加存儲(NAS)是我們比較熟悉的兩種主流網路存儲架構,而對象存儲(Object-based Storage)是一種新的網路存儲架構,基於對象存儲技術的設備就是對象存儲設備(Object-based Storage Device)簡稱OSD。
對象存儲的發展歷史:
1999年成立的全球網路存儲工業協會(SNIA)的對象存儲設備(Object Storage Device)工作組發布了ANSI的X3T10標准。
對象存儲的優點:
總體上來講,對象存儲同兼具SAN高速直接訪問磁碟特點及NAS的分布式共享特點。
SAN(Storage Area Network)結構
採用SCSI 塊I/O的命令集,通過在磁碟或FC(Fiber Channel)級的數據訪問提供高性能的隨機I/O和數據吞吐率,它具有高帶寬、低延遲的優勢,在高性能計算中佔有一席之地,如SGI的CXFS文件系統就是基於SAN實現高性能文件存儲的,但是由於SAN系統的價格較高,且可擴展性較差,已不能滿足成千上萬個CPU規模的系統。
⑤ 什麼是對象存儲
對象存儲,也叫做基於對象的存儲,是用來描述解決和處理離散單元的方法的通用術語,這些離散單元被稱作為對象。
存儲區域網(SAN)和網路附加存儲(NAS)是目前兩種主流網路存儲架構,而對象存儲(Object-based Storage)是一種新的網路存儲架構,基於對象存儲技術的設備就是對象存儲設備(Object-based Storage Device)簡稱OSD。1999年成立的全球網路存儲工業協會(SNIA)的對象存儲設備工作組發布了ANSI的X3T10標准。總體上來講,對象存儲綜合了NAS和SAN的優點,同時具有SAN的高速直接訪問和NAS的分布式數據共享等優勢,提供了具有高性能、高可靠性、跨平台以及安全的數據共享的存儲體系結構。
⑥ 對象存儲,塊存儲,文件存儲那個好
不同存儲之前沒有好壞之分,只有適不適合,下面針對文件存儲,塊存儲的典型代表DAS,NAS,SAN做個一個詳細的對比表,可以系統看下他們的區別與使用場景的差異:
⑦ 對象存儲、文件存儲和塊存儲有什麼區別
區別如下:
1、速度不同
塊存儲:低延遲(10ms),熱點突出;
文件存儲:不同技術各有不同;
對象存儲:100ms-1s,冷數據;
2、可分步性不同
塊存儲:異地不現實;
文件存儲:可分布式,但有瓶頸;
對象存儲:分步並發能力高;
3、文件大小不同
塊存儲:大小都可以,熱點突出;
文件存儲:適合大文件;
對象存儲:適合各種大小;
4、介面不同
塊存儲:Driver,kernel mole ;
文件存儲:POSIX;
對象存儲:Restful API ;
5、典型技術不同
塊存儲:SAN;
文件存儲:HDFS,GFS;
對象存儲:Swift,Amazon S3;
6、適合場景不同
塊存儲:銀行;
文件存儲:數據中心;
對象存儲:網路媒體文件存儲;
(7)對象存儲的優缺點擴展閱讀:
文件存儲的優缺點:
優點
(1)、造價低:隨便一台機器就可以,另外普通的乙太網就可以,根本不需要專用的SAN網路,所以造價低。
(2)、方便文件共享。
缺點
(1)、讀寫速率低,傳輸速率慢:乙太網,上傳下載速度較慢,另外所有讀寫都要1台伺服器裡面的硬碟來承受,相比起磁碟陣列動不動就十幾上百塊硬碟同時讀寫,速率慢了許多。
⑧ 對象存儲有什麼優勢
簡單介紹一下藍隊雲對象存儲的優勢:
1、邊緣存儲。
藍隊雲邊緣存儲服務在大規模邊緣節點和用戶側部署服務,加速數據存儲至邊緣,並最終將持久化數據保存至中心,有效解決數據上傳鏈路差,帶寬利用率低等行業痛點,降低本地存儲成本。
2、內容加速分發。
面對視頻、游戲等熱點資源分發的業務場景,您可以使用藍隊雲對象存儲作為源站,搭配藍隊雲 融合CDN 進行加速分發,方便您通過 CDN 節點就近訪問資源,提升用戶體驗。
3、多媒體數據處理。
針對有海量用戶生成內容的場景,藍隊雲對象存儲服務的高並發能力可以靈活應對大流量的業務場景。對存儲在雲端的圖片、音視頻等文件進行數據處理。
4、靜態資源託管。
藍隊雲無縫集合各類第三方擴展插件,如 WordPress、Discuz、Emlog 等,並支持一鍵將各類插件里的靜態資源託管到藍隊雲。
5、備份和歸檔。
藍隊雲提供高可用和高可靠的存儲解決方案來備份和歸檔用戶的關鍵數據,用戶可以設置不同的訪問許可權和級別,保障數據訪問安全。
相較於傳統自建方案,用戶無需采購高昂硬體,無需擔心擴容、安全等問題,從而節省更多的存儲、維護、人力成本。
6、海量數據高並發。
藍隊雲針對海量數據高並發的場景做了深度優化,實現對象存儲訪問協議到 HDFS 協議的轉換。
相較於傳統 Hadoop 方案,用戶可獲得更優的讀取、分析性能,更強的穩定性和更好的擴展性。
7、私有雲存儲
企業客戶可以選擇私有化部署藍隊雲對象存儲系統。
基於公有雲存儲的經驗積累,私有雲存儲解決方案具備高可靠、強安全、易擴展等特性。同時還能提供成熟的系統管理和運維,讓企業以更低廉的產品及維護成本,滿足在容量、性能及穩定性上的需求。
藍隊雲對象存儲跨數據中心的副本冗餘,為用戶數據提供異地容災和資源隔離功能,能夠保障服務的高可用性。能夠實現存儲需求的彈性伸縮,從而提高業務靈活性。並且藍隊雲對象存儲按需購買的便捷性,能夠有效避免存儲及帶寬資源的閑置浪費~您值得信賴~
⑨ 對象存儲與SAN存儲和NAS存儲相比較有什麼優勢
對象存儲可以簡單理解為用來存儲圖片、音頻、視頻等非結構化數據的數據池。相對於主機伺服器,具有讀寫速度快,利於分享的特點。在這里給大家總結了這六點。
1、網站數據動靜分離,大幅提升網頁性能
一般情況下,我們都是建議使用主機伺服器和對象存儲分工合作的方式來存儲網站數據。主機伺服器主要負責存儲網站的動態數據,對象存儲則用來存儲網站的靜態文件。從而實現網站的動靜分離,當用戶訪問一個網站時,分別從主機伺服器和對象存儲的伺服器同步讀取數據,可以大幅的提升網頁性能。
2、單獨的文件管理界面,管理網站文件和本地電腦一樣方便
無論是騰訊雲、阿里雲、杉岩,對象存儲都有單獨的管理控制台,騰訊雲和阿里雲還有專門的電腦客戶端。你不必打開網站,就可以像使用網路雲盤一樣使用對象存儲來管理你的網站文件,除了上傳、下載、預覽等常用功能,還可以直接在對象存儲上進行圖片處理/媒體轉碼/數據分析等。
3、本質是」內置大容量硬碟的分布式伺服器「,同一個文件支持跨域共享
對象存儲的本質是「內置大容量硬碟的分布式伺服器」,對象存儲有自己的 CPU、內存、網路和磁碟系統,具備一定的智能,同一個對象存儲數據池可以新建不同的存儲桶(bucket),分別用來存儲不同網站的數據,彼此互不幹擾。而且同一個文件可以引用到不同的網站,可以有效的減少數據冗餘。
4、儲存節點多,支持跨地域實時同步,實現異地容災
假設你的圖片等數據存儲在你自己的伺服器上,只能通過定期數據備份的方式保護你的數據。數據量大的話,每次備份都需要大量的時間和佔用大量的磁碟空間,管理起來還不方便。
如果你的數據放置在對象存儲的數據池了,並與網站關聯。那麼靜態文件的備份就可以交給對象存儲。你只需要對網站少量的動態文件進行備份。省時省力。
比如我使用對象存儲,我在離我最近的節點【深圳】來存儲網站的圖片等靜態文件。但是考慮到極端情況,比如深圳節點由於突然停電,可能導致數據全部丟失。但如果之前我選擇了【杭州】作為第二個存儲節點,而且設置【深圳】節點的數據實時增量同步到【杭州】節點。那麼就算深圳節點的數據丟失了,但是我在杭州的數據還是可以使用。等到恢復供電,我再把數據從杭州節點同步回深圳節點就可以了。這就是我們說的異地容災。
5、成本低,資源彈性伸縮,按需付費
對象存儲不像伺服器的流量是固定的,包含在伺服器的費用裡面了。無論你用或不用,都是這么多。對象存儲可以是根據你的實際使用量進行計費。
6、節省伺服器空間
為什麼選擇將這一點放在最後說呢?因為現在伺服器的價格還算實惠,活動也比較多。大部分站長已經不存在伺服器空間不夠用的問題。而且對象存儲的出現也不是為了解決伺服器空間不夠用的問題。而是為了結合【塊存儲】、【文件存儲】各自的優點,從而實現高效的文件讀寫和分享。但是節省了伺服器空間還是不爭得事實,所以還是提一下吧。
⑩ 對象存儲是什麼對象存儲的基本定義
對象存儲是一種將數據作為對象進行管理的計算機數據存儲體系結構,與其他存儲體系結構(例如將數據作為文件層級管理的文件系統)以及將數據作為塊和扇區內的塊進行管理的塊存儲相對。每個對象通常包括數據本身,可變數量的元數據和全局獨立標識符。
對象存儲可以在多個級別實現,包括設備級別(對象存儲設備),系統級別和介面級別。在每種情況下,對象存儲都試圖實現其他存儲架構無法解決的功能,例如可以由應用程序直接編程的介面,可以再多個物理硬體實例的命名空間,以及數據管理功能,如數據復制和數據分發在對象級粒度。
相比於資料庫這種面向結構化數據存儲的技術,對象存儲主要面向存儲大量的非結構化數據。
(10)對象存儲的優缺點擴展閱讀:
對象存儲、文件存儲和塊存儲的區別如下:
1、速度不同
塊存儲:低延遲(10ms),熱點突出;
文件存儲:不同技術各有不同;
對象存儲:100ms-1s,冷數據;
2、可分步性不同
塊存儲:異地不現實;
文件存儲:可分布式,但有瓶頸;
對象存儲:分步並發能力高;
3、文件大小不同
塊存儲:大小都可以,熱點突出;
文件存儲:適合大文件;
對象存儲:適合各種大小;
4、介面不同
塊存儲:Driver,kernel mole ;
文件存儲:POSIX;
對象存儲:Restful API ;
5、典型技術不同
塊存儲:SAN;
文件存儲: HDFS,GFS;
對象存儲:Swift,Amazon S3;
6、適合場景不同
塊存儲:銀行;
文件存儲:數據中心;
對象存儲:網路媒體文件存儲。