雲存儲現狀
『壹』 亞馬遜雲科技的雲存儲,最應該知道的有這三點
傳統存儲在以各種方式對接公有雲生態,公有雲的雲上服務類型也在不斷完善,作為企業信息化負責人要做的是更多地了解公有雲,然後,考慮如何充分利用公有雲的優勢。
本文通過介紹亞馬遜雲 科技 存儲服務的三個關鍵點,帶您認識雲存儲的現狀。
正文:
乘著互聯網產業的春風,雲存儲在過去近二十年走過了可遇不可求的發展歷程。也讓從90年代開始,就一直坐著冷板凳,負責數據歸檔的對象存儲,一躍成為整個互聯網數據的基石。
如今,絕大部分互聯網上可訪問的數據都靠對象存儲來存,偶爾曝出的數據泄露事件也大多都跟對象存儲有關,當然,問題不在於對象存儲本身。
從2006年,亞馬遜雲 科技 的對象存儲服務Amazon S3發布,到現在,算起來也有十六年的時間了,這也是亞馬遜雲 科技 推出的第一款雲服務。
從市場表現來看,Amazon S3是非常成功的,前兩年有人推測說,亞馬遜雲 科技 在存儲方面的營收規模非常大,甚至被稱作是全球最大的存儲公司,Amazon S3無疑是功勞最大的一個。
有人說,許多亞馬遜雲 科技 用戶使用的第一個產品就是Amazon S3對象存儲,在所有亞馬遜雲 科技 的用戶案例,在所有技術文檔里,Amazon S3的出鏡率都非常高。
雲上原生存儲Amazon S3的主線任務:不斷降低成本
如果亞馬遜雲 科技 的用戶沒用過Amazon S3,就好比去包子鋪吃飯沒點包子,光顧燒烤店沒吃烤串一樣,令人費解。
Amazon S3的易用性高、可用性高,開發者很喜歡,Amazon S3幾乎不丟數據的可靠性,穩定性也很高,運維管理人員很喜歡,Amazon S3在互聯網應用場景被普遍應用。
如今,Amazon S3上存著超過100萬億個對象,每秒需要處理上千百萬次請求。
Amazon S3一開始解決了可靠性和可用性以及安全方面的基本問題,性能也一直在提升,多年看下來,最大的工作重點就是不斷降低成本。
亞馬遜雲 科技 大中華區產品部總經理 陳曉建介紹稱,同樣存儲一份數據,如果2006年需要100塊錢,而在2022年就只需要大概15塊錢,16年間,Amazon S3的存儲成本降低了大約7倍。
2021年12月,亞馬遜雲 科技 宣布在全球九大區域,將Amazon S3 Standard In Frequent Access和Amazon S3 One Zone In Frequent Access的價格降低了31%。
Amazon S3存儲分了八個層級。
對於需要經常訪問的數據,首選標准版的Amazon S3,它具有毫秒級的訪問表現,而不太經常訪問的數據就選Amazon S3 Standard-IA上,相較於前者能節省大概40%的費用。
而對於那些很少訪問的數據,則可以選擇放在Amazon S3 Glacier DeepArcihve上,它的成本非常低,大約1美刀1個TB,但代價是,想把數據拿回來就得多等等,大概需要12到48個小時。
有人覺得這等的時間也太長了,於是,亞馬遜雲 科技 又推出了Amazon S3 Glacier Flexible Retrieval,只需要等上幾分鍾到幾小時。
就沒有一種,既可以便宜,訪問性能又高的存儲嗎?還真有。
這就是Amazon S3 Glacier Instant Retrieval,它是最新的一個存儲層級,拿回數據的速度是毫秒級的,成本與Amazon S3 Glacier相當,適合每季度才訪問一次、又需要毫秒級取回的海量數據。
另外,Amazon S3 One Zone-IA的成本也很低,顧名思義,數據只存在單個可用區上,而其他S3存儲的數據都在多個可用區上存著好幾分,相比之下,理論上丟數據的風險高了些。
最後,出於合規的要求,用戶有些數據不能上雲,亞馬遜雲 科技 可以提供Amazon Outposts,把雲的硬體放到了用戶的數據中心裡。使用Amazon S3 on Outposts,就像在雲上使用S3一樣。
總的來說,Amazon S3的存儲層級還是挺多的,但問題是,這給選型和管理也帶來了負擔。
為此,亞馬遜雲 科技 推出了Amazon S3 Intelligent-Tiering(智能分層),它會根據對象被訪問的次數在多個存儲層級間進行自動化遷移。
如果不能確定要選什麼或者存儲需求會變,那就選它,它不僅能解除選擇困難症,還能避免用戶自行管理數據分層的麻煩。
一家在東南亞和北美市場非常有影響力的互聯網公司,在亞馬遜雲 科技 上存放了大約幾十PB的數據,原本主要使用的是Amazon S3 Standard—IA,在使用Amazon S3智能分層後,沒有進行任何額外操作,就將存儲成本降低了62%。
亞馬遜雲 科技 最早在2018年就推出了Amazon S3智能分層功能,如今,Amazon S3智能分層已經涵蓋了Amazon S3家族的幾乎所有存儲類別,最多可節省68%的成本。
不僅如此,如今數據分層還拓展到文件存儲Amazon EFS,Amazon EFS提供四種文件存儲等級,數據分層能節省高達72%的存儲成本。
打通雲應用與傳統應用的隔閡:靠多種文件存儲
如果說,對象存儲是雲存儲的標配的話,那文件存儲就是雲存儲連接本地存儲的橋梁。
如今常見的應用分為兩類。
一類是雲原生的現代化應用,也就是在雲上開發的、充分利用雲架構優勢的應用,比如電商、 游戲 、社交媒體等平台。對應需要的存儲,大部分是對象存儲Amazon S3來滿足,少部分需要文件存儲Amazon EFS。
另一類是傳統企業應用,它誕生在公有雲之前,常見的有高性能計算、EDA、視頻渲染等場景,通常由本地的文件存儲系統,比如NAS來支撐的,為提升安全性和可靠性,通常都帶有快照、鏡像、遠程復制等功能特性。
這類工作負載並沒有根據雲架構的特點來設計,如果強行上雲,不僅需要調整應用本身,而且還可能出現兼容性的問題,為了避免此類問題,亞馬遜雲 科技 推出了FSx文件存儲家族。
從2018年開始,陸續推出了面向Windows環境的Amazon FSx for Windows,面向高性能計算場景的Amazon FSx for Lustre,面向大數據分析場景推出了Amazon FSx for OpenZFS。
金風慧能採用了亞馬遜雲 科技 構建HPC高性能計算系統,其中使用了Amazon FSx for Lustre共享存儲系統,不僅使氣象預測系統性能提升了10%,氣象計算時間縮短了1/3,還將成本降低了70%,運維復雜度也大大降低。
此外,還與知名存儲廠商NetApp合作推出了Amazon FSx for NetApp ONTAP,把NetApp的經典NAS文件存儲系統NetApp ONTAP放到了公有雲上。
NetApp在2015年就提出了Data Fabric的概念,大意就是想要實現數據在雲上和雲下的自由流動,是比較早積極擁抱混合雲的存儲廠商之一。
與一些存儲廠商的雲上託管服務不同,Amazon FSx for NetApp ONTAP沒有刪減任何功能,它是雲上唯一完整且全託管的NetApp ONTAP文件存儲系統,能夠無縫地跟企業本地的ONTAP系統對接,所以,用戶的IT系統不需要做任何改動,就能使用雲上服務。
2019年,NetApp與聯想成立合資公司——聯想凌拓,聯想凌拓在中國區提供相關服務,聯想凌拓產品管理與營銷高級總監林佑聲表示,從發布到現在,Amazon FSx for NetApp ONTAP得到了非常多客戶的認可,包括金融、醫療、石油以及高 科技 行業客戶。
嘉里物流原本是本地存儲NetApp ONTAP的用戶,隨著業務全球化發展,在數據擴容以及數據共享方面碰到的問題越來越多,通過使用亞馬遜雲 科技 提供的Amazon FSx for NetApp ONTAP,將數據從本地遷到雲上,解決了這些問題。
上雲之後,不僅可以使用原來NetApp ONTAP自帶的快照和備份等功能,同時,還可以使用亞馬遜雲 科技 遍布全球的數據中心,實現跨區域的災備。
補足數據保護方面的短板:Amazon Backup
一直以來,雲存儲被詬病的點還在於缺少數據災備功能,在如何維持業務連續性方面有一些爭議,而亞馬遜雲 科技 正在試著消除這一顧慮,這就是Amazon Backup。
由於缺少與業務價值的強關聯性,數據保護經常容易被忽視,同時,由於數據保護系統本身很復雜,合規的要求還特別多,實踐起來也特別麻煩,所以,數據保護的實踐相對落後。
可能也是基於這樣的考慮,亞馬遜雲 科技 的數據保護服務Amazon Backup才特別喜歡強調「一站式」「操作簡單」的特點,讓用戶知道,數據保護也沒有那麼麻煩。
於是我們看到,Amazon Backup能覆蓋旗下的幾乎所有存儲產品,包括塊存儲(Amazon EBS)、對象存儲、文件存儲、資料庫,以及計算和存儲網關等相關產品。
Amazon Backup的操作比較簡單,通過圖形的界面即可完成大部分操作,用戶還可以通過預設的策略進行自動化的備份,降低手動備份帶來的問題。
安全合規的問題讓許多用戶頭疼,Amazon Backup深度集成了亞馬遜雲 科技 自帶的KMS數據加密服務,整個備份操作許可權、數據訪問許可權都可以用IAM進行細顆粒度監控,滿足個人信息安全規范、信息安全等級保護等方面的合規要求。
Amazon Backup避免讓數據保護帶來太多的成本負擔,因此也用上了智能分層技術,用戶通過冷熱分層策略可以有效降低約75%的成本。
澳大利亞石油天然氣的供應商Santos要對Amazon EBS塊存儲做備份,原本都是用手動備份的方案,但隨著業務量的發展,備份的出錯率越來越高,成功率越來越低。
而在用了Amazon Backup後,平均備份任務用時和運營成本均有大幅降低,備份成功率到了100%,而且還完全做到企業數據合規。
結束語
確實如陳曉建所言,亞馬遜雲 科技 存儲服務已經成為IT行業的「水」和「電」,讓各行各業的業務都能從存儲服務中獲得價值。
亞馬遜雲 科技 的存儲服務類型和存儲的相關實踐都非常有代表性,而且,很多做法已經成了上雲的參考實踐,企業用戶應該多少了解亞馬遜雲 科技 的雲存儲,特別是有上雲打算的企業。
當然,上雲帶來的便捷和靈活,穩定性和安全性,以及對運維的解放都很吸引人。
還有顧慮?據我個人了解,亞馬遜雲 科技 非常在意企業在雲上的成功和成本節省,不僅會幫企業不斷優化。除此之外,市場上有一些專門的服務,幫助企業做規劃實施,讓你充分利用雲的優勢。
『貳』 國內的雲計算市場現狀如何
目前正處於高速增長階段
2007年以來,中國雲計算的發展先後經歷四個階段:第一階段為市場引入階段,雲計算的概念剛剛在中國出現,客戶對雲計算認知度較低;第二階段為成長階段,用戶對雲計算已經比較了解,並且越來越多的廠商開始踏入這個行業;第三階段是成熟階段,這個時候雲計算廠商競爭格局已經基本形成,廠商們開始從更加成熟優秀的解決方案入手,SaaS模式的應用逐漸成為主流;第四個階段是高速增長階段,在這個階段我國雲計算市場整體規模偏小,落後全球雲計算市場3至5年,且從細分領域來看,國內SaaS市場仍缺乏行業領軍企業。
—— 以上數據參考前瞻產業研究院《中國雲計算產業發展前景預測與投資戰略規劃分析報告》
『叄』 雲端存儲技術未來的發展前景如何
海量數據催生新型的存儲模式——雲存儲
近年來,大數據發展浪潮席捲全球,企業對信息存儲提出了新的需求,雲存儲由此而誕生。雲存儲是基於雲計算相關技術延伸和發展而來的全新的產品形態。
雲存儲的核心技術主要包括虛擬化技術、重復數據刪除技術、分布式存儲技術、數據備份技術、內容分發網路技術和存儲加密技術。雲存儲利用這些核心技術將網路中大量各種不同類型的存儲設備通過應用軟體集合起來協同工作,共同對外提供數據存儲和業務訪問功能,從而保證數據的安全性,並節約存儲空間。
雲存儲往企業級方向發展,市場規模持續擴大
我國雲存儲行業的發展可以追溯到2007年,雲計算、雲存儲的概念在國內開始出現。2011年,雲計算、雲存儲的概念落地;2012年,國家將雲計算列為重點發展的戰略性新興產業,各大互聯網企業紛紛推出自己的雲存儲應用,類Dropbox和類Evernote的應用層出不窮。該階段雲存儲的發展以個人雲存儲發展為主。
2016年,監管政策收緊導致大批網盤企業關停,致使個人雲存儲用戶規模急劇下降。企業雲存儲迎來高速發展期,國家積極鼓勵企業上雲。同時伴隨著海量數據的增長,市場對信息存儲的安全提出了更高的要求,各大企業也紛紛推出了存儲容災、專屬企業存儲等服務。
據統計,目前企業雲存儲占據了98.63%的雲存儲市場規模,個人雲存儲市場規模佔比僅在1.37%左右。
從整體市場規模看,2015年我國雲存儲市場規模約為115億元,2019年我國雲存儲市場規模已經達到了326億元。2020年,海量數據的持續增長進一步推動了我國企業對雲存儲的需求,2020年我國雲存儲市場規模預計接近400億元。
萬物互聯將催生更大雲存儲市場
未來,我國5G的發展與雲計算交織並進,5G時代網路速度的提升帶來萬物互聯,而其背後大量的數據需要有雲計算強大的計算和存儲能力支撐,我國雲存儲市場發展空間大,市場規模在未來幾年仍將保持較快的增速增長,2026年有望突破1800億元。
『肆』 雲存儲怎麼樣
雲存儲是新興的網路存儲技術,還是不錯的。
雲存儲是一種網上在線存儲(英語:Cloud storage)的模式,即把數據存放在通常由第三方託管的多台虛擬伺服器,而非專屬的伺服器上。託管(hosting)公司運營大型的數據中心,需要數據存儲託管的人,則透過向其購買或租賃存儲空間的方式,來滿足數據存儲的需求。
簡單來說,雲存儲就是將儲存資源放到雲上供人存取的一種新興方案。使用者可以在任何時間、任何地方,透過任何可連網的裝置連接到雲上方便地存取數據。如果這樣解釋還是難以理解,那我們可以借用廣域網和互聯網的結構來解釋雲存儲。
『伍』 雲存儲的發展趨勢
雲存儲已經成為未來存儲發展的一種趨勢。但隨著雲存儲技術的發展,各類搜索、應用技術和雲存儲相結合的應用,還需從安全性、便攜性及數據訪問等角度進行改進。(1)安全性從雲計算誕生,安全性一直是企業實施雲計算首要考慮的問題之一。同樣在雲存儲方面,安全仍是首要考慮的問題,對於想要進行雲存儲的客戶來說,安全性通常是首要的商業考慮和技術考慮。但是許多用戶對雲存儲的安全要求甚至高於它們自己的架構所能提供的安全水平。即便如此,面對如此高的不現實的安全要求,許多大型、可信賴的雲存儲廠商也在努力滿足它們的要求,構建比多數企業數據中心安全得多的數據中心。用戶可以發現,雲存儲具有更少的安全漏洞和更高的安全環節,雲存儲所能提供的安全性水平要比用戶自己的數據中心所能提供的安全水平還要高。(2)便攜性一些用戶在託管存儲的時候還要考慮數據的便攜性。一般情況下這是有保證的,一些大型服務提供商所提供的解決方案承諾其數據便攜性可媲美最好的傳統本地存儲。有的雲存儲結合了強大的便攜功能,可以將整個數據集傳送到你所選擇的任何媒介,甚至是專門的存儲設備。(3)性能和可用性過去的一些託管存儲和遠程存儲總是存在著延遲時間過長的問題。同樣地,互聯網本身的特性就嚴重威脅服務的可用性。最新一代雲存儲有突破性的成就,體現在客戶端或本地設備高速緩存上,將經常使用的數據保持在本地,從而有效地緩解互聯網延遲問題。通過本地高速緩存,即使面臨最嚴重的網路中斷,這些設備也可以緩解延遲性問題。這些設備還可以讓經常使用的數據像本地存儲那樣快速反應。通過一個本地NAS網關,雲存儲甚至可以模仿終端NAS設備的可用性、性能和可視性,同時將數據予以遠程保護。隨著雲存儲技術的不斷發展,各廠商仍將繼續努力實現容量優化和WAN(廣域網)優化,從而盡量減少數據傳輸的延遲性。(4)數據訪問現有對雲存儲技術的疑慮還在於,如果執行大規模數據請求或數據恢復操作,那麼雲存儲是否可提供足夠的訪問性。在未來的技術條件下,此點大可不必擔心,現有的廠商可以將大量數據傳輸到任何類型的媒介,可將數據直接傳送給企業,且其速度之快相當於復制、粘貼操作。另外,雲存儲廠商還可以提供一套組件,在完全本地化的系統上模仿雲地址,讓本地NAS網關設備繼續正常運行而無需重新設置。未來,如果大型廠商構建了更多的地區性設施,那麼數據傳輸將更加迅捷。如此一來,即便是客戶本地數據發生了災難性的損失,雲存儲廠商也可以將數據重新快速傳輸給客戶數據中心。 雲計算和物聯網之間的關系可以用一個形象的比喻來說明:「雲計算」是「互聯網中的神經系統的雛形,「物聯網」是「互聯網」正在出現的末梢神經系統的萌芽。
「物聯網就是物物相連的互聯網」。這有兩層意思:第一,物聯網的核心和基礎仍然是互聯網,是在互聯網基礎上的延伸和擴展的網路;第二,其用戶端延伸和擴展到了任何物品與物品之間,進行信息交換和通信。
物聯網的兩種業務模式:
1.MAI(M2M Application Integration), 內部MaaS;
2.MaaS(M2M As A Service), MMO, Multi-Tenants(多租戶模型)。
隨著物聯網業務量的增加,對數據存儲和計算量的需求將帶來對「雲計算」能力的要求:
1.雲計算:從計算中心到數據中心在物聯網的初級階段,PoP即可滿足需求;
2.在物聯網高級階段,可能出現MVNO/MMO營運商(國外已存在多年),需要虛擬化雲計算技術,SOA等技術的結合實現互聯網的泛在服務:TaaS (everyTHING As A Service)。 雲安全(Cloud Security)是一個從「雲計算」演變而來的新名詞。雲安全的策略構想是:使用者越多,每個使用者就越安全,因為如此龐大的用戶群,足以覆蓋互聯網的每個角落,只要某個網站被掛馬或某個新木馬病毒出現,就會立刻被截獲。
「雲安全」通過網狀的大量客戶端對網路中軟體行為的異常監測,獲取互聯網中木馬、惡意程序的最新信息,推送到Server端進行自動分析和處理,再把病毒和木馬的解決方案分發到每一個客戶端。 私有雲(Private Cloud)是將雲基礎設施與軟硬體資源創建在防火牆內,以供機構或企業內各部門共享數據中心內的資源。 創建私有雲,除了硬體資源外,一般還有雲設備(IaaS)軟體;現時商業軟體有VMware的 vSphere 和Platform Computing 的ISF, 開放源代碼的雲設備軟體主要有Eucalyptus和OpenStack。至2013年可以提供私有雲的平台有:Eucalyptus、3A Cloud、minicloud安全辦公私有雲、聯想網盤和OATOS企業網盤等。
雲創存儲推出minicloud安全辦公私有雲,用最少的成本為企業部署雲存儲以及企業辦公應用軟體,為企業打造安全的辦公環境。在滿足企業辦公需求的基礎上,大幅度降低了企業IT建設的門檻與風險,並同時全面保障企業數據安全。
私有雲計算同樣包含雲硬體、雲平台、雲服務三個層次。不同的是,雲硬體是用戶自己的個人電腦或伺服器,而非雲計算廠商的數據中心。雲計算廠商構建數據中心的目的是為千百萬用戶提供公共雲服務,因此需要擁有幾十上百萬台伺服器。私有雲計算,對個人來說只服務於親朋好友,對企業來說只服務於本企業員工以及本企業的客戶和供應商,因此個人或企業自己的個人電腦或伺服器已經足夠用來提供雲服務。 雲會議是基於雲計算技術的一種高效、便捷、低成本的會議形式。使用者只需要通過互聯網界面,進行簡單易用的操作,便可快速高效地與全球各地團隊及客戶同步分享語音、數據文件及視頻,而會議中數據的傳輸、處理等復雜技術由雲會議服務商幫助使用者進行操作。
目前國內雲會議主要集中在以SAAS(軟體即服務)模式為主體的服務內容,包括電話、網路、視頻等服務形式,基於雲計算的視頻會議就叫雲會議。雲會議是視頻會議與雲計算的完美結合,帶來了最便捷的遠程會議體驗。及時語移動雲電話會議,是雲計算技術與移動互聯網技術的完美融合,通過移動終端進行簡單的操作,提供隨時隨地高效地召集和管理會議。 雲社交(CloudSocial)是一種物聯網、雲計算和移動互聯網交互應用的虛擬社交應用模式,以建立著名的「資源分享關系圖譜」為目的,進而開展網路社交,雲社交的主要特徵,就是把大量的社會資源統一整合和評測,構成一個資源有效池向用戶按需提供服務。參與分享的用戶越多,能夠創造的利用價值就越大。
雲計算系統
『陸』 雲存儲技術的發展所面臨的瓶頸
存儲空間的安全性顧慮 目前,絕大部分企業或部門還不是很情願地把單位的重要數據保存到「雲」里去,究其原因還是對數據安全性的憂慮。而個人用戶同樣擔心的是其隱私數據的泄露。 可以說,安全問題是對雲存儲服務的最大挑戰。這一問題直接關繫到雲存儲市場的生死存亡。從客戶的角度分析,既然把重要數據交給第三方託管,自然希望SSP能夠確保數據的不被篡改、不丟失、不被非法訪問或任意竊取。而且上傳和下載的速度不能太慢,最好能夠提供實時高帶寬的傳輸服務,這就給SSP們出了一道市場考題。 網路帶寬的瓶頸 當我們保存備份重要數據的時候,當然都不希望太慢,也就是上傳下載的速度要快,而且伺服器要能及時接納大量的數據流。這就對網速的分配、網路設備的性能和SSP的管理機制帶來了極大挑戰。畢竟作為雲存儲的客戶,誰願意為了備份一段錄像而等待幾十分鍾的時間呢? 國內網路帶寬的現狀極大限制了用戶對雲存儲的熱情,對於國內的網速和價格,大家更是感同身受。 創作平台的限制 各大SSP雲存儲服務供應商都試圖打造自己的垂直整合技術,但我們也注意到:隨之而來的內容存儲也就很難、甚至無法突破創作平台的限制。因此,各自為戰的科技公司必然會帶來一種斷裂和碎片化的生態系統。 盈利魔咒 導致雲存儲行業競爭混亂的最根本因素是盈利模式的迷茫。雲存儲是一個很大的市場,也是很有潛力的市場,可以說,誰贏得雲存儲,誰就贏得未來。為了吸引更多的用戶,雲存儲服務商必須提供更多的免費存儲空間。但隨著存儲空間的增大,付費升級的用戶就會減少。一些無其他收入來源的小型服務商勢必將無法承擔如此大的投入,它們不得不尋找其他的營收來源。SSP作為企業,它的最終目標就是盈利賺錢,而客戶則希望獲得更多、更好、低廉、甚至免費的服務。目前,企業只有採用增加廣告,降低用戶負擔的方式了,至於其他的增值服務,目前也是處於開拓階段,暫時還找不出更好的出路。 雲存儲技術的不確定性對市場的影響 海嘯、地震等自然災害或戰爭等人為因素會給雲存儲的發展帶來眾多不確定的因素,而在國內雖然不必過多擔心戰爭等人為因素,但各方面的審核和對一些敏感內容的屏蔽等因素,也增加了雲存儲的時間成本和不確定性。