存儲技術的發展
⑴ 信息存儲技術的背景 應用 發展以及趨勢
信息存儲技術作為信息技術的核心之一,一直伴隨著、同時推動著IT業各方面技術的協同發展,是當今IT領域中少數發展最為迅速的熱點之一。紙的發明記載了人類的歷史和文明,現代信息存儲技術則大大超越了紙張記錄的含義。21世紀是數字化和多媒體化的信息時代,現代信息社會和經濟的發展,所產生的信息量每年以指數方式上升,出現了信息爆炸的態勢。據UC Berkley 2001年公布的數據顯示,未來3年內所產生的數據將超過過去4萬年中產生數據的總和,而且93%的新生成的信息為數字形式。當上世紀50年代計算機技術初現時,存儲容量還只是以千位位元組計…http://www.cnki.com.cn/Article/CJFD2006-CXJL200605012.htm
⑵ 信息儲存技術的發展過程
,信息儲存技術的發展過程:
1,原始社會,人們用結繩記事,或者把各種信息雕刻在石頭等物體上面
2,在奴隸社會,人們在石頭、陶器、木板、竹片等物體上面雕刻信息,這一時期有了最原始的文字,人們可以在皮革和織物、木板、竹片等上面書寫信息。
3,再後來,發明了紙張,人們用紙張來儲存信息。
4,到了近代,人們發明了照相機,於是可以用膠片來存儲信息。同一時期,人們發現了電磁感應現象,開始利用物體電磁感應的規律製造出象磁帶、唱片等來存儲信息。並且在後來進一步發展了這一技術。象現在的大容量硬碟、快閃記憶體晶元、優盤等都是基於這一原理。
5,在20世紀70年代,人們發現了使用激光來存儲信息的方式,這就是我們今天常見到的各種光碟了。
信息儲存技術:是將經過加工整理序化後的信息按照一定的格式和順序存儲在特定的載體中的一種信息活動。其目的是為了便於信息管理者和信息用戶快速地、准確地識別、定位和檢索信息。
⑶ 信息存儲技術的發展過程
人類記錄信息、存儲信息方法經歷了以下幾大技術:
1,結繩記事;
2,文字紙張;
3,磁記錄方式(磁鼓,磁帶,磁碟等) 當前比較成熟,
4,半導體電記錄(電路,電量或電容):ROM,RAM等;隨著半導體技術的提升而不斷提升、改進
5,光記錄(光碟,光運算器件) 光計算和光存儲也許會在不久的將來大力發展
⑷ 存儲器的發展史
存儲器設備發展
1.存儲器設備發展之汞延遲線
汞延遲線是基於汞在室溫時是液體,同時又是導體,每比特數據用機械波的波峰(1)和波谷(0)表示。機械波從汞柱的一端開始,一定厚度的熔融態金屬汞通過一振動膜片沿著縱向從一端傳到另一端,這樣就得名「汞延遲線」。在管的另一端,一感測器得到每一比特的信息,並反饋到起點。設想是汞獲取並延遲這些數據,這樣它們便能存儲了。這個過程是機械和電子的奇妙結合。缺點是由於環境條件的限制,這種存儲器方式會受各種環境因素影響而不精確。
1950年,世界上第一台具有存儲程序功能的計算機EDVAC由馮.諾依曼博士領導設計。它的主要特點是採用二進制,使用汞延遲線作存儲器,指令和程序可存入計算機中。
1951年3月,由ENIAC的主要設計者莫克利和埃克特設計的第一台通用自動計算機UNIVAC-I交付使用。它不僅能作科學計算,而且能作數據處理。
2.存儲器設備發展之磁帶
UNIVAC-I第一次採用磁帶機作外存儲器,首先用奇偶校驗方法和雙重運算線路來提高系統的可靠性,並最先進行了自動編程的試驗。
磁帶是所有存儲器設備發展中單位存儲信息成本最低、容量最大、標准化程度最高的常用存儲介質之一。它互換性好、易於保存,近年來,由於採用了具有高糾錯能力的編碼技術和即寫即讀的通道技術,大大提高了磁帶存儲的可靠性和讀寫速度。根據讀寫磁帶的工作原理可分為螺旋掃描技術、線性記錄(數據流)技術、DLT技術以及比較先進的LTO技術。
根據讀寫磁帶的工作原理,磁帶機可以分為六種規格。其中兩種採用螺旋掃描讀寫方式的是面向工作組級的DAT(4mm)磁帶機和面向部門級的8mm磁帶機,另外四種則是選用數據流存儲技術設計的設備,它們分別是採用單磁頭讀寫方式、磁帶寬度為1/4英寸、面向低端應用的Travan和DC系列,以及採用多磁頭讀寫方式、磁帶寬度均為1/2英寸、面向高端應用的DLT和IBM的3480/3490/3590系列等。
磁帶庫是基於磁帶的備份系統,它能夠提供同樣的基本自動備份和數據恢復功能,但同時具有更先進的技術特點。它的存儲容量可達到數百PB,可以實現連續備份、自動搜索磁帶,也可以在驅動管理軟體控制下實現智能恢復、實時監控和統計,整個數據存儲備份過程完全擺脫了人工干涉。
磁帶庫不僅數據存儲量大得多,而且在備份效率和人工佔用方面擁有無可比擬的優勢。在網路系統中,磁帶庫通過SAN(Storage Area Network,存儲區域網路)系統可形成網路存儲系統,為企業存儲提供有力保障,很容易完成遠程數據訪問、數據存儲備份或通過磁帶鏡像技術實現多磁帶庫備份,無疑是數據倉庫、ERP等大型網路應用的良好存儲設備。
3.存儲器設備發展之磁鼓
1953年,隨著存儲器設備發展,第一台磁鼓應用於IBM 701,它是作為內存儲器使用的。磁鼓是利用鋁鼓筒表面塗覆的磁性材料來存儲數據的。鼓筒旋轉速度很高,因此存取速度快。它採用飽和磁記錄,從固定式磁頭發展到浮動式磁頭,從採用磁膠發展到採用電鍍的連續磁介質。這些都為後來的磁碟存儲器打下了基礎。
磁鼓最大的缺點是利用率不高, 一個大圓柱體只有表面一層用於存儲,而磁碟的兩面都利用來存儲,顯然利用率要高得多。 因此,當磁碟出現後,磁鼓就被淘汰了。
4.存儲器設備發展之磁芯
美國物理學家王安1950年提出了利用磁性材料製造存儲器的思想。福雷斯特則將這一思想變成了現實。
為了實現磁芯存儲,福雷斯特需要一種物質,這種物質應該有一個非常明確的磁化閾值。他找到在新澤西生產電視機用鐵氧體變換器的一家公司的德國老陶瓷專家,利用熔化鐵礦和氧化物獲取了特定的磁性質。
對磁化有明確閾值是設計的關鍵。這種電線的網格和芯子織在電線網上,被人稱為芯子存儲,它的有關專利對發展計算機非常關鍵。這個方案可靠並且穩定。磁化相對來說是永久的,所以在系統的電源關閉後,存儲的數據仍然保留著。既然磁場能以電子的速度來閱讀,這使互動式計算有了可能。更進一步,因為是電線網格,存儲陣列的任何部分都能訪問,也就是說,不同的數據可以存儲在電線網的不同位置,並且閱讀所在位置的一束比特就能立即存取。這稱為隨機存取存儲器(RAM),在存儲器設備發展歷程中它是互動式計算的革新概念。福雷斯特把這些專利轉讓給麻省理工學院,學院每年靠這些專利收到1500萬~2000萬美元。
最先獲得這些專利許可證的是IBM,IBM最終獲得了在北美防衛軍事基地安裝「旋風」的商業合同。更重要的是,自20世紀50年代以來,所有大型和中型計算機也採用了這一系統。磁芯存儲從20世紀50年代、60年代,直至70年代初,一直是計算機主存的標准方式。
5.存儲器設備發展之磁碟
世界第一台硬碟存儲器是由IBM公司在1956年發明的,其型號為IBM 350 RAMAC(Random Access Method of Accounting and Control)。這套系統的總容量只有5MB,共使用了50個直徑為24英寸的磁碟。1968年,IBM公司提出「溫徹斯特/Winchester」技術,其要點是將高速旋轉的磁碟、磁頭及其尋道機構等全部密封在一個無塵的封閉體中,形成一個頭盤組合件(HDA),與外界環境隔絕,避免了灰塵的污染,並採用小型化輕浮力的磁頭浮動塊,碟片表面塗潤滑劑,實行接觸起停,這是現代絕大多數硬碟的原型。1979年,IBM發明了薄膜磁頭,進一步減輕了磁頭重量,使更快的存取速度、更高的存儲密度成為可能。20世紀80年代末期,IBM公司又對存儲器設備發展作出一項重大貢獻,發明了MR(Magneto Resistive)磁阻磁頭,這種磁頭在讀取數據時對信號變化相當敏感,使得碟片的存儲密度比以往提高了數十倍。1991年,IBM生產的3.5英寸硬碟使用了MR磁頭,使硬碟的容量首次達到了1GB,從此,硬碟容量開始進入了GB數量級。IBM還發明了PRML(Partial Response Maximum Likelihood)的信號讀取技術,使信號檢測的靈敏度大幅度提高,從而可以大幅度提高記錄密度。
目前,硬碟的面密度已經達到每平方英寸100Gb以上,是容量、性價比最大的一種存儲設備。因而,在計算機的外存儲設備中,還沒有一種其他的存儲設備能夠在最近幾年中對其統治地位產生挑戰。硬碟不僅用於各種計算機和伺服器中,在磁碟陣列和各種網路存儲系統中,它也是基本的存儲單元。值得注意的是,近年來微硬碟的出現和快速發展為移動存儲提供了一種較為理想的存儲介質。在快閃記憶體晶元難以承擔的大容量移動存儲領域,微硬碟可大顯身手。目前尺寸為1英寸的硬碟,存儲容量已達4GB,10GB容量的1英寸硬碟不久也會面世。微硬碟廣泛應用於數碼相機、MP3設備和各種手持電子類設備。
另一種磁碟存儲設備是軟盤,從早期的8英寸軟盤、5.25英寸軟盤到3.5英寸軟盤,主要為數據交換和小容量備份之用。其中,3.5英寸1.44MB軟盤占據計算機的標准配置地位近20年之久,之後出現過24MB、100MB、200MB的高密度過渡性軟盤和軟碟機產品。然而,由於USB介面的快閃記憶體出現,軟盤作為數據交換和小容量備份的統治地位已經動搖,不久會退出存儲器設備發展歷史舞台。
6. 存儲器設備發展之光碟
光碟主要分為只讀型光碟和讀寫型光碟。只讀型指光碟上的內容是固定的,不能寫入、修改,只能讀取其中的內容。讀寫型則允許人們對光碟內容進行修改,可以抹去原來的內容,寫入新的內容。用於微型計算機的光碟主要有CD-ROM、CD-R/W和DVD-ROM等幾種。
上世紀60年代,荷蘭飛利浦公司的研究人員開始使用激光光束進行記錄和重放信息的研究。1972年,他們的研究獲得了成功,1978年投放市場。最初的產品就是大家所熟知的激光視盤(LD,Laser Vision Disc)系統。
從LD的誕生至計算機用的CD-ROM,經歷了三個階段,即LD-激光視盤、CD-DA激光唱盤、CD-ROM。下面簡單介紹這三個存儲器設備發展階段性的產品特點。
LD-激光視盤,就是通常所說的LCD,直徑較大,為12英寸,兩面都可以記錄信息,但是它記錄的信號是模擬信號。模擬信號的處理機制是指,模擬的電視圖像信號和模擬的聲音信號都要經過FM(Frequency Molation)頻率調制、線性疊加,然後進行限幅放大。限幅後的信號以0.5微米寬的凹坑長短來表示。
CD-DA激光唱盤 LD雖然取得了成功,但由於事先沒有制定統一的標准,使它的開發和製作一開始就陷入昂貴的資金投入中。1982年,由飛利浦公司和索尼公司制定了CD-DA激光唱盤的紅皮書(Red Book)標准。由此,一種新型的激光唱盤誕生了。CD-DA激光唱盤記錄音響的方法與LD系統不同,CD-DA激光唱盤系統首先把模擬的音響信號進行PCM(脈沖編碼調制)數字化處理,再經過EMF(8~14位調制)編碼之後記錄到盤上。數字記錄代替模擬記錄的好處是,對干擾和雜訊不敏感,由於盤本身的缺陷、劃傷或沾污而引起的錯誤可以校正。
CD-DA系統取得成功以後,使飛利浦公司和索尼公司很自然地想到利用CD-DA作為計算機的大容量只讀存儲器。但要把CD-DA作為計算機的存儲器,還必須解決兩個重要問題,即建立適合於計算機讀寫的盤的數據結構,以及CD-DA誤碼率必須從現有的10-9降低到10-12以下,由此就產生了CD-ROM的黃皮書(Yellow Book)標准。這個標準的核心思想是,盤上的數據以數據塊的形式來組織,每塊都要有地址,這樣一來,盤上的數據就能從幾百兆位元組的存儲空間上被迅速找到。為了降低誤碼率,採用增加一種錯誤檢測和錯誤校正的方案。錯誤檢測採用了循環冗餘檢測碼,即所謂CRC,錯誤校正採用里德-索洛蒙(Reed Solomon)碼。黃皮書確立了CD-ROM的物理結構,而為了使其能在計算機上完全兼容,後來又制定了CD-ROM的文件系統標准,即ISO 9660。
在上世紀80年代中期,光碟存儲器設備發展速度非常快,先後推出了WORM光碟、磁光碟(MO)、相變光碟(Phase Change Disk,PCD)等新品種。20世紀90年代,DVD-ROM、CD-R、CD-R/W等開始出現和普及,目前已成為計算機的標准存儲設備。
光碟技術進一步向高密度發展,藍光光碟是不久將推出的下一代高密度光碟。多層多階光碟和全息存儲光碟正在實驗室研究之中,可望在5年之內推向市場。
7.存儲器設備發展之納米存儲
納米是一種長度單位,符號為nm。1納米=1毫微米,約為10個原子的長度。假設一根頭發的直徑為0.05毫米,把它徑向平均剖成5萬根,每根的厚度即約為1納米。與納米存儲有關的主要進展有如下內容。
1998年,美國明尼蘇達大學和普林斯頓大學制備成功量子磁碟,這種磁碟是由磁性納米棒組成的納米陣列體系。一個量子磁碟相當於我們現在的10萬~100萬個磁碟,而能源消耗卻降低了1萬倍。
1988年,法國人首先發現了巨磁電阻效應,到1997年,採用巨磁電阻原理的納米結構器件已在美國問世,它在磁存儲、磁記憶和計算機讀寫磁頭等方面均有廣闊的應用前景。
2002年9月,美國威斯康星州大學的科研小組宣布,他們在室溫條件下通過操縱單個原子,研製出原子級的硅記憶材料,其存儲信息的密度是目前光碟的100萬倍。這是納米存儲材料技術研究的一大進展。該小組發表在《納米技術》雜志上的研究報告稱,新的記憶材料構建在硅材料表面上。研究人員首先使金元素在硅材料表面升華,形成精確的原子軌道;然後再使硅元素升華,使其按上述原子軌道進行排列;最後,藉助於掃瞄隧道顯微鏡的探針,從這些排列整齊的硅原子中間隔抽出硅原子,被抽空的部分代表「0」,餘下的硅原子則代表「1」,這就形成了相當於計算機晶體管功能的原子級記憶材料。整個試驗研究在室溫條件下進行。研究小組負責人赫姆薩爾教授說,在室溫條件下,一次操縱一批原子進行排列並不容易。更為重要的是,記憶材料中硅原子排列線內的間隔是一個原子大小。這保證了記憶材料的原子級水平。赫姆薩爾教授說,新的硅記憶材料與目前硅存儲材料存儲功能相同,而不同之處在於,前者為原子級體積,利用其製造的計算機存儲材料體積更小、密度更大。這可使未來計算機微型化,且存儲信息的功能更為強大。
以上就是本文向大家介紹的存儲器設備發展歷程的7個關鍵時期
⑸ 雲存儲技術的發展現狀
市場發展迅猛 「雲存儲」作為一個備受熱捧的新興市場,在短短的幾年時間里便在國內遍地開花。在我們身邊能夠看得到,用得著的「雲」就有儲115、金山網盤、騰訊中轉、迅雷網盤,網路網盤,還有眾多品牌的智能手機或網路電視機上的雲存儲。這是一塊誘人的大蛋糕,而且前景廣闊,眾多商家都想從中分到一杯羹。 除了國內雲存儲業務迅猛發展的態勢,更令人意想不到的是國內用戶的熱情。2012—2016年中國網路存儲市場研究及未來發展趨勢報告顯示:到去年第一季度為止,國內某大型SSP的注冊用戶已突破三百萬,其他幾大SSP的注冊用戶數也不相上下。但是這些數字與現今近5億的國內網民相比仍存在著巨大的發展空間。要知道,美國Dropbox頭三年的客戶數還不足百萬,但現在已遠超五百萬了。 國內雲存儲產業面臨的挑戰 國內雲產業尚處於起步階段,市場的發展還不夠成熟,面臨的挑戰還很多。國外影響力較大的SSP雖然只有少數幾家,但客戶和業務都比較穩定,商家可以定下心來穩定地開展各類長期業務。而國內的雲存儲市場剛剛起步,客戶和SSP之間尚未進入穩定和互信的發展階段,市場還不夠成熟,客戶和SSP的業務都還存在著諸多不穩定的狀況。
⑹ 信息儲存技術的發展歷史是什麼
計算機晶元儲存發展史進入1984年後,IBMPC/AT(AdvancedTechnology,先進技術)規格中關於硬碟子系統的部分得到了全面更新。程序控制代碼開始被內建於主板搭載的BIOS中,從而不再依靠介面控制卡上所帶的ROM晶元了。系統開始支持新增加的高位IRQ中斷號,廢除了對DMA通道的佔用,並更改了硬碟介面所使用的I/O地址。AT規格中關於硬碟介面規定如下:使用IRQ14。使用I/O介面地址1F0-1F8。不再佔用DMA通道。使用主板BIOS中內建的程序代碼對硬碟介面進行控制。使用DOS2.0版本以上的操作系統。AT兼容機上的硬體設置信息都被保存在一塊CMOS晶元上,所記錄的內容受一塊小型電池的供電來維持。因此即便機箱的電源被切斷,所有設置仍舊會被保存下來。這一技術使PC機的用戶不必再受一大堆跳線和撥動開關的困擾(在早期的電腦上,每件設備所佔用的系統資源都是由用戶手動更改跳線或撥動開關來進行分配的),且CMOS中所記錄的內容可以運行一個簡單的程序方便地進行更改,此舉可算是提高電腦易用性方面的一大進步。原始的AT規格界定了從10MB到112MB共計14種容量的硬碟,在使用那些不合規格的硬碟時,仍需要在介面卡上搭載ROM晶元或是在系統啟動時載入專用的設備驅動程序。在DOS4.0之前的操作系統不支持32MB以上的分區,哪怕是使用容量在100MB以上的硬碟時,也要把它切割成小區方能使用,這是因為「系統中的扇區總數不能超過16位(65,536)」這一傳統限制。想使用大於32MB的分區,就必須使用特殊的分區工具,例如Ontrack』sDiskManager(即便是在今天,新版本DiskManager仍舊受到用戶們的歡迎,它可是解決老主板不支持大容量硬碟的制勝法寶啊),當時有許多硬碟廠家都將DiskManager與自家的產品捆綁銷售。但不幸的是,DiskManager與其他許多磁碟工具都發生了兼容性問題,因為在大多數工具軟體下,用DiskManager所分的區都會被識別成了非DOS(Non-DOS)分區。因此,許多用戶被迫選擇了分割多個32MB以下小分區的辦法來使用大容量硬碟,但這種辦法也有局限性,因為DOS3.3之前的版本根本就不支持擴展分區這一概念……今天的用戶當然不必理會這些限制,因為AT兼容機所支持的硬碟種類已增加為40多種,並且大多數BIOS都會提供一個可由用戶自由設定各種硬碟參數的選項。您只要打開WINDOWS操作系統中的硬碟屬性,就能看到「GENERICIDEDISKTYPE46/47」等字樣(具體顯示46還是47與系統設置有關,在BIOS里把硬碟類型設為USER時顯示為TYPE46,而設為AUTO時系統屬性里則顯示TYPE47),這就是您的硬碟所屬的「固有的硬碟類型」。當然,在WINDOWS環境下,用戶根本用不著在意硬碟到底被設成了什麼類型,因為隨著操作系統本身的發展進步,WINDOWS本身不需要讀取這一參數就能正確地讀寫硬碟了。不過,原始的AT規格中的部分條文在今天依舊是PC機的桎梏,例如一台PC機最多隻能連接2個硬碟、BIOS/操作系統只能識別1024柱面、16磁頭和63扇區/磁軌的限制等等(當然,這些限制現在都已被克服了)。人們已經採用了多種不同的辦法來將那些「不合規格的」物理參數與系統所能支持的邏輯參數之間進行互相轉換。
⑺ 大數據爆發性增長 存儲技術面臨難題
大數據爆發性增長 存儲技術面臨難題
隨著大數據應用的爆發性增長,大數據已經衍生出了自己獨特的架構,而且也直接推動了存儲、網路以及計算技術的發展。畢竟處理大數據這種特殊的需求是一個新的挑戰。硬體的發展最終還是由軟體需求推動的。大數據本身意味著非常多需要使用標准存儲技術來處理的數據。大數據可能由TB級(或者甚至PB級)信息組成,既包括結構化數據(資料庫、日誌、SQL等)以及非結構化數據(社交媒體帖子、感測器、多媒體數據)。此外,大部分這些數據缺乏索引或者其他組織結構,可能由很多不同文件類型組成。從目前技術發展的情況來看,大數據存儲技術的發展正面臨著以下幾個難題:
1、容量問題
這里所說的「大容量」通常可達到PB級的數據規模,因此,海量數據存儲系統也一定要有相應等級的擴展能力。與此同時,存儲系統的擴展一定要簡便,可以通過增加模塊或磁碟櫃來增加容量,甚至不需要停機。
「大數據」應用除了數據規模巨大之外,還意味著擁有龐大的文件數量。因此如何管理文件系統層累積的元數據是一個難題,處理不當的話會影響到系統的擴展能力和性能,而傳統的NAS系統就存在這一瓶頸。所幸的是,基於對象的存儲架構就不存在這個問題,它可以在一個系統中管理十億級別的文件數量,而且還不會像傳統存儲一樣遭遇元數據管理的困擾。基於對象的存儲系統還具有廣域擴展能力,可以在多個不同的地點部署並組成一個跨區域的大型存儲基礎架構。
2、延遲問題
「大數據」應用還存在實時性的問題。有很多「大數據」應用環境需要較高的IOPS性能,比如HPC高性能計算。此外,伺服器虛擬化的普及也導致了對高IOPS的需求,正如它改變了傳統IT環境一樣。為了迎接這些挑戰,各種模式的固態存儲設備應運而生,小到簡單的在伺服器內部做高速緩存,大到全固態介質的可擴展存儲系統等等都在蓬勃發展。
3、並發訪問
一旦企業認識到大數據分析應用的潛在價值,他們就會將更多的數據集納入系統進行比較,同時讓更多的人分享並使用這些數據。為了創造更多的商業價值,企業往往會綜合分析那些來自不同平台下的多種數據對象。包括全局文件系統在內的存儲基礎設施就能夠幫助用戶解決數據訪問的問題,全局文件系統允許多個主機上的多個用戶並發訪問文件數據,而這些數據則可能存儲在多個地點的多種不同類型的存儲設備上。
4、安全問題
某些特殊行業的應用,比如金融數據、醫療信息以及政府情報等都有自己的安全標准和保密性需求。雖然對於IT管理者來說這些並沒有什麼不同,而且都是必須遵從的,但是,大數據分析往往需要多類數據相互參考,而在過去並不會有這種數據混合訪問的情況,因此大數據應用也催生出一些新的、需要考慮的安全性問題。
5、成本問題
成本問題「大」,也可能意味著代價不菲。而對於那些正在使用大數據環境的企業來說,成本控制是關鍵的問題。想控製成本,就意味著我們要讓每一台設備都實現更高的「效率」,同時還要減少那些昂貴的部件。
對成本控制影響最大的因素是那些商業化的硬體設備。因此,很多初次進入這一領域的用戶以及那些應用規模最大的用戶都會定製他們自己的「硬體平台」而不是用現成的商業產品,這一舉措可以用來平衡他們在業務擴展過程中的成本控制戰略。為了適應這一需求,現在越來越多的存儲產品都提供純軟體的形式,可以直接安裝在用戶已有的、通用的或者現成的硬體設備上。此外,很多存儲軟體公司還在銷售以軟體產品為核心的軟硬一體化裝置,或者與硬體廠商結盟,推出合作型產品。
6、數據的積累
許多大數據應用都會涉及到法規遵從問題,這些法規通常要求數據要保存幾年或者幾十年。比如醫療信息通常是為了保證患者的生命安全,而財務信息通常要保存7年。而有些使用大數據存儲的用戶卻希望數據能夠保存更長的時間,因為任何數據都是歷史記錄的一部分,而且數據的分析大都是基於時間段進行的。要實現長期的數據保存,就要求存儲廠商開發出能夠持續進行數據一致性檢測的功能以及其他保證長期高可用的特性。同時還要實現數據直接在原位更新的功能需求。
7、數據的靈活性
大數據存儲系統的基礎設施規模通常都很大,因此必須經過仔細設計,才能保證存儲系統的靈活性,使其能夠隨著應用分析軟體一起擴容及擴展。在大數據存儲環境中,已經沒有必要再做數據遷移了,因為數據會同時保存在多個部署站點。一個大型的數據存儲基礎設施一旦開始投入使用,就很難再調整了,因此它必須能夠適應各種不同的應用類型和數據場景。
存儲介質正在改變,雲計算倍受青睞
存儲之於安防的地位,其已經不僅是一個設備而已,而是已經升華到了一個解決方案平台的地步。作為圖像數據和報警事件記錄的載體,存儲的重要性是不言而喻的。
安防監控應用對存儲的需求是什麼?首先,海量存儲的需求。其次,性能的要求。第三,價格的敏感度。第四,集中管理的要求。第五,網路化要求。安防監控技術發展到今天經歷了三個階段,即:模擬化、數字化、網路化。與之相適應,監控數據存儲也經歷了多個階段,即:VCR模擬數據存儲、DVR數字數據存儲,到現在的集中網路存儲,以及發展到雲存儲階段,正是在一步步迎合這種市場需求。在未來,安防監控隨著高清化,網路化,智能化的不斷發展,將對現有存儲方案帶來不斷挑戰,包括容量、帶寬的擴展問題和管理問題。那麼,基於大數據戰略的海量存儲系統--雲存儲就倍受青睞了。
基於大數據戰略的安防存儲優勢明顯
當前社會對於數據的依賴是前所未有的,數據已變成與硬資產和人同等重要的重要資料。如何存好、保護好、使用好這些海量的大數據,是安防行業面臨的重要問題之一。那麼基於大數據戰略的安防存儲其優勢何在?
目前的存儲市場上,原有的視頻監控方案容量、帶寬難以擴展。客戶往往需要采購更多更高端的設備來擴充容量,提高性能,隨之帶來的是成本的急劇增長以及系統復雜性的激增。同時,傳統的存儲模式很難在完全沒有業務停頓的情況下進行升級,擴容會對業務帶來巨大影響。其次,傳統的視頻監控方案難於管理。由於視頻監控系統一般規模較大,分布特徵明顯,大多獨立管理,這樣就把整個系統分割成了多個管理孤島,相互之間通信困難,難以協調工作,以提高整體性能。除此之外,綠色、安全等也是傳統視頻監控方案所面臨的突出問題。
基於大數據戰略的雲存儲技術與生俱來的高擴展、易管理、高安全等特性為傳統存儲面臨的問題帶來了解決的契機。利用雲存儲,用戶可以方便的進行容量、帶寬擴展,而不必停止業務,或改變系統架構。同時,雲存儲還具有高安全、低成本、綠色節能等特點。基於雲存儲的視頻監控解決方案是客戶應對挑戰很好的選擇。王宇說,進入二十一世紀,雲存儲作為一種新的存儲架構,已逐步走入應用階段,雲存儲不僅輕松突破了SAN的性能瓶頸,而且可以實現性能與容量的線性擴展,這對於擁有大量數據的安防監控用戶來說是一個新選擇。
以英特爾推出的Hadoop分布式文件系統(HDFS)為例,其提供了一個高度容錯性和高吞吐量的海量數據存儲解決方案。目前已經在各種大型在線服務和大型存儲系統中得到廣泛應用,已經成為海量數據存儲的事實標准。
隨著信息系統的快速發展,海量的信息需要可靠存儲的同時,還能被大量的使用者快速地訪問。傳統的存儲方案已經從構架上越來越難以適應近幾年來的信息系統業務的飛速發展,成為了業務發展的瓶頸和障礙。HDFS通過一個高效的分布式演算法,將數據的訪問和存儲分布在大量伺服器之中,在可靠地多備份存儲的同時還能將訪問分布在集群中的各個伺服器之上,是傳統存儲構架的一個顛覆性的發展。最重要的是,其可以滿足以下特性:可自我修復的分布式文件存儲系統,高可擴展性,無需停機動態擴容,高可靠性,數據自動檢測和復制,高吞吐量訪問,消除訪問瓶頸,使用低成本存儲和伺服器構建。
以上是小編為大家分享的關於大數據爆發性增長 存儲技術面臨難題的相關內容,更多信息可以關注環球青藤分享更多干貨
⑻ 簡要介紹下計算機存儲器的發展
計算機怎麼是這樣一個驚人的小配件? 對許多人他們可以 t是,因此驚奇關於怎樣計算機改變了我們居住的方式。 計算機在許多大小和形狀可能現在被發現。 幾乎每家電似乎有他們被找出的自己的微型計算機某處。 從汽車到大廈對幾乎每個小配件有,每一個大多時間有計算機工作做他們跑和改變我們居住生活的方式。
首要,計算機的最重要的組分是它的處理器。 它被認為做所有計算和處理計算機的心臟。 但與所有處理的那計算和,計算機贏取了 t是這樣一個卓越的小配件如果不為它驚人的記憶。 計算機存儲器使成為可能保留重要信息關於計算機。 可以再次使用這樣數據和被檢索當有些存儲的數據是需要的時。 不用計算機存儲器,處理器在哪裡不會有設施存放它的,從而使他們的重要演算和過程無用。
有分配的計算機存儲器的不同的類型存放數據的不同的類型。 當它來到存放必要的數據在計算機裡面時,他們也有不同的能力和專業。 最響譽的計算機存儲器是RAM,否則通認作為隨機存取存儲器。 它稱隨機存取,因為所有存儲的數據可以直接地訪問,如果您知道相交某一存儲單元的確切的列和專欄。 在計算機存儲器的這個類型,數據可以按任何順序訪問。 RAM s確切在對面稱SAM或串列存取記憶,存放數據參加一系列存儲單元可能按順序只訪問。 它經營很象盒式磁帶,您必須審閱其他存儲單元在訪問您尋找的數據之前。
計算機存儲器的其他類型包括ROM或只讀存儲器。 ROM是集成電路已經編程以不可能修改或改變的具體數據,因此僅命名讀的。 也有計算機存儲器叫的虛擬內存的另一個類型。 記憶的這個類型是一個共同的組分在多數操作系統和桌面。 它幫助計算機RAM釋放以未使用的應用做方式為裝載使用的當前應用。 它在計算機 s硬碟簡單地運作在檢查在RAM存放的數據旁邊最近不使用並且安排它被存放,從而釋放可貴的空間在RAM為裝載其他應用。 一個虛擬內存將做一台計算機認為它有幾乎無限的RAM在它裡面。
的計算機存儲器的另一個類型使計算機處理任務更加快速是什麼稱高速緩沖存儲器。 高速緩沖存儲器簡單地運作在有旁邊當前應用、在它的記憶存放的演算和過程而不是直接地到主要儲藏區域。 當某一過程是需要早先半新的數據,它首先將設法訪問高速緩沖存儲器,如果這樣數據在訪問中央記憶貯存區之前被存放那裡。 這從尋找數據在一個更大和更大的記憶貯存區釋放計算機並且使數據提取更加快速。 計算機存儲器在發展一個恆定的狀態,當技術越來越被開發。 誰知道,計算機存儲器也許為人的消耗量也在不久將來可能適合。
⑼ 雲存儲的發展趨勢
雲存儲已經成為未來存儲發展的一種趨勢。但隨著雲存儲技術的發展,各類搜索、應用技術和雲存儲相結合的應用,還需從安全性、便攜性及數據訪問等角度進行改進。(1)安全性從雲計算誕生,安全性一直是企業實施雲計算首要考慮的問題之一。同樣在雲存儲方面,安全仍是首要考慮的問題,對於想要進行雲存儲的客戶來說,安全性通常是首要的商業考慮和技術考慮。但是許多用戶對雲存儲的安全要求甚至高於它們自己的架構所能提供的安全水平。即便如此,面對如此高的不現實的安全要求,許多大型、可信賴的雲存儲廠商也在努力滿足它們的要求,構建比多數企業數據中心安全得多的數據中心。用戶可以發現,雲存儲具有更少的安全漏洞和更高的安全環節,雲存儲所能提供的安全性水平要比用戶自己的數據中心所能提供的安全水平還要高。(2)便攜性一些用戶在託管存儲的時候還要考慮數據的便攜性。一般情況下這是有保證的,一些大型服務提供商所提供的解決方案承諾其數據便攜性可媲美最好的傳統本地存儲。有的雲存儲結合了強大的便攜功能,可以將整個數據集傳送到你所選擇的任何媒介,甚至是專門的存儲設備。(3)性能和可用性過去的一些託管存儲和遠程存儲總是存在著延遲時間過長的問題。同樣地,互聯網本身的特性就嚴重威脅服務的可用性。最新一代雲存儲有突破性的成就,體現在客戶端或本地設備高速緩存上,將經常使用的數據保持在本地,從而有效地緩解互聯網延遲問題。通過本地高速緩存,即使面臨最嚴重的網路中斷,這些設備也可以緩解延遲性問題。這些設備還可以讓經常使用的數據像本地存儲那樣快速反應。通過一個本地NAS網關,雲存儲甚至可以模仿終端NAS設備的可用性、性能和可視性,同時將數據予以遠程保護。隨著雲存儲技術的不斷發展,各廠商仍將繼續努力實現容量優化和WAN(廣域網)優化,從而盡量減少數據傳輸的延遲性。(4)數據訪問現有對雲存儲技術的疑慮還在於,如果執行大規模數據請求或數據恢復操作,那麼雲存儲是否可提供足夠的訪問性。在未來的技術條件下,此點大可不必擔心,現有的廠商可以將大量數據傳輸到任何類型的媒介,可將數據直接傳送給企業,且其速度之快相當於復制、粘貼操作。另外,雲存儲廠商還可以提供一套組件,在完全本地化的系統上模仿雲地址,讓本地NAS網關設備繼續正常運行而無需重新設置。未來,如果大型廠商構建了更多的地區性設施,那麼數據傳輸將更加迅捷。如此一來,即便是客戶本地數據發生了災難性的損失,雲存儲廠商也可以將數據重新快速傳輸給客戶數據中心。 雲計算和物聯網之間的關系可以用一個形象的比喻來說明:「雲計算」是「互聯網中的神經系統的雛形,「物聯網」是「互聯網」正在出現的末梢神經系統的萌芽。
「物聯網就是物物相連的互聯網」。這有兩層意思:第一,物聯網的核心和基礎仍然是互聯網,是在互聯網基礎上的延伸和擴展的網路;第二,其用戶端延伸和擴展到了任何物品與物品之間,進行信息交換和通信。
物聯網的兩種業務模式:
1.MAI(M2M Application Integration), 內部MaaS;
2.MaaS(M2M As A Service), MMO, Multi-Tenants(多租戶模型)。
隨著物聯網業務量的增加,對數據存儲和計算量的需求將帶來對「雲計算」能力的要求:
1.雲計算:從計算中心到數據中心在物聯網的初級階段,PoP即可滿足需求;
2.在物聯網高級階段,可能出現MVNO/MMO營運商(國外已存在多年),需要虛擬化雲計算技術,SOA等技術的結合實現互聯網的泛在服務:TaaS (everyTHING As A Service)。 雲安全(Cloud Security)是一個從「雲計算」演變而來的新名詞。雲安全的策略構想是:使用者越多,每個使用者就越安全,因為如此龐大的用戶群,足以覆蓋互聯網的每個角落,只要某個網站被掛馬或某個新木馬病毒出現,就會立刻被截獲。
「雲安全」通過網狀的大量客戶端對網路中軟體行為的異常監測,獲取互聯網中木馬、惡意程序的最新信息,推送到Server端進行自動分析和處理,再把病毒和木馬的解決方案分發到每一個客戶端。 私有雲(Private Cloud)是將雲基礎設施與軟硬體資源創建在防火牆內,以供機構或企業內各部門共享數據中心內的資源。 創建私有雲,除了硬體資源外,一般還有雲設備(IaaS)軟體;現時商業軟體有VMware的 vSphere 和Platform Computing 的ISF, 開放源代碼的雲設備軟體主要有Eucalyptus和OpenStack。至2013年可以提供私有雲的平台有:Eucalyptus、3A Cloud、minicloud安全辦公私有雲、聯想網盤和OATOS企業網盤等。
雲創存儲推出minicloud安全辦公私有雲,用最少的成本為企業部署雲存儲以及企業辦公應用軟體,為企業打造安全的辦公環境。在滿足企業辦公需求的基礎上,大幅度降低了企業IT建設的門檻與風險,並同時全面保障企業數據安全。
私有雲計算同樣包含雲硬體、雲平台、雲服務三個層次。不同的是,雲硬體是用戶自己的個人電腦或伺服器,而非雲計算廠商的數據中心。雲計算廠商構建數據中心的目的是為千百萬用戶提供公共雲服務,因此需要擁有幾十上百萬台伺服器。私有雲計算,對個人來說只服務於親朋好友,對企業來說只服務於本企業員工以及本企業的客戶和供應商,因此個人或企業自己的個人電腦或伺服器已經足夠用來提供雲服務。 雲會議是基於雲計算技術的一種高效、便捷、低成本的會議形式。使用者只需要通過互聯網界面,進行簡單易用的操作,便可快速高效地與全球各地團隊及客戶同步分享語音、數據文件及視頻,而會議中數據的傳輸、處理等復雜技術由雲會議服務商幫助使用者進行操作。
目前國內雲會議主要集中在以SAAS(軟體即服務)模式為主體的服務內容,包括電話、網路、視頻等服務形式,基於雲計算的視頻會議就叫雲會議。雲會議是視頻會議與雲計算的完美結合,帶來了最便捷的遠程會議體驗。及時語移動雲電話會議,是雲計算技術與移動互聯網技術的完美融合,通過移動終端進行簡單的操作,提供隨時隨地高效地召集和管理會議。 雲社交(CloudSocial)是一種物聯網、雲計算和移動互聯網交互應用的虛擬社交應用模式,以建立著名的「資源分享關系圖譜」為目的,進而開展網路社交,雲社交的主要特徵,就是把大量的社會資源統一整合和評測,構成一個資源有效池向用戶按需提供服務。參與分享的用戶越多,能夠創造的利用價值就越大。
雲計算系統
⑽ 存儲技術發展歷史
最早的外置存儲器可以追溯到19世紀末。為了解決人口普查的需要,霍列瑞斯首先把穿孔紙帶改造成穿孔卡片。
他把每個人所有的調查項目依次排列於一張卡片,然後根據調查結果在相應項目的位置上打孔。在以後的計算機系統里,用穿孔卡片輸入數據的方法一直沿用到20世紀70年代,數據處理也發展成為電腦的主要功能之一。
2、磁帶
UNIVAC-I第一次採用磁帶機作外存儲器,首先用奇偶校驗方法和雙重運算線路來提高系統的可靠性,並最先進行了自動編程的試驗。此時這個磁帶長達1200英寸、包含8個磁軌,每英寸可存儲128bits,每秒可記錄12800個字元,容量也達到史無前例的184KB。從 此之後,磁帶經歷了迅速發展,後來廣泛應用了錄音、影像領域。
3、軟盤(見過這玩意的一定是80後)
1967年 IBM公司推出世界上第一張「軟盤」,直徑32英寸。隨著技術的發展,軟盤的尺寸一直在減小,容量也在不斷提升,大小從8英寸,減到到5.25英寸軟盤,以及到後來的3.5英寸軟盤,容量卻從最早的81KB到後來的1.44MB。在80-90年代3.5英寸軟盤達到了巔峰。直到CD-ROM、USB存儲設備出現後,軟盤銷量才逐漸下滑。
4、CD
CD也就是我們常說的光碟、光碟,誕生於1982年,最早用於數字音頻存儲。1985年,飛利浦和索尼將其引入PC,當時稱之為CD-ROM(只 讀),後來又發展成CD-R(可讀)。因為聲頻CD的巨大成功,今天這種媒體的用途已經擴大到進行數據儲存,目的是數據存檔和傳遞。
5、磁碟
第一台磁碟驅動器是由IBM於1956年生產,可存儲5MB數據,總共使用了50個24英寸碟片。到1973年,IBM推出第一個現代「溫徹斯特」磁碟驅動器3340,使用了密封組件、潤滑主軸和小質量磁頭。此後磁碟的容量一度提升MB到GB再到TB。
6、DVD
數字多功能光碟,簡稱DVD,是一種光碟存儲器。起源於上世紀60年代,荷蘭飛利浦公司的研究人員開始使用激光光束進行記錄和重放信息的研究。1972年,他們的研究獲得了成功,1978年投放市場。最初的產品就是大家所熟知的激光視盤(LD,Laser Vision Disc)系統。它們的直徑多是120毫米左右。容量目前最大可到17.08GB。
7、快閃記憶體
淺談存儲器的進化歷程
快閃記憶體(Flash Memory)是一種長壽命的非易失性(在斷電情況下仍能保持所存儲的數據信+息)的存儲器。包含U盤、SD卡、CF卡、記憶棒等等種類。在1984年,東芝公司的發明人舛岡富士雄首先提出了快速快閃記憶體存儲器(此處簡稱快閃記憶體)的概念。與傳統電腦內存不同,快閃記憶體的特點是非易失性(也就是所存儲的數據在主機掉電後不會丟失),其記錄速度也非常快。Intel是世界上第一個生產快閃記憶體並將其投放市場的公司。到目前為止快閃記憶體形態多樣,存儲容量也不斷擴展到256GB甚至更高。
隨著存儲器的更新換代,存儲容量越來越大,讀寫速度也越來越快,企業級硬碟單盤容量已經達到10TB以上,目前使用的SSD固態硬碟,讀速度達:3000+MB/s,寫速度達:1700MB/s,用起來美滋滋啊。