2019數字中國分布式存儲高峰論壇
『壹』 華為突破分布式資料庫和存儲技術，打通數字化轉型「雄關漫道」
2019年，我們將進入數字化轉型的攻關期。所謂「攻關期」即數字化轉型2.0階段，需要攻堅企業關鍵業務上雲和數字化轉型改造的課題。在一份市場調查公司IDC的報告中指出：IDC自2014年提出數字化轉型以來，看到企業在數字化轉型層面已經投入了大量人力物力，但是效果並不理想，有一些企業已經成功屹立在潮頭，有一些企業在向上游進發，還有一些企業只能在浪潮的挾裹中被動前行。
對於企業來說，數字化轉型是「雄關漫道」。IDC認為，目前階段來看，企業亟待解決的是數字化能力提升，包括：與業務的深入結合能力；數據處理和挖掘能力；以及IT技術運營和管理能力。特別是數據處理和挖掘能力，因為數字化轉型推進企業從以流程為核心向以數據為核心轉型，對海量、異構、多類型的數據處理和挖掘能力是釋放數據價值的前提，對數據全生命周期的管控治理是釋放數據價值的保障。而隨著數字化轉型引入大量新技術而導致IT復雜度變高，企業IT技術運營和管理能力是提升企業「IT生產力」的關鍵。
攻關數字化轉型的「雄關漫道」，需要一個具備融合、智能、可傳承三大特性的數字平台。這是2019年3月華為與IDC聯合推出的《擁抱變化，智勝未來—數字平台破局企業數字化轉型》白皮書所提出的觀點。融合主要指把傳統技術和創新技術相結合；智能主要指平台智能化和智能化能力輸出；可傳承主要指解耦、功能復用、可配置等理念打造的架構。而承載這三大觀點的，就是新一代分布式企業級技術。
2019年5月15日，華為發布了業界首款支持ARM架構的新一代智能分布式資料庫GaussDB以及分布式存儲FusionStorage 8.0，作為新一代數據基礎設施，詮釋了具備融合、智能、可傳承三大特性的數字平台。華為常務董事、ICT戰略與Marketing總裁汪濤在發布會上表示，千行百業正在加速智能化進程，越來越多的企業已經意識到數據基礎設施是智能化成功的關鍵。華為圍繞計算、存儲和數據處理三個領域重定義數據基礎設施，加速邁向智能時代。
今天所討論雲和工業互聯網等概念的背後是一個新時代的到來，這就是體系架構大遷徙。傳統企業級技術是在單體應用和單機環境中，保證數據存儲、調用等操作的高可靠、高可用、高穩定，特別是滿足金融級事物處理的ACID（原子性、一致性、隔離性和耐久性）要求，為企業關鍵業務提供數據管理支撐。隨著企業技術向雲架構遷移，資料庫技術也面臨轉型。
2018年，基於雲計算技術的分布式資料庫成為了業界的熱點。簡單理解，雲計算技術就是把「單機」環境替換為由X86伺服器機群所組成的分布式計算環境。原先由幾台小型機完成的計算任務，要分散到上百甚至上千台X86伺服器上，而且還可能跨數據中心操作，挑戰可想而之。特別是在線支付等金融級業務，不能在斷網或網路連接有問題時出錯，也不能因響應速度慢而影響用戶體驗。
2018年8月，中國支付清算協會與中國信息通信研究院聯合舉辦了「金融分布式事務資料庫研討會」，與業界廠商和用戶共商核心資料庫分布式轉型之路，同時發布了《金融分布式事務資料庫》白皮書。金融分布式事務資料庫的工作推進，為分布式資料庫進入企業關鍵業務系統，提供了產業化支撐。而華為作為企業ICT解決方案供應商，早在2012年就開始研發面向大數據分析的數據倉庫，在基於傳統關系型資料庫SQL引擎和事務強一致性等基礎上，進行了分布式、並行計算的改造，歷時6年打造了面向PB級海量數據分析的分布式資料庫。
在OLAP數據倉庫之外，華為與行業用戶合作了面向OLTP的分布式事務型資料庫研發。2017年，華為與招商銀行合作成立了分布式資料庫聯合創新實驗室，研發具有高性能企業級內核、完整支持分布式事物、滿足金融行業對數據強一致要求、單機事物處理能力要達到每分鍾百萬級別等的OLTP分布式資料庫。
本次發布的GaussDB資料庫新品包括：聯機事務處理OLTP資料庫、聯機分析處理OLAP資料庫、事務和分析混合處理HTAP資料庫。而華為GaussDB資料庫將AI技術融入資料庫設計、開發、驗證、調優、運維等環節，可實現基於AI的自調優、自診斷自愈、自運維，讓資料庫更高效、更智能，引領資料庫架構的發展。
更進一步，本次發布的GaussDB系列資料庫是業界首款支持ARM晶元的分布式資料庫。華為推動計算架構從以X86+GPU為主的單一計算架構到以X86+GPU+ARM64+NPU為主的異構計算架構快速發展。基於X86架構，華為引入AI管理和智能加速能力，率先推出了智能伺服器FusionServer Pro；基於ARM64打造了業界性能最強的TaiShan伺服器；基於Ascend晶元的Atlas智能計算，實現了業界首個端邊雲協同的人工智慧平台。而GaussDB可充分利用並融合ARM、X86、GPU、NPU等多種異構算力組合，大幅提升資料庫性能。
汪濤強調，作為全球首款AI-Native資料庫，GaussDB有兩大革命性突破：第一，首次將人工智慧技術引入資料庫的全生命周期流程，實現自運維、自管理、自調優和故障自診斷。在交易、分析和混合負載場景下，基於最優化理論，首創深度強化學習自調優演算法，把業界平均性能提升60%。第二，支持異構計算，充分發揮X86/ARM/GPU/NPU多樣性算力優勢，最大化資料庫性能，在權威標准測試集TPC-DS上，華為GaussDB排名第一。GaussDB還支持本地部署、私有雲、公有雲等多種場景。
在以雲計算為代表的分布式計算環境中，數據管理解決方案除了需要分布式資料庫外，為了更好的擴縮容以及滿足多樣化數據存儲需求，計算與存儲分離已經成為分布式資料庫設計的主要架構。分布式雲化架構，就是要支持計算、存儲分離和多租戶等架構設計要求。
GaussDB已經從資料庫層面實現了高可用、高可靠、高穩定的分布式資料庫，本次發布的FusionStorage 8.0則是分布式存儲架構，創新地實現一套系統同時支持塊、文件、對象、HDFS協議，1套存儲支持4類存儲能力，適用於全業務場景混合負載，最終讓「一個數據中心一套存儲」成為可能。
IDC發布的《中國軟體定義存儲（SDS）及超融合存儲（HCI）系統市場季度跟蹤報告，2018年第四季度》顯示，2018年，軟體定義存儲市場達到了54.9%的同比增長。軟體定義存儲在中國整體存儲市場的佔有率穩步上升，分別達到了22.1%的市場佔有率。華為憑借文件解決方案在政府、廣電和電信等行業得到認可，在2018年中國軟體定義存儲市場排名第一。
FusionStorage 8.0採用華為ARM-based處理器鯤鵬920加速，使IOPS提升 20%，結合華為AI Fabric無損網路，時延進一步降低15%。基於華為在計算、網路和存儲領域多年的晶元和演算法積累，FusionStorage 8.0在SPC-1的性能測試中，單節點性能達到了16.8萬IOPS以及1ms以內時延，成為承載企業關鍵應用的新選擇。
此外，通過華為雲的雲上訓練及本地AI晶元，FusionStorage 8.0將智能管理貫穿業務使用的全生命周期，如業務上線前對存儲資源的規劃，使用過程中的風險預判及故障定位，大幅提升存儲效率，幫助行業客戶應對智能時代的數據新挑戰。
汪濤在發布會上強調，新一代智能分布式存儲FusionStorage 8.0通過重定義存儲架構，從「Storage for AI」和「AI in Storage」兩個維度實現效率大幅提升，引領存儲智能化。首先，「Storage for AI」通過融合共享，讓AI分析更高效。其次，「AI in Storage」率先將AI融入存儲全生命周期管理，從資源規劃、業務發放、系統調優、風險預測、故障定位等方面實現智能運維。
遼寧移動就採用了華為FusionStorage。作為遼寧省內最大的移動通信運營商，遼寧移動一直在 探索 先進的存儲方案在自身IT系統的應用。由於5G的快速發展，遼寧移動關鍵資料庫的應用也向雲化方向發展，分布式存儲也要滿足其可靠性和高性能要求。華為在深入分析遼寧移動需求後，首先在邊緣開發測試業務小規模試點分布式存儲，進行了大量的實驗和測試後性能和可靠性都達到了預期，最終決定將全部業務遷移至FusionStorage。該方案通過採用雙活、可寫快照、端到端DIF等特性，順利完成Billing、經營分析、B2B等系統從老舊存儲至FusionStorage的搬遷工作，助力遼寧移動的存儲架構邁入新的 歷史 階段。
值得一提的是，華為分布式資料庫與華為分布式存儲深度結合，把資料庫的操作下沉到存儲節點，極大提升了分布式資料庫的性能。利用新的網路技術和人工智慧技術，華為幫助用戶提升數據中心的吞吐量，提升網路應用的可伸縮性，並且能自動調優。
除了推出新一代突破性的分布式資料庫和存儲技術外，華為也積極與客戶、夥伴在資料庫與存儲領域，從行業應用、平台工具、標准組織和社區等多個層面共建開放、合作、共贏的產業生態。在行業應用層面，華為與軟通智慧、神州信息、東華軟體、易華錄、用友政務、亞信國際等獨立軟體開發商長期合作；在平台和工具層面，華為與Tableau、帆軟、ARM、Veritas等合作夥伴聯合創新；在標准組織和社區層面，華為深度參與OpenSDS、中國人工智慧產業聯盟、OCP、OpenStack、CNCF基金會等組織和社區的建設。
總結來說，華為全線分布式資料庫和分布式存儲產品的發布，是華為具備融合、智能、可傳承三大特性數字平台的最新成果。華為分布式資料庫與分布式存儲結合，能消除企業各業務系統數據孤島，構建面向行業場景的數據建模、分析和價值挖掘能力，對多源異構的數據進行匯聚、整合和分析，形成統一的全量數據和數據底座，實現數據價值挖掘和共享。而基於AI的智能化，可對基礎設施進行高效的管理，為行業應用開發和迭代賦能，全面幫助企業突破關鍵應用上雲的「雄關漫道」。（文/寧川）
『貳』 中科院雲計算中心分布式存儲聯合實驗室
預警IPFS 分布式存儲五大風險
隨著5G、大數據、人工智慧等新興技術的廣泛應用，數據體量的迅速增加，作為基礎設施的分布式存儲聯合實驗室，可以說是不可或缺的促進要素。
近日，中科院雲計算中心分布式存儲聯合實驗室舉行虛擬圓桌會，國際歐亞科學院中國科學中心常務副主席張景安、中科院雲計算中心主任季統凱、中科院雲計算中心黨委副書記左朝勝、中國科學院雲計算中心數據科學研究室主任邢建設、中國通信工業協會區塊鏈專委會副主任委員吳高斌、中科院雲計算中心分布式存儲聯合實驗室負責人李洪建等，就貫徹落實中國互聯網金融協會、中國銀行業協會、中國支付清算協會聯合發布的《關於防範虛擬貨幣交易炒作風險的公告》和「國務院金融穩定發展委員會打擊比特幣挖礦和交易行為」的會議精神。重磅發聲，提出了一系列行業預警，再次闡明了中科院雲計算中心分布式存儲聯合實驗室落實金融監管部門對於比特幣、以太坊、奇亞幣等虛擬貨幣的嚴管態度。
當下，大部分人都把目光聚焦到 IPFS 分布式存儲行業內，並且以不同的方式參與其中，卻沒有對這個新興的行業做深度的評估。為此，中科院雲計算中心分布式存儲聯合實驗室和相關專家對IPFS 分布式存儲行業做出了五大風險預警，並提供專業服務幫助投資客規避風險。
預警：IPFS 分布式存儲存在的五大風險
風險1：政策風險
中科院雲計算中心分布式存儲聯合實驗室認為，國家七大新基建明確指出對數據中心，分布式存儲技術的研究及應用給予大力的支持，但是嚴厲打擊打著IPFS的名義，做非法融資，惡意斂財等一切不正規、不合法的商業模式。
風險2：資金風險
對於趨勢性產業，尤其是新興行業對全球非專業人士而言都存在投資本金虧損的風險。雲存儲，雲計算雖然已經屬於成熟行業，而且國內外都有一些互聯網巨頭公司在雲領域取得了輝煌的成績，但是對於普通投資者，實體企業家，雲領域還是一個比較模糊的領域。聯合實驗室計劃針對想轉型，在轉型的相關企業進行數據中心、雲存儲、雲計算、分布式存儲知識的普及培訓。
風險3：數據無監管風險
中科院雲計算中心分布式存儲聯合實驗室認為，IPFS星際傳輸系統，雖然有效的解決了網路冗餘大，傳輸速度慢，數據存儲不安全等問題，但是目前處於分布式存儲的第一階段，數據如何有效過濾，存入IDC數據機房的數據是否存在不 健康 內容，消極言論，非法內容各個公司並沒有有效的過濾方式。而中科院雲計算中心分布式存儲聯合實驗室在數據過濾，內容篩選等方面會進行專項研究，定向存儲，以確保數據的 健康 安全，合法合規。
風險4：技術風險
技術方面分為軟體技術架構和硬體技術搭建。目前針對IPFS這個領域，各個公司把大部分精力和研究方向放在如何獲得更多的Filecoin獎勵上。存儲技術並不重視也不成熟，聯合實驗室會針對行業的技術風險，為願意共同為行業做出貢獻的企業提供IPFS的存儲技術，確保存儲數據的安全、穩定。
風險5：生態應用風險
IPFS星際文件傳輸系統，與NFS網路文件系統,GFS可擴展的分布式文件系統都屬於互聯網的協議，已經相對成熟。但在IPFS上的配套設施與HTTP超文本協議的配套設施還相差甚遠，聯合實驗室會在星際文件傳輸協議上完善配套設計，讓更多參與分布式存儲的企業並不是僅僅停留在獲得Filecoin的獎勵上。
據不完全統計，市場資金已經有超一千億人民幣進入Filecion市場。中科院雲計算中心分布式存儲聯合實驗室專家認為，如得不到有效控制風險、有效防範方案，整個Filecion市場將面臨發展危機。
【相關鏈接】
中科院雲計算中心分布式存儲聯合實驗室成立後，將致力於利用分布式存儲技術研發成果，推動轉化應用落地，制定我國在分布式存儲領域的各項標准。
據中央電視台報道，該實驗室是國家級IPFS科研機構，IPFS分布式存儲技術得到更多重量級科研機構的認可和參與。
據了解，該實驗室還計劃設立中國分布式存儲技術創新發展專項公益基金，組織分布式存儲產業、融資等專家，組成專家團，為相關企業進入資本市場服務，並定期舉辦中國分布式存儲產業學術論壇、年會，促進我國區塊鏈技術與實體經濟的深度融合發展，在建設網路強國、發展數字經濟、助力經濟 社會 發展等方面發揮更大作用。
『叄』 ipfs靠譜嗎
靠譜是絕對不靠譜的，就是能不能賺錢的事了，你要知道ipfs是個協議，這個協議註定他無法普及，原因是太過於匿名，權利部門無法追查，所以註定他無法普及。當然現在談起ipfs都是指的的fil這個虛擬幣，這貨在交易平台空氣了好幾年，終於在去年主網上市了，也給大家帶來了驚喜，前幾年空氣時囤進的，幾乎都暴賺。但嚴格的說這個玩意就是一個資金盤，不過目前來說，還是有些礦場和財團不停的投入，所以還算是靠譜，這個靠譜指的又是現在的確是能賺點錢。但是得擦亮眼睛。不要因小失大，有些一些賣算力的平台，他也是空氣交易，根本就沒託管的實體礦機，就是拿你的錢去炒，然後按你購買的算力每天分分幣，哪天他整黃了也就只有跑路這一條路可走。
虛擬幣太容易操控，暴漲暴跌常有的事。所以投資之前一定得謹慎。
想要知道 ipfs靠譜嗎 ，你就要首先 知道國家 的態度 。
隨著中國經濟的蓬勃發展，經濟體量大、內需強勁、全球一體化進程加快。對於數據的幾何級再度增長的分布式存儲需求將越來越高。就今年，全球的信息量預計達到50ZB，而中國佔全球數據和信息輸出的18%。現今的中心化數據雲存儲不足以滿足這種超大規模數據的需求。
因此，國家從2019年就開始重視分布式雲存儲的網路發展，國務院、工信部不斷有重量級嘉賓出席IPFS生態建設發展會議。由工信部牽頭在深圳召開了分布式存儲交流大會，與會的企業有IBM，銀聯、平安、騰訊、華為等機構。足以見得政府和企業對分布式雲存儲的重視程度。
2020年中共中央政治局常委會組織召開會議，指出要加快推進包括人工智慧、大數據中心、5G建設等在內的新型基礎信息建設進度。和往年的基建策略不同的是，這次的基建是技術基建，基礎都是數據流通。顯而易見，數據流通相當於新基建的基礎土壤，新基建的底層地基。
2021年3月25日，人民網的一篇文章掀起了分布式雲存儲行業的一股小浪潮。人民網的這篇文章指出了IPFS分布式雲存儲的重要性，隨著5G技術的普及，企業數據將成為中國數據的主流，數據市場將倍增。分布式雲存儲與 去中心化雲計算 作為Web3.0的重要基礎設施，將加快推動相關行業的數字化轉型。
從兩會、十四五再到重點推進的新基建、企業數字化，毫無疑問，對於「國家是否真的支持IPFS的發展？」這個問題，答案必然是肯定的。
我站在開發者的角度，做私鏈靠譜，做公鏈不靠譜，我對接ipfs做私鏈感覺還可以，他做文件存儲服務可以省去很多操作，用起來就像redis一樣簡單，你把文件都給他就可以了，他給你返回一個唯一標識，以後用這個標識就可以來ipfs取文件，很方便，大項目現在用ipfs的很少，不過我覺得中小項目用他足夠了，大項目感覺也沒什麼問題，因為他可以無限擴展節點。
但以上說的是私鏈，就是在同一區域網，或者項目分布式網關下的。接下來說說公鏈，也就是大家都在挖fil用的，糟糕透頂。。。。文件無法訪問，超時，網關不可用等等很多問題，ipfs起初的想法是好的，而且也有可能作為區塊鏈第一個實際落地應用項目（不像以太坊全是發幣的），但是穩定性太差了，我給公鏈傳一個文件，他會把這個文件拆分然後分發到下面的節點，但是有的時候某些節點網路不通，或者下線，導致我根本我法訪問，ipfs做的就是存儲，他得核心也是存儲，所以存儲的東西如果沒法訪問那是最基本的問題都沒處理好，那這種東西可以用嗎？如果大家對我說的有懷疑，可以自己下一個ipfs客戶端，不需要對接，直接可以上傳同步文件，然後找個可用的網關訪問下看看體驗如何。
當然我從開發者的角度發表的意見。雖然說他實際應用性一般，但是並不影響他值錢，因為有共識就值錢。可以推薦大家看一部電影《金礦》。裡面說的就是股民並不在乎這家公司是否真的開采出金礦，而是想通過股票賺錢，因為假的東西大家都認為它是真的，那他就是真的。
IPFS是對數據進行分布式存儲的一個系統，中文叫星際文件系統。它是一種計算機技術，與其說這項技術靠不靠譜，還得看我們目前亟待解決的問題本身。
就目前而言，數據的存儲已經達到了一個非常龐大的規模，2020年全球數據存儲量在40Zb左右，而這些數據都存儲在亞馬遜，谷歌，微軟，阿里，華為騰訊數據公司。國際數據公司IDC預測2025年，未來全球數據存儲量將達到175ZB，也就是未來數據存儲賽道上還會有更多的可能。
但是就目前的數據存儲和分發已經出現了一些問題，因為目前數據都是中心化的存儲，用戶訪問的數據都是從中央伺服器獲取。隨著數據大規模產生，中央伺服器對數據的處理過程中不斷呈現出一些用戶數據安全，隱私，以及存儲成本的問題。
為解決上述的問題IPFS橫空出世，IPFS是一個去中心化的網路，當然發展的過程會有一些緩慢，不妨多給新技術一點時間。
靠譜。不得不承認，ipfs星際文件系統，是一個好的區塊鏈項目。目前來說，我比較看好ipfs，是一個適合長期投資的項目。