2019数字中国分布式存储高峰论坛

‘壹’ 华为突破分布式数据库和存储技术，打通数字化转型“雄关漫道”

2019年，我们将进入数字化转型的攻关期。所谓“攻关期”即数字化转型2.0阶段，需要攻坚企业关键业务上云和数字化转型改造的课题。在一份市场调查公司IDC的报告中指出：IDC自2014年提出数字化转型以来，看到企业在数字化转型层面已经投入了大量人力物力，但是效果并不理想，有一些企业已经成功屹立在潮头，有一些企业在向上游进发，还有一些企业只能在浪潮的挟裹中被动前行。

对于企业来说，数字化转型是“雄关漫道”。IDC认为，目前阶段来看，企业亟待解决的是数字化能力提升，包括：与业务的深入结合能力；数据处理和挖掘能力；以及IT技术运营和管理能力。特别是数据处理和挖掘能力，因为数字化转型推进企业从以流程为核心向以数据为核心转型，对海量、异构、多类型的数据处理和挖掘能力是释放数据价值的前提，对数据全生命周期的管控治理是释放数据价值的保障。而随着数字化转型引入大量新技术而导致IT复杂度变高，企业IT技术运营和管理能力是提升企业“IT生产力”的关键。

攻关数字化转型的“雄关漫道”，需要一个具备融合、智能、可传承三大特性的数字平台。这是2019年3月华为与IDC联合推出的《拥抱变化，智胜未来—数字平台破局企业数字化转型》白皮书所提出的观点。融合主要指把传统技术和创新技术相结合；智能主要指平台智能化和智能化能力输出；可传承主要指解耦、功能复用、可配置等理念打造的架构。而承载这三大观点的，就是新一代分布式企业级技术。

2019年5月15日，华为发布了业界首款支持ARM架构的新一代智能分布式数据库GaussDB以及分布式存储FusionStorage 8.0，作为新一代数据基础设施，诠释了具备融合、智能、可传承三大特性的数字平台。华为常务董事、ICT战略与Marketing总裁汪涛在发布会上表示，千行百业正在加速智能化进程，越来越多的企业已经意识到数据基础设施是智能化成功的关键。华为围绕计算、存储和数据处理三个领域重定义数据基础设施，加速迈向智能时代。

今天所讨论云和工业互联网等概念的背后是一个新时代的到来，这就是体系架构大迁徙。传统企业级技术是在单体应用和单机环境中，保证数据存储、调用等操作的高可靠、高可用、高稳定，特别是满足金融级事物处理的ACID（原子性、一致性、隔离性和耐久性）要求，为企业关键业务提供数据管理支撑。随着企业技术向云架构迁移，数据库技术也面临转型。

2018年，基于云计算技术的分布式数据库成为了业界的热点。简单理解，云计算技术就是把“单机”环境替换为由X86服务器机群所组成的分布式计算环境。原先由几台小型机完成的计算任务，要分散到上百甚至上千台X86服务器上，而且还可能跨数据中心操作，挑战可想而之。特别是在线支付等金融级业务，不能在断网或网络连接有问题时出错，也不能因响应速度慢而影响用户体验。

2018年8月，中国支付清算协会与中国信息通信研究院联合举办了“金融分布式事务数据库研讨会”，与业界厂商和用户共商核心数据库分布式转型之路，同时发布了《金融分布式事务数据库》白皮书。金融分布式事务数据库的工作推进，为分布式数据库进入企业关键业务系统，提供了产业化支撑。而华为作为企业ICT解决方案供应商，早在2012年就开始研发面向大数据分析的数据仓库，在基于传统关系型数据库SQL引擎和事务强一致性等基础上，进行了分布式、并行计算的改造，历时6年打造了面向PB级海量数据分析的分布式数据库。

在OLAP数据仓库之外，华为与行业用户合作了面向OLTP的分布式事务型数据库研发。2017年，华为与招商银行合作成立了分布式数据库联合创新实验室，研发具有高性能企业级内核、完整支持分布式事物、满足金融行业对数据强一致要求、单机事物处理能力要达到每分钟百万级别等的OLTP分布式数据库。

本次发布的GaussDB数据库新品包括：联机事务处理OLTP数据库、联机分析处理OLAP数据库、事务和分析混合处理HTAP数据库。而华为GaussDB数据库将AI技术融入数据库设计、开发、验证、调优、运维等环节，可实现基于AI的自调优、自诊断自愈、自运维，让数据库更高效、更智能，引领数据库架构的发展。

更进一步，本次发布的GaussDB系列数据库是业界首款支持ARM芯片的分布式数据库。华为推动计算架构从以X86+GPU为主的单一计算架构到以X86+GPU+ARM64+NPU为主的异构计算架构快速发展。基于X86架构，华为引入AI管理和智能加速能力，率先推出了智能服务器FusionServer Pro；基于ARM64打造了业界性能最强的TaiShan服务器；基于Ascend芯片的Atlas智能计算，实现了业界首个端边云协同的人工智能平台。而GaussDB可充分利用并融合ARM、X86、GPU、NPU等多种异构算力组合，大幅提升数据库性能。

汪涛强调，作为全球首款AI-Native数据库，GaussDB有两大革命性突破：第一，首次将人工智能技术引入数据库的全生命周期流程，实现自运维、自管理、自调优和故障自诊断。在交易、分析和混合负载场景下，基于最优化理论，首创深度强化学习自调优算法，把业界平均性能提升60%。第二，支持异构计算，充分发挥X86/ARM/GPU/NPU多样性算力优势，最大化数据库性能，在权威标准测试集TPC-DS上，华为GaussDB排名第一。GaussDB还支持本地部署、私有云、公有云等多种场景。

在以云计算为代表的分布式计算环境中，数据管理解决方案除了需要分布式数据库外，为了更好的扩缩容以及满足多样化数据存储需求，计算与存储分离已经成为分布式数据库设计的主要架构。分布式云化架构，就是要支持计算、存储分离和多租户等架构设计要求。

GaussDB已经从数据库层面实现了高可用、高可靠、高稳定的分布式数据库，本次发布的FusionStorage 8.0则是分布式存储架构，创新地实现一套系统同时支持块、文件、对象、HDFS协议，1套存储支持4类存储能力，适用于全业务场景混合负载，最终让“一个数据中心一套存储”成为可能。

IDC发布的《中国软件定义存储（SDS）及超融合存储（HCI）系统市场季度跟踪报告，2018年第四季度》显示，2018年，软件定义存储市场达到了54.9%的同比增长。软件定义存储在中国整体存储市场的占有率稳步上升，分别达到了22.1%的市场占有率。华为凭借文件解决方案在政府、广电和电信等行业得到认可，在2018年中国软件定义存储市场排名第一。

FusionStorage 8.0采用华为ARM-based处理器鲲鹏920加速，使IOPS提升 20%，结合华为AI Fabric无损网络，时延进一步降低15%。基于华为在计算、网络和存储领域多年的芯片和算法积累，FusionStorage 8.0在SPC-1的性能测试中，单节点性能达到了16.8万IOPS以及1ms以内时延，成为承载企业关键应用的新选择。

此外，通过华为云的云上训练及本地AI芯片，FusionStorage 8.0将智能管理贯穿业务使用的全生命周期，如业务上线前对存储资源的规划，使用过程中的风险预判及故障定位，大幅提升存储效率，帮助行业客户应对智能时代的数据新挑战。

汪涛在发布会上强调，新一代智能分布式存储FusionStorage 8.0通过重定义存储架构，从“Storage for AI”和“AI in Storage”两个维度实现效率大幅提升，引领存储智能化。首先，“Storage for AI”通过融合共享，让AI分析更高效。其次，“AI in Storage”率先将AI融入存储全生命周期管理，从资源规划、业务发放、系统调优、风险预测、故障定位等方面实现智能运维。

辽宁移动就采用了华为FusionStorage。作为辽宁省内最大的移动通信运营商，辽宁移动一直在 探索 先进的存储方案在自身IT系统的应用。由于5G的快速发展，辽宁移动关键数据库的应用也向云化方向发展，分布式存储也要满足其可靠性和高性能要求。华为在深入分析辽宁移动需求后，首先在边缘开发测试业务小规模试点分布式存储，进行了大量的实验和测试后性能和可靠性都达到了预期，最终决定将全部业务迁移至FusionStorage。该方案通过采用双活、可写快照、端到端DIF等特性，顺利完成Billing、经营分析、B2B等系统从老旧存储至FusionStorage的搬迁工作，助力辽宁移动的存储架构迈入新的 历史 阶段。

值得一提的是，华为分布式数据库与华为分布式存储深度结合，把数据库的操作下沉到存储节点，极大提升了分布式数据库的性能。利用新的网络技术和人工智能技术，华为帮助用户提升数据中心的吞吐量，提升网络应用的可伸缩性，并且能自动调优。

除了推出新一代突破性的分布式数据库和存储技术外，华为也积极与客户、伙伴在数据库与存储领域，从行业应用、平台工具、标准组织和社区等多个层面共建开放、合作、共赢的产业生态。在行业应用层面，华为与软通智慧、神州信息、东华软件、易华录、用友政务、亚信国际等独立软件开发商长期合作；在平台和工具层面，华为与Tableau、帆软、ARM、Veritas等合作伙伴联合创新；在标准组织和社区层面，华为深度参与OpenSDS、中国人工智能产业联盟、OCP、OpenStack、CNCF基金会等组织和社区的建设。

总结来说，华为全线分布式数据库和分布式存储产品的发布，是华为具备融合、智能、可传承三大特性数字平台的最新成果。华为分布式数据库与分布式存储结合，能消除企业各业务系统数据孤岛，构建面向行业场景的数据建模、分析和价值挖掘能力，对多源异构的数据进行汇聚、整合和分析，形成统一的全量数据和数据底座，实现数据价值挖掘和共享。而基于AI的智能化，可对基础设施进行高效的管理，为行业应用开发和迭代赋能，全面帮助企业突破关键应用上云的“雄关漫道”。（文/宁川）

‘贰’ 中科院云计算中心分布式存储联合实验室

预警IPFS 分布式存储五大风险

随着5G、大数据、人工智能等新兴技术的广泛应用，数据体量的迅速增加，作为基础设施的分布式存储联合实验室，可以说是不可或缺的促进要素。

近日，中科院云计算中心分布式存储联合实验室举行虚拟圆桌会，国际欧亚科学院中国科学中心常务副主席张景安、中科院云计算中心主任季统凯、中科院云计算中心党委副书记左朝胜、中国科学院云计算中心数据科学研究室主任邢建设、中国通信工业协会区块链专委会副主任委员吴高斌、中科院云计算中心分布式存储联合实验室负责人李洪建等，就贯彻落实中国互联网金融协会、中国银行业协会、中国支付清算协会联合发布的《关于防范虚拟货币交易炒作风险的公告》和“国务院金融稳定发展委员会打击比特币挖矿和交易行为”的会议精神。重磅发声，提出了一系列行业预警，再次阐明了中科院云计算中心分布式存储联合实验室落实金融监管部门对于比特币、以太坊、奇亚币等虚拟货币的严管态度。

当下，大部分人都把目光聚焦到 IPFS 分布式存储行业内，并且以不同的方式参与其中，却没有对这个新兴的行业做深度的评估。为此，中科院云计算中心分布式存储联合实验室和相关专家对IPFS 分布式存储行业做出了五大风险预警，并提供专业服务帮助投资客规避风险。

预警：IPFS 分布式存储存在的五大风险

风险1：政策风险

中科院云计算中心分布式存储联合实验室认为，国家七大新基建明确指出对数据中心，分布式存储技术的研究及应用给予大力的支持，但是严厉打击打着IPFS的名义，做非法融资，恶意敛财等一切不正规、不合法的商业模式。

风险2：资金风险

对于趋势性产业，尤其是新兴行业对全球非专业人士而言都存在投资本金亏损的风险。云存储，云计算虽然已经属于成熟行业，而且国内外都有一些互联网巨头公司在云领域取得了辉煌的成绩，但是对于普通投资者，实体企业家，云领域还是一个比较模糊的领域。联合实验室计划针对想转型，在转型的相关企业进行数据中心、云存储、云计算、分布式存储知识的普及培训。

风险3：数据无监管风险

中科院云计算中心分布式存储联合实验室认为，IPFS星际传输系统，虽然有效的解决了网络冗余大，传输速度慢，数据存储不安全等问题，但是目前处于分布式存储的第一阶段，数据如何有效过滤，存入IDC数据机房的数据是否存在不 健康 内容，消极言论，非法内容各个公司并没有有效的过滤方式。而中科院云计算中心分布式存储联合实验室在数据过滤，内容筛选等方面会进行专项研究，定向存储，以确保数据的 健康 安全，合法合规。

风险4：技术风险

技术方面分为软件技术架构和硬件技术搭建。目前针对IPFS这个领域，各个公司把大部分精力和研究方向放在如何获得更多的Filecoin奖励上。存储技术并不重视也不成熟，联合实验室会针对行业的技术风险，为愿意共同为行业做出贡献的企业提供IPFS的存储技术，确保存储数据的安全、稳定。

风险5：生态应用风险

IPFS星际文件传输系统，与NFS网络文件系统,GFS可扩展的分布式文件系统都属于互联网的协议，已经相对成熟。但在IPFS上的配套设施与HTTP超文本协议的配套设施还相差甚远，联合实验室会在星际文件传输协议上完善配套设计，让更多参与分布式存储的企业并不是仅仅停留在获得Filecoin的奖励上。

据不完全统计，市场资金已经有超一千亿人民币进入Filecion市场。中科院云计算中心分布式存储联合实验室专家认为，如得不到有效控制风险、有效防范方案，整个Filecion市场将面临发展危机。

【相关链接】

中科院云计算中心分布式存储联合实验室成立后，将致力于利用分布式存储技术研发成果，推动转化应用落地，制定我国在分布式存储领域的各项标准。

据中央电视台报道，该实验室是国家级IPFS科研机构，IPFS分布式存储技术得到更多重量级科研机构的认可和参与。

据了解，该实验室还计划设立中国分布式存储技术创新发展专项公益基金，组织分布式存储产业、融资等专家，组成专家团，为相关企业进入资本市场服务，并定期举办中国分布式存储产业学术论坛、年会，促进我国区块链技术与实体经济的深度融合发展，在建设网络强国、发展数字经济、助力经济 社会 发展等方面发挥更大作用。

‘叁’ ipfs靠谱吗

靠谱是绝对不靠谱的，就是能不能赚钱的事了，你要知道ipfs是个协议，这个协议注定他无法普及，原因是太过于匿名，权利部门无法追查，所以注定他无法普及。当然现在谈起ipfs都是指的的fil这个虚拟币，这货在交易平台空气了好几年，终于在去年主网上市了，也给大家带来了惊喜，前几年空气时囤进的，几乎都暴赚。但严格的说这个玩意就是一个资金盘，不过目前来说，还是有些矿场和财团不停的投入，所以还算是靠谱，这个靠谱指的又是现在的确是能赚点钱。但是得擦亮眼睛。不要因小失大，有些一些卖算力的平台，他也是空气交易，根本就没托管的实体矿机，就是拿你的钱去炒，然后按你购买的算力每天分分币，哪天他整黄了也就只有跑路这一条路可走。

虚拟币太容易操控，暴涨暴跌常有的事。所以投资之前一定得谨慎。

想要知道 ipfs靠谱吗 ，你就要首先 知道国家 的态度 。

随着中国经济的蓬勃发展，经济体量大、内需强劲、全球一体化进程加快。对于数据的几何级再度增长的分布式存储需求将越来越高。就今年，全球的信息量预计达到50ZB，而中国占全球数据和信息输出的18%。现今的中心化数据云存储不足以满足这种超大规模数据的需求。

因此，国家从2019年就开始重视分布式云存储的网络发展，国务院、工信部不断有重量级嘉宾出席IPFS生态建设发展会议。由工信部牵头在深圳召开了分布式存储交流大会，与会的企业有IBM，银联、平安、腾讯、华为等机构。足以见得政府和企业对分布式云存储的重视程度。

2020年中共中央政治局常委会组织召开会议，指出要加快推进包括人工智能、大数据中心、5G建设等在内的新型基础信息建设进度。和往年的基建策略不同的是，这次的基建是技术基建，基础都是数据流通。显而易见，数据流通相当于新基建的基础土壤，新基建的底层地基。

2021年3月25日，人民网的一篇文章掀起了分布式云存储行业的一股小浪潮。人民网的这篇文章指出了IPFS分布式云存储的重要性，随着5G技术的普及，企业数据将成为中国数据的主流，数据市场将倍增。分布式云存储与 去中心化云计算 作为Web3.0的重要基础设施，将加快推动相关行业的数字化转型。

从两会、十四五再到重点推进的新基建、企业数字化，毫无疑问，对于“国家是否真的支持IPFS的发展？”这个问题，答案必然是肯定的。

我站在开发者的角度，做私链靠谱，做公链不靠谱，我对接ipfs做私链感觉还可以，他做文件存储服务可以省去很多操作，用起来就像redis一样简单，你把文件都给他就可以了，他给你返回一个唯一标识，以后用这个标识就可以来ipfs取文件，很方便，大项目现在用ipfs的很少，不过我觉得中小项目用他足够了，大项目感觉也没什么问题，因为他可以无限扩展节点。

但以上说的是私链，就是在同一局域网，或者项目分布式网关下的。接下来说说公链，也就是大家都在挖fil用的，糟糕透顶。。。。文件无法访问，超时，网关不可用等等很多问题，ipfs起初的想法是好的，而且也有可能作为区块链第一个实际落地应用项目（不像以太坊全是发币的），但是稳定性太差了，我给公链传一个文件，他会把这个文件拆分然后分发到下面的节点，但是有的时候某些节点网络不通，或者下线，导致我根本我法访问，ipfs做的就是存储，他得核心也是存储，所以存储的东西如果没法访问那是最基本的问题都没处理好，那这种东西可以用吗？如果大家对我说的有怀疑，可以自己下一个ipfs客户端，不需要对接，直接可以上传同步文件，然后找个可用的网关访问下看看体验如何。

当然我从开发者的角度发表的意见。虽然说他实际应用性一般，但是并不影响他值钱，因为有共识就值钱。可以推荐大家看一部电影《金矿》。里面说的就是股民并不在乎这家公司是否真的开采出金矿，而是想通过股票赚钱，因为假的东西大家都认为它是真的，那他就是真的。

IPFS是对数据进行分布式存储的一个系统，中文叫星际文件系统。它是一种计算机技术，与其说这项技术靠不靠谱，还得看我们目前亟待解决的问题本身。

就目前而言，数据的存储已经达到了一个非常庞大的规模，2020年全球数据存储量在40Zb左右，而这些数据都存储在亚马逊，谷歌，微软，阿里，华为腾讯数据公司。国际数据公司IDC预测2025年，未来全球数据存储量将达到175ZB，也就是未来数据存储赛道上还会有更多的可能。

但是就目前的数据存储和分发已经出现了一些问题，因为目前数据都是中心化的存储，用户访问的数据都是从中央服务器获取。随着数据大规模产生，中央服务器对数据的处理过程中不断呈现出一些用户数据安全，隐私，以及存储成本的问题。

为解决上述的问题IPFS横空出世，IPFS是一个去中心化的网络，当然发展的过程会有一些缓慢，不妨多给新技术一点时间。

靠谱。不得不承认，ipfs星际文件系统，是一个好的区块链项目。目前来说，我比较看好ipfs，是一个适合长期投资的项目。