gpfsforlinux

❶ 2台linux 共享fc盘可以同时读写吗

可以，比如使用gpfs文件系统

❷ HPC服务是干什么的

Linux HPC 服务

服务介绍

IBM 在世界 500 强的超级计算机中排名第一，而且 500 台中有 215 台是由 IBM 完成。IBM 发明了包括并行处理、对称多处理机和群集等技术，并通过它们始终保持着在业界的领先水平。IBM Linux 群集方案是由基于 IBM PC 服务器整合而成的，另外还有组成高速互连光纤和以太网络的 OEM 设备，它的优势在于很强的并行计算和工作调度。

IBM 基于Linux 群集的服务包括：

1. Linux HPC 规划设计服务
2. Linux HPC 安装服务
3. Linux HPC CSM 安装服务
4. Linux HPC GPFS 安装服务

服务内容

1 Linux HPC 规划设计服务

此服务将建立在对客户应用的充分了解基础之上，针对客户现有的 IT 基础设施的现状，提出与现有设施结合最紧密的实施方案。

基于客户的要求，提出 Linux 群集的规模设计，提出计算结点、管理节点、路由器以及其它设备的最佳安装位置和配置方案的规划

根据客户应用软件的要求，提出对管理节点系统资源划分，以及计算结点所安装系统包的规划。

根据客户现有系统网络情况，提出群集内部网络、外部网络和管理网络地址规划。

根据客户应用对群集作业调度的要求，提出测试规划。

通过提供以上规划设计服务，使得系统满足客户对群集并行能力和作业调度的需求。客户可以通过这项服务，获得整个群集最大能力的发挥。

2 Linux HPC 实施服务

* 系统硬件就位、连线、上电。
* 安装群集内部各节点的操作系统。
* 实现网络资源的划分。
* 提供更多的 Linux 的配置和客户化；
* 现场与客户现场的系统管理员的技术交流；
* 关键时刻，现场解决问题；
* 提供性能测试和调整；
* 群集安装服务的整体项目管理

此服务的目的就是：将客户购买的所有 IBM PC 服务器和各第三方产品硬件安装就位，硬件连接完毕；根据对群集资源的规划，将整个群集操作系统安装完毕。

通过安装高性能群集，客户可以实现高度的并行运算速度，以及可扩展性和可管理性很强的群集结构。而且它的性价比将是对客户的最大吸引力。

3 Linux HPC CSM 安装服务

IBM 群集系统管理软件（以下简称CSM）的目的是提供对群集系统的广泛管理能力。

CSM 提供多种有用的功能可以对群集系统进行单点控制。

CSM 提供的主要功能有：

* 资源监控及操作
* 远程硬件控制
* 远程命令执行
* 配置文件管理
* 并行网络安装

4 Linux GPFS 安装服务

IBM 的通用并行文件系统（以下简称GPFS）允许用户可以共享对文件的访问.

UNIX 文件系统的很多功能也被 GPFS 所支持。

GPFS 可以为并行或者串行的应用程序提供文件系统服务。

当建立群集系统时，GPFS 可以提供一些优势。我们总结如下：

1. 提高系统性能
2. 确保配置以及文件的一致性
3. 高可恢复性以及增强的数据可靠性
4. 增强的系统灵活性
5. 简单的管理

客户收益

通过添加更多的 Linux 节点，该系统的并行计算能力可以垂直扩展。

它是一个经济高效的解决方案，用相对较低的成本获得千兆量级的浮点运算速度。

利用了对称多处理能力，适用于并行计算的任务，如生命科学或模拟等。

❸ 谁来关注下一代Linux文件系统发展趋势

GNU/Linux在支持文件系统创新方面已经取得了极大的成功，目前已支持超过50种文件系统，毫无疑问，这一成功与Linux一向的开源策略是密不可分的。随着数据的爆炸式增长，存储行业已经发生了翻天覆地的变化，文件系统如何才能紧跟时代步伐，满足越来越高要求的存储需要呢？
硬盘的成本/容量曲线趋势继续遵守着名的摩尔定律，与此同时，我们也看到固态硬盘增长势头喜人，它因消除了机械硬盘固有的性能限制得到了厂商和消费者的重视，虚拟化也在改变存储架构设计，应用程序也开始向基于FC的HTTP存储协议转移。
存储容量几乎每年以40%的速度递增，现在市场上已经可以看到容量为2TB的机械硬盘，但它们的性能却没有按比例提高，固态硬盘的出现解决了传统机械硬盘的许多弊病，因此未来几年势必会引发一场存储革命，文件系统也需要为存储革命做好准备，未来的文件系统必需解决扩展，并行处理和满足新工作负载类型方面的问题。
POSIX API标准制约了创新
IDE和SCSI已经逐渐被SAS取代，终于超越了6Gbps的门槛，Infiniband和10GbE通过远程直接内容访问（Remote Direct Memory Access ，RDMA）和TCP卸载引擎提高了网络I/O，iSCSI大有取代FC SAN的趋势，和传统的使用NFS和CIFS协议应用程序不同，基于Internet的程序通常是使用HTTP/HTTPS访问地理分散的存储。
我们已经使用POSIX API访问文件系统的历史已经长达30年，它是一个标准，但它也是弱点，是它遏制了创新，应用程序开发人员需要新的API标准执行对象存储和key-value存储。
诸如卷管理，全局命名空间，压缩，加密，克隆/快照，重复数据删除，RAID和远程站点复制技术都应该由文件系统实现，由于历史原因，这些功能都是在文件系统之外实现的，因此效率低下，复杂程度较高。
文件系统不应局限于在内核空间实现
关于内核空间和用户空间性能问题的争论应该歇歇了，上下文切换不再是什么大问题，因为堆栈和网络中的其它部分造成的延迟才是真正的限制因素。在用户空间中实现的新兴文件系统应该受到重视。原来大家都认为底层组件，如磁盘设备驱动和磁盘文件系统应该驻留在内核中，但现在是时候让大部分代码在用户空间中实现了。例如，Hadoop和GlusterFS就是完全在用户空间中实现的。有关Hadoop的使用可参考51CTO之前发布的使用Linux 和Hadoop进行分布式计算一文。
变革和创新
1、适合于直接附加存储（Direct Attached Storag，DAS）的文件系统
Linux文件系统Ext3是迄今为止最稳定的Linux文件系统，但现在是时候考虑Ext4（内核2.6.31或更高才支持）了，因为它解决了诸如文件和目录大小限制的局限性，基于延伸区（extent）分配机制能够有效地存储大文件，更快地执行fsck（文件系统检查）和日志校验和检查，但Ext4只是一个暂时的解决方案。
Linux社区希望Linux支持ZFS和Btrfs（B-tree文件系统），Btrfs将类似ZFS的功能引入到Linux内核中，Btrfs不仅仅是一个磁盘文件系统，它还具有软RAID管理，卷管理，克隆/快照和压缩功能，它支持跨多块磁盘动态增大或收缩卷。
Btrfs RAID可以从一个故障阵列快速重构，其速度比硬件RAID控制器还快，因为它只重新条带化使用了的数据块，执行快照需要的空间和时间也更少，Btrfs的目标是取代Linux默认文件系统Ext4，来自Oracle的Chris Mason是该项目的主要贡献者。
2、网络文件系统（NFS）
NFS于1995年推出，NFS v3是目前应用最广泛的NAS协议，所有服务器操作系统（除微软Windows外）和存储厂商都支持它，2000年发布的NFS v4在许多方面都做了改进，但没有取得广泛应用。NFS v4.1（pNFS）应该会出现转机，因为它带来了人们迫切需要的并行I/O架构，并为低延迟高带宽I/O增加了RDMA支持。
这是NFS的一个重大进步，允许用户转移到可横向扩展的架构，但它的设计是基于一个统一的元数据服务器，这可能会限制扩展能力，并且存在一个潜在的单点故障，因此要想成为主流应用尚需时日，这期间需要解决NFS v3/4的扩展性问题，通过在集群文件系统上集成NFS，利用虚拟IP和循环DNS技术，可以构建一个可扩展的NAS解决方案。
3、集群/分布式文件系统
集群或分布式文件系统允许跨多个存储服务器使用一个全局命名空间，并实现了智能分散I/O和数据，以克服NFS（和CIFS）的扩展性限制，每个厂商都有他们自己的内部协议，但对于应用程序是透明的，因为共享存储是通过标准的POSIX接口访问的。
这样的文件系统有Oracle Lustre，IBM GPFS和GlusterFS，它们之间的主要区别是处理元数据的方式有所不同，Lustre使用的是中央控制元数据服务器，GPFS使用的是分布式元数据服务器模型，GlusterFS使用的是无元数据模型。在选择集群文件系统时，关键就是要了解元数据的处理方式。
另一个不同点是Lustre和GPFS是在内核中实现的，GlusterFS是在用户空间实现的，这些集群文件系统都实现了前面谈到的关键存储堆栈功能，它们都可以扩展到PB级存储容量。
4、分布式对象存储/key-value存储
许多现代应用程序需要简单对象API访问诸如get/put，get/put属性和lock/unlock这样成对出现的数据，对象访问允许将内存和磁盘看作是通过序列化的信息持久化块。
大多数数据处理功能（如XML解析，哈希表，全文检索等）都开始转向更高级的应用程序库，对象存储API也适合构建NoSQL规模的数据库。很多Web 2.0应用正在逐渐转向Cassendra等NoSQL式存储，比如前日的Digg和Twitter。
目前对象存储还没有标准化，虽然WebDAV，Hadoop，Apache Cassandra和Amazon S3都遵循这个模型，如果是构建一个新应用程序，它们也是很好的选择，但在未标准化之前，POSIX API将是必需的。（参考阅读：详解NoSQL数据库Apache Cassandra的配置）
小结

❹ 如何利用Linux C动态加载Fortran的so文件程序编译通过，但在程序运行时，报：Segmentation fault

1、你没有判断 handler 是否为 NULL ，也许你 dlopen就失败了。
2、 你没有判断 testint 是否为 NULL， 如果 handler 是 NULL， 或者在库中没有找到 "testint_"，都会返回 NULL

我不懂 fortran，不过很显然你在 fortran中的函数名是 testint， 为什么在dlsym的时候加了下划线？

❺ DB2 pureScale安装错误问题

你好，请问解决了么。怎么解决的，我也遇到了同样的问题

❻ 当前主流分布式文件系统有哪些各有什么优缺点

目前几个主流的分布式文件系统除GPFS外，还有PVFS、Lustre、PanFS、GoogleFS等。
1.PVFS(Parallel
Virtual
File
System)项目是Clemson大学为了运行Linux集群而创建的一个开源项目,目前PVFS还存在以下不足：
1）单一管理节点:只有一个管理节点来管理元数据，当集群系统达到一定的规模之后，管理节点将可能出现过度繁忙的情况，这时管理节点将成为系统瓶颈;
2）对数据的存储缺乏容错机制:当某一I/O节点无法工作时，数据将出现不可用的情况;
3）静态配置:对PVFS的配置只能在启动前进行，一旦系统运行则不可再更改原先的配置。
2.Lustre文件系统是一个基于对象存储的分布式文件系统，此项目于1999年在Carnegie
Mellon
University启动，Lustre也是一个开源项目。它只有两个元数据管理节点,同PVFS类似,当系统达到一定的规模之后，管理节点会成为Lustre系统中的瓶颈。
3.PanFS(Panasas
File
System)是Panasas公司用于管理自己的集群存储系统的分布式文件系统。
4.GoogleFS(Google
File
System)是Google公司为了满足公司内部的数据处理需要而设计的一套分布式文件系统。

❼ 云存储怎么更好实现容错

云存储系统具有良好的可扩展性、容错性，以及内部实现对用户透明等特性，这一切都离不开分布式文件系统的支撑。现有的云存储分布式文件系统包括GFS、HDFS、Lustre、FastDFS、PVFS、GPFS、PFS、Ceph和TFS等。它们的许多设计理念类似，同时也各有特色。下面对现有的分布式文件系统进行详细介绍。

1 Google File System (GFS)

GFS是一个可扩展的分布式文件系统，其主要用于处理大的分布式数据密集型应用。GFS的一大特色就是其运行于大量普通的廉价硬件上，通过GFS文件系统提供容错功能，并给大量用户提供可处理海量数据的高性能服务。和传统标准相比，GFS文件规模巨大，其主要用来处理大文件。此外，GFS大多通过直接追加新数据来改变文件，而非覆盖现有数据，一旦数据写入完成，文件就仅支持读操作。

2 Lustre文件系统

Lustre文件系统是一种典型的基于对象存储技术 的分布式文件系统， 目前，该文件系统已经广泛用于国外许多高性能计算机构，如美国能源部、Sandia国家实验室、Pacific Northwest国家实验室等。Top500机器中有多台均采用的是Lustre文件系统。

Lustre文件系统的大文件性能良好 ，其通过基于对象的数据存储格式，将同一数据文件分为若干个对象分别存储于不同的对象存储设备。大文件I/O操作被分配到不同的对象存储设备上并行实施，从而实现很大的聚合带宽。此外，由于Lustre融合了传统分布式文件系统的特色和传统共享存储文件系统的设计理念，因此其具有更加有效的数据管理机制、全局数据共享、基于对象存储、存储智能化，以及可快速部署等一系列优点。尽管如此，由于Lustre采用分布式存储结构将元数据和数据文件分开存储，访问数据之前需要先访问元数据服务器，这一过程增加了网络开销，从而使得Lustre的小文件I/O操作性能较差。

3 FastDFS文件系统

FastDFS是一个轻量级分布式文件系统，其体系架构如图3所示，整个文件系统由客户端(Cli—ent)、跟踪器(Tracker)和存储节点(Storage)三部分组成。系统服务端有Tracker和Storage两个角色，Tracker用来负责作业的调度和负载均衡，Storage则用于存储文件，并负责管理文件。为支持大容量的数据存储，Storage采用分卷或分组的数据组织方式;存储系统可由一个或多个卷组成，一个卷可以由一台或多台存储服务器构建。同一个卷下的多台存储服务器中的数据文件都是相同的，卷与卷之间的文件则相互独立，通过这种数据组织方式，可以很好地实现数据冗余备份以及系统负载均衡的目的。

图 FastDFS文件系统体系结构示意图

4 Parallel Virtual File System (PVFS)

由Clemson大学设计并成功开发的PVFS是一种构建在Linux操作系统之上的开源并行虚拟文件系统。PVFS基于传统的C/S架构进行设计，整个文件系统由管理结点、计算结点和I/0结点三大部分组成，管理结点负责处理文件的元数据，计算节点用来执行各种计算任务，I/0结点则主要负责数据文件的存储和读写，并负责给计算结点提供所需的数据。在整个集群系统范围内，PVFS使用一致的全局命名空间，另外，PVFS应用对象存储的概念，将数据文件条块化为多个对象并分别存储到多个存储结点上。由于在网络通信方面，PVFS只支持TCP网络通信协议，这使得其灵活性不足;此外，由于PVFS应用对象存储的概念进行数据文件的存储，其在处理小文件时性能也不太理想。

5 General Parallel File System (GPFS)

GPFS的前身是Tiger Shark多媒体文件系统，其是IBM专为Linux集群系统设计的并行共享文件系统。在系统结构上，GPFS主要借鉴了IBM Linux集群系统中的虚拟共享磁盘技术，计算节点可以通过使用交换网络来同时并行访问系统中多个磁盘中的数据，并依赖这一访问方式来实现较高的I/O带宽。GPFS的主要特点包括：通过循环的方式将大文件存储在不同的磁盘上，同时通过合并操作来处理小文件的读写，使用动态选举的元数据结点来管理元数据;此外，GPFS还具有基于日志的失效节点的自动恢复策略以及集中式的数据锁机制。

6 Parallel File System (PFS)

Sun公司的PFS分布式文件系统可以很好地支持高性能和可扩展的I/O操作，其主要设计思想是将文件分布在多个磁盘和服务器上，并将存放文件的多个设备逻辑上看成一个虚拟磁盘来统一管理。很显然，PFS可以同时跨越多个存储系统，可以将整个PFS中的所有存储设备都看成是这个虚拟磁盘的一部分;当有多个节点同时访问同一文件时，PFS可以并行地为这些节点提供访问服务。PFS分布式文件系统构建于Solaris操作系统之上，主要包括宿主节点、计算节点、I/O从属节点和I/O主机节点。宿主节点是PFS提供给其它系统的人口，只有成功登录到宿主节点的用户才是合法的，才可以访问PFS内部的数据文件。计算节点主要用来管理PFS系统的通信和内存资源。L/O主机节点则主要负责文件系统的目录管理和存储块管理，同时为存储数据文件提供读写服务。I/O从属节点仅用来处理磁盘的读写操作和空白块的分配工作。

7 Ceph云存储文件系统

Ceph是Califomia大学Santa Cruz分校的Sage Weil设计的一种云存储分布式文件系统。Ceph云存储文件系统的主要目标是设计基于POSIX的无节点故障分布式文件系统，并且数据文件具有容错和无缝复制功能。Ceph文件系统具有三大特点，首先，其使用多个元数据服务器来构建系统的命名空间，这显着强化了元数据服务器的并发访问功能;其次，在元数据服务器上，Ceph文件系统采用了动态的子树划分技术，并支持元数据服务器的负载迁移，可以很好地实现元数据的负载均衡;最后，Ceph文件系统提供基于对象存储设备的对象文件系统，并将数据文件作为一个存储对象来对待，这有效地提高了数据文件的读写效率。

8 Taobao File System (TFS)

Taobao file system (TFS)是由淘宝开发的云存储文件系统，其主要面向海量非结构化数据存储问题提供服务。TFS部署在普通的Linux集群上，为淘宝网提供高可靠、高并发的大量小文件数据存储服务。TFS采用扁平化的数据组织结构将文件名映射到文件的物理地址，简化了文件访问流程，一定程度上优化了系统读写性能。

一个TFS集群由两个NameServer节点和多个DataServer节点组成，TFS的服务程序都是作为一个用户级的程序运行在普通Linux机器上。TFS将众多的小文件合并成大文件，并称这个大文件为Block，Block存储在DataServer上，每个Block在TFS系统内均拥有唯一的Id号。NameServer负责维护block与DataServer之间的映射关系。NameServer采用HA结构，即双机互为热备份，来实现容灾功能，两台NameServer同时运行，其中一台为主节点，另外一台作为备用节点。当主NameServer节点出现故障后，迅速将备份NameServer切换为主节点并对外提供服务。

❽ linux怎么查看gpfs版本

GPFS
安装

3.1
、建立集群

3.1.1
、创建集群文件系统
node1
mmcrcluster -n /tmp/gpfs_node -p node1 -s node2 -r /usr/bin/ssh -R /usr/bin/scp
命令显示：

mmcrcluster: Processing node 1
mmcrcluster: Processing node2
mmcrcluster: Command successfully completed
mmcrcluster: Propagating the cluster configuration data to all affected nodes.

This is an
asynchronous process.
3.1.2
、显示集群文件系统

mmlscluster
GPFS cluster information
========================

GPFS cluster name:
node1

GPFS cluster id:
13882348004399855353

GPFS UID domain:
node1

Remote shell command:
/usr/bin/ssh

Remote file command:
/usr/bin/scp

GPFS cluster configuration servers:
-----------------------------------

Primary server:
node1

Secondary server:

Node
Daemon node name
IP address
Admin node name
Designation

1
node1

10.3.164.24
node1

quorum-manager
2
node2

10.3.164.25
node2

quorum-manager

3.2
、创建
NSD
3.2.
、使用
mmcrnsd
创建
NSD
mmcrnsd -F /tmp/gpfs_disk -v yes
命令显示
:
mmcrnsd: Processing disk hdb
mmcrnsd: Propagating the cluster configuration data to all
affected nodes.
This is an asynchronous process.
3.2.2
、显示
NSD
mmlsnsd
–
m
Disk name
NSD volume ID
Device
Node name
Remarks

-------------------------------------------------------------------------------
gpfs1nsd
C0A801F54A9B3732
/dev/hdb
node1
primary node
gpfs1nsd
C0A801F54A9B3732
/dev/hdb
node2
3.3
、启动
GPFS
文件系统

mmstartup
–
a
Mon Aug 31 10:37:48 CST 2009: mmstartup: Starting GPFS ...
3.4
、查看
GPFS
文件系统状态

mmgetstate -a

Node number
Node name
GPFS state

------------------------------------------

1

node1
active

2

node2
active
3.5
、建立文件系统

#mkdir /gpfs
建立挂载点

#./bin/mmcrfs /gpfs gpfsdev -F /tmp/gpfs_disk -A yes -B 1024K -v yes
命令显示：

The following disks of gpfsdev will be formatted on node node1:
gpfs1nsd: size 2241856 KB
Formatting file system ...

Disks up to size 2 GB can be added to storage pool 'system'.
Creating Inode File
Creating Allocation Maps
Clearing Inode Allocation Map
Clearing Block Allocation Map
Completed creation of file system /dev/gpfsdev.
mmcrfs: Propagating the cluster configuration data to all

affected nodes.
This is an asynchronous process.
3.6
、检查文件系统

#cat /etc/fstab
………………………

/dev/gpfsdev
/gpfs
gpfs
rw,mtime,atime,dev=gpfsdev,autostart 0 0
Df-g
/dev/hdb

/gpfs

❾ linux与unix有哪些相同或不同点

不同点如下：

1、版本不同

Linux是一个Unix克隆版，由Linus Torvalds从头开始编写，并得到了网络上一个松散的黑客团队的帮助。它旨在实现POSIX合规性。Linux只是一个内核。所有Linux发行版都包括GUI系统+。

2、文件系统不同

Linux默认支持并使用ext3或ext4文件系统。UNIX附带了各种文件系统，如jfs，gpfs（AIX），jfs，gpfs（HP-UX），jfs，gpfs（Solaris）。

(9)gpfsforlinux扩展阅读：

系统管理工具

1、UNIX在HP-UX上附带了自己的工具，例如SAM。

2、Suse Linux附带Yast

3、Redhat Linux附带了自己的gui工具redhat-config- *。

但是，编辑文本配置文件和键入命令是UNIX和Linux下sys管理工作的最常用选项。