gpfsforlinux

❶ 2台linux 共享fc盤可以同時讀寫嗎

可以，比如使用gpfs文件系統

❷ HPC服務是干什麼的

Linux HPC 服務

服務介紹

IBM 在世界 500 強的超級計算機中排名第一，而且 500 台中有 215 台是由 IBM 完成。IBM 發明了包括並行處理、對稱多處理機和群集等技術，並通過它們始終保持著在業界的領先水平。IBM Linux 群集方案是由基於 IBM PC 伺服器整合而成的，另外還有組成高速互連光纖和乙太網絡的 OEM 設備，它的優勢在於很強的並行計算和工作調度。

IBM 基於Linux 群集的服務包括：

1. Linux HPC 規劃設計服務
2. Linux HPC 安裝服務
3. Linux HPC CSM 安裝服務
4. Linux HPC GPFS 安裝服務

服務內容

1 Linux HPC 規劃設計服務

此服務將建立在對客戶應用的充分了解基礎之上，針對客戶現有的 IT 基礎設施的現狀，提出與現有設施結合最緊密的實施方案。

基於客戶的要求，提出 Linux 群集的規模設計，提出計算結點、管理節點、路由器以及其它設備的最佳安裝位置和配置方案的規劃

根據客戶應用軟體的要求，提出對管理節點系統資源劃分，以及計算結點所安裝系統包的規劃。

根據客戶現有系統網路情況，提出群集內部網路、外部網路和管理網路地址規劃。

根據客戶應用對群集作業調度的要求，提出測試規劃。

通過提供以上規劃設計服務，使得系統滿足客戶對群集並行能力和作業調度的需求。客戶可以通過這項服務，獲得整個群集最大能力的發揮。

2 Linux HPC 實施服務

* 系統硬體就位、連線、上電。
* 安裝群集內部各節點的操作系統。
* 實現網路資源的劃分。
* 提供更多的 Linux 的配置和客戶化；
* 現場與客戶現場的系統管理員的技術交流；
* 關鍵時刻，現場解決問題；
* 提供性能測試和調整；
* 群集安裝服務的整體項目管理

此服務的目的就是：將客戶購買的所有 IBM PC 伺服器和各第三方產品硬體安裝就位，硬體連接完畢；根據對群集資源的規劃，將整個群集操作系統安裝完畢。

通過安裝高性能群集，客戶可以實現高度的並行運算速度，以及可擴展性和可管理性很強的群集結構。而且它的性價比將是對客戶的最大吸引力。

3 Linux HPC CSM 安裝服務

IBM 群集系統管理軟體（以下簡稱CSM）的目的是提供對群集系統的廣泛管理能力。

CSM 提供多種有用的功能可以對群集系統進行單點控制。

CSM 提供的主要功能有：

* 資源監控及操作
* 遠程硬體控制
* 遠程命令執行
* 配置文件管理
* 並行網路安裝

4 Linux GPFS 安裝服務

IBM 的通用並行文件系統（以下簡稱GPFS）允許用戶可以共享對文件的訪問.

UNIX 文件系統的很多功能也被 GPFS 所支持。

GPFS 可以為並行或者串列的應用程序提供文件系統服務。

當建立群集系統時，GPFS 可以提供一些優勢。我們總結如下：

1. 提高系統性能
2. 確保配置以及文件的一致性
3. 高可恢復性以及增強的數據可靠性
4. 增強的系統靈活性
5. 簡單的管理

客戶收益

通過添加更多的 Linux 節點，該系統的並行計算能力可以垂直擴展。

它是一個經濟高效的解決方案，用相對較低的成本獲得千兆量級的浮點運算速度。

利用了對稱多處理能力，適用於並行計算的任務，如生命科學或模擬等。

❸ 誰來關注下一代Linux文件系統發展趨勢

GNU/Linux在支持文件系統創新方面已經取得了極大的成功，目前已支持超過50種文件系統，毫無疑問，這一成功與Linux一向的開源策略是密不可分的。隨著數據的爆炸式增長，存儲行業已經發生了翻天覆地的變化，文件系統如何才能緊跟時代步伐，滿足越來越高要求的存儲需要呢？
硬碟的成本/容量曲線趨勢繼續遵守著名的摩爾定律，與此同時，我們也看到固態硬碟增長勢頭喜人，它因消除了機械硬碟固有的性能限製得到了廠商和消費者的重視，虛擬化也在改變存儲架構設計，應用程序也開始向基於FC的HTTP存儲協議轉移。
存儲容量幾乎每年以40%的速度遞增，現在市場上已經可以看到容量為2TB的機械硬碟，但它們的性能卻沒有按比例提高，固態硬碟的出現解決了傳統機械硬碟的許多弊病，因此未來幾年勢必會引發一場存儲革命，文件系統也需要為存儲革命做好准備，未來的文件系統必需解決擴展，並行處理和滿足新工作負載類型方面的問題。
POSIX API標准制約了創新
IDE和SCSI已經逐漸被SAS取代，終於超越了6Gbps的門檻，Infiniband和10GbE通過遠程直接內容訪問（Remote Direct Memory Access ，RDMA）和TCP卸載引擎提高了網路I/O，iSCSI大有取代FC SAN的趨勢，和傳統的使用NFS和CIFS協議應用程序不同，基於Internet的程序通常是使用HTTP/HTTPS訪問地理分散的存儲。
我們已經使用POSIX API訪問文件系統的歷史已經長達30年，它是一個標准，但它也是弱點，是它遏制了創新，應用程序開發人員需要新的API標准執行對象存儲和key-value存儲。
諸如卷管理，全局命名空間，壓縮，加密，克隆/快照，重復數據刪除，RAID和遠程站點復制技術都應該由文件系統實現，由於歷史原因，這些功能都是在文件系統之外實現的，因此效率低下，復雜程度較高。
文件系統不應局限於在內核空間實現
關於內核空間和用戶空間性能問題的爭論應該歇歇了，上下文切換不再是什麼大問題，因為堆棧和網路中的其它部分造成的延遲才是真正的限制因素。在用戶空間中實現的新興文件系統應該受到重視。原來大家都認為底層組件，如磁碟設備驅動和磁碟文件系統應該駐留在內核中，但現在是時候讓大部分代碼在用戶空間中實現了。例如，Hadoop和GlusterFS就是完全在用戶空間中實現的。有關Hadoop的使用可參考51CTO之前發布的使用Linux 和Hadoop進行分布式計算一文。
變革和創新
1、適合於直接附加存儲（Direct Attached Storag，DAS）的文件系統
Linux文件系統Ext3是迄今為止最穩定的Linux文件系統，但現在是時候考慮Ext4（內核2.6.31或更高才支持）了，因為它解決了諸如文件和目錄大小限制的局限性，基於延伸區（extent）分配機制能夠有效地存儲大文件，更快地執行fsck（文件系統檢查）和日誌校驗和檢查，但Ext4隻是一個暫時的解決方案。
Linux社區希望Linux支持ZFS和Btrfs（B-tree文件系統），Btrfs將類似ZFS的功能引入到Linux內核中，Btrfs不僅僅是一個磁碟文件系統，它還具有軟RAID管理，卷管理，克隆/快照和壓縮功能，它支持跨多塊磁碟動態增大或收縮卷。
Btrfs RAID可以從一個故障陣列快速重構，其速度比硬體RAID控制器還快，因為它只重新條帶化使用了的數據塊，執行快照需要的空間和時間也更少，Btrfs的目標是取代Linux默認文件系統Ext4，來自Oracle的Chris Mason是該項目的主要貢獻者。
2、網路文件系統（NFS）
NFS於1995年推出，NFS v3是目前應用最廣泛的NAS協議，所有伺服器操作系統（除微軟Windows外）和存儲廠商都支持它，2000年發布的NFS v4在許多方面都做了改進，但沒有取得廣泛應用。NFS v4.1（pNFS）應該會出現轉機，因為它帶來了人們迫切需要的並行I/O架構，並為低延遲高帶寬I/O增加了RDMA支持。
這是NFS的一個重大進步，允許用戶轉移到可橫向擴展的架構，但它的設計是基於一個統一的元數據伺服器，這可能會限制擴展能力，並且存在一個潛在的單點故障，因此要想成為主流應用尚需時日，這期間需要解決NFS v3/4的擴展性問題，通過在集群文件系統上集成NFS，利用虛擬IP和循環DNS技術，可以構建一個可擴展的NAS解決方案。
3、集群/分布式文件系統
集群或分布式文件系統允許跨多個存儲伺服器使用一個全局命名空間，並實現了智能分散I/O和數據，以克服NFS（和CIFS）的擴展性限制，每個廠商都有他們自己的內部協議，但對於應用程序是透明的，因為共享存儲是通過標準的POSIX介面訪問的。
這樣的文件系統有Oracle Lustre，IBM GPFS和GlusterFS，它們之間的主要區別是處理元數據的方式有所不同，Lustre使用的是中央控制元數據伺服器，GPFS使用的是分布式元數據伺服器模型，GlusterFS使用的是無元數據模型。在選擇集群文件系統時，關鍵就是要了解元數據的處理方式。
另一個不同點是Lustre和GPFS是在內核中實現的，GlusterFS是在用戶空間實現的，這些集群文件系統都實現了前面談到的關鍵存儲堆棧功能，它們都可以擴展到PB級存儲容量。
4、分布式對象存儲/key-value存儲
許多現代應用程序需要簡單對象API訪問諸如get/put，get/put屬性和lock/unlock這樣成對出現的數據，對象訪問允許將內存和磁碟看作是通過序列化的信息持久化塊。
大多數數據處理功能（如XML解析，哈希表，全文檢索等）都開始轉向更高級的應用程序庫，對象存儲API也適合構建NoSQL規模的資料庫。很多Web 2.0應用正在逐漸轉向Cassendra等NoSQL式存儲，比如前日的Digg和Twitter。
目前對象存儲還沒有標准化，雖然WebDAV，Hadoop，Apache Cassandra和Amazon S3都遵循這個模型，如果是構建一個新應用程序，它們也是很好的選擇，但在未標准化之前，POSIX API將是必需的。（參考閱讀：詳解NoSQL資料庫Apache Cassandra的配置）
小結

❹ 如何利用Linux C動態載入Fortran的so文件程序編譯通過，但在程序運行時，報：Segmentation fault

1、你沒有判斷 handler 是否為 NULL ，也許你 dlopen就失敗了。
2、 你沒有判斷 testint 是否為 NULL， 如果 handler 是 NULL， 或者在庫中沒有找到 "testint_"，都會返回 NULL

我不懂 fortran，不過很顯然你在 fortran中的函數名是 testint， 為什麼在dlsym的時候加了下劃線？

❺ DB2 pureScale安裝錯誤問題

你好，請問解決了么。怎麼解決的，我也遇到了同樣的問題

❻ 當前主流分布式文件系統有哪些各有什麼優缺點

目前幾個主流的分布式文件系統除GPFS外，還有PVFS、Lustre、PanFS、GoogleFS等。
1.PVFS(Parallel
Virtual
File
System)項目是Clemson大學為了運行Linux集群而創建的一個開源項目,目前PVFS還存在以下不足：
1）單一管理節點:只有一個管理節點來管理元數據，當集群系統達到一定的規模之後，管理節點將可能出現過度繁忙的情況，這時管理節點將成為系統瓶頸;
2）對數據的存儲缺乏容錯機制:當某一I/O節點無法工作時，數據將出現不可用的情況;
3）靜態配置:對PVFS的配置只能在啟動前進行，一旦系統運行則不可再更改原先的配置。
2.Lustre文件系統是一個基於對象存儲的分布式文件系統，此項目於1999年在Carnegie
Mellon
University啟動，Lustre也是一個開源項目。它只有兩個元數據管理節點,同PVFS類似,當系統達到一定的規模之後，管理節點會成為Lustre系統中的瓶頸。
3.PanFS(Panasas
File
System)是Panasas公司用於管理自己的集群存儲系統的分布式文件系統。
4.GoogleFS(Google
File
System)是Google公司為了滿足公司內部的數據處理需要而設計的一套分布式文件系統。

❼ 雲存儲怎麼更好實現容錯

雲存儲系統具有良好的可擴展性、容錯性，以及內部實現對用戶透明等特性，這一切都離不開分布式文件系統的支撐。現有的雲存儲分布式文件系統包括GFS、HDFS、Lustre、FastDFS、PVFS、GPFS、PFS、Ceph和TFS等。它們的許多設計理念類似，同時也各有特色。下面對現有的分布式文件系統進行詳細介紹。

1 Google File System (GFS)

GFS是一個可擴展的分布式文件系統，其主要用於處理大的分布式數據密集型應用。GFS的一大特色就是其運行於大量普通的廉價硬體上，通過GFS文件系統提供容錯功能，並給大量用戶提供可處理海量數據的高性能服務。和傳統標准相比，GFS文件規模巨大，其主要用來處理大文件。此外，GFS大多通過直接追加新數據來改變文件，而非覆蓋現有數據，一旦數據寫入完成，文件就僅支持讀操作。

2 Lustre文件系統

Lustre文件系統是一種典型的基於對象存儲技術 的分布式文件系統， 目前，該文件系統已經廣泛用於國外許多高性能計算機構，如美國能源部、Sandia國家實驗室、Pacific Northwest國家實驗室等。Top500機器中有多台均採用的是Lustre文件系統。

Lustre文件系統的大文件性能良好 ，其通過基於對象的數據存儲格式，將同一數據文件分為若干個對象分別存儲於不同的對象存儲設備。大文件I/O操作被分配到不同的對象存儲設備上並行實施，從而實現很大的聚合帶寬。此外，由於Lustre融合了傳統分布式文件系統的特色和傳統共享存儲文件系統的設計理念，因此其具有更加有效的數據管理機制、全局數據共享、基於對象存儲、存儲智能化，以及可快速部署等一系列優點。盡管如此，由於Lustre採用分布式存儲結構將元數據和數據文件分開存儲，訪問數據之前需要先訪問元數據伺服器，這一過程增加了網路開銷，從而使得Lustre的小文件I/O操作性能較差。

3 FastDFS文件系統

FastDFS是一個輕量級分布式文件系統，其體系架構如圖3所示，整個文件系統由客戶端(Cli—ent)、跟蹤器(Tracker)和存儲節點(Storage)三部分組成。系統服務端有Tracker和Storage兩個角色，Tracker用來負責作業的調度和負載均衡，Storage則用於存儲文件，並負責管理文件。為支持大容量的數據存儲，Storage採用分卷或分組的數據組織方式;存儲系統可由一個或多個卷組成，一個卷可以由一台或多台存儲伺服器構建。同一個卷下的多台存儲伺服器中的數據文件都是相同的，卷與卷之間的文件則相互獨立，通過這種數據組織方式，可以很好地實現數據冗餘備份以及系統負載均衡的目的。

圖 FastDFS文件系統體系結構示意圖

4 Parallel Virtual File System (PVFS)

由Clemson大學設計並成功開發的PVFS是一種構建在Linux操作系統之上的開源並行虛擬文件系統。PVFS基於傳統的C/S架構進行設計，整個文件系統由管理結點、計算結點和I/0結點三大部分組成，管理結點負責處理文件的元數據，計算節點用來執行各種計算任務，I/0結點則主要負責數據文件的存儲和讀寫，並負責給計算結點提供所需的數據。在整個集群系統范圍內，PVFS使用一致的全局命名空間，另外，PVFS應用對象存儲的概念，將數據文件條塊化為多個對象並分別存儲到多個存儲結點上。由於在網路通信方面，PVFS只支持TCP網路通信協議，這使得其靈活性不足;此外，由於PVFS應用對象存儲的概念進行數據文件的存儲，其在處理小文件時性能也不太理想。

5 General Parallel File System (GPFS)

GPFS的前身是Tiger Shark多媒體文件系統，其是IBM專為Linux集群系統設計的並行共享文件系統。在系統結構上，GPFS主要借鑒了IBM Linux集群系統中的虛擬共享磁碟技術，計算節點可以通過使用交換網路來同時並行訪問系統中多個磁碟中的數據，並依賴這一訪問方式來實現較高的I/O帶寬。GPFS的主要特點包括：通過循環的方式將大文件存儲在不同的磁碟上，同時通過合並操作來處理小文件的讀寫，使用動態選舉的元數據結點來管理元數據;此外，GPFS還具有基於日誌的失效節點的自動恢復策略以及集中式的數據鎖機制。

6 Parallel File System (PFS)

Sun公司的PFS分布式文件系統可以很好地支持高性能和可擴展的I/O操作，其主要設計思想是將文件分布在多個磁碟和伺服器上，並將存放文件的多個設備邏輯上看成一個虛擬磁碟來統一管理。很顯然，PFS可以同時跨越多個存儲系統，可以將整個PFS中的所有存儲設備都看成是這個虛擬磁碟的一部分;當有多個節點同時訪問同一文件時，PFS可以並行地為這些節點提供訪問服務。PFS分布式文件系統構建於Solaris操作系統之上，主要包括宿主節點、計算節點、I/O從屬節點和I/O主機節點。宿主節點是PFS提供給其它系統的人口，只有成功登錄到宿主節點的用戶才是合法的，才可以訪問PFS內部的數據文件。計算節點主要用來管理PFS系統的通信和內存資源。L/O主機節點則主要負責文件系統的目錄管理和存儲塊管理，同時為存儲數據文件提供讀寫服務。I/O從屬節點僅用來處理磁碟的讀寫操作和空白塊的分配工作。

7 Ceph雲存儲文件系統

Ceph是Califomia大學Santa Cruz分校的Sage Weil設計的一種雲存儲分布式文件系統。Ceph雲存儲文件系統的主要目標是設計基於POSIX的無節點故障分布式文件系統，並且數據文件具有容錯和無縫復制功能。Ceph文件系統具有三大特點，首先，其使用多個元數據伺服器來構建系統的命名空間，這顯著強化了元數據伺服器的並發訪問功能;其次，在元數據伺服器上，Ceph文件系統採用了動態的子樹劃分技術，並支持元數據伺服器的負載遷移，可以很好地實現元數據的負載均衡;最後，Ceph文件系統提供基於對象存儲設備的對象文件系統，並將數據文件作為一個存儲對象來對待，這有效地提高了數據文件的讀寫效率。

8 Taobao File System (TFS)

Taobao file system (TFS)是由淘寶開發的雲存儲文件系統，其主要面向海量非結構化數據存儲問題提供服務。TFS部署在普通的Linux集群上，為淘寶網提供高可靠、高並發的大量小文件數據存儲服務。TFS採用扁平化的數據組織結構將文件名映射到文件的物理地址，簡化了文件訪問流程，一定程度上優化了系統讀寫性能。

一個TFS集群由兩個NameServer節點和多個DataServer節點組成，TFS的服務程序都是作為一個用戶級的程序運行在普通Linux機器上。TFS將眾多的小文件合並成大文件，並稱這個大文件為Block，Block存儲在DataServer上，每個Block在TFS系統內均擁有唯一的Id號。NameServer負責維護block與DataServer之間的映射關系。NameServer採用HA結構，即雙機互為熱備份，來實現容災功能，兩台NameServer同時運行，其中一台為主節點，另外一台作為備用節點。當主NameServer節點出現故障後，迅速將備份NameServer切換為主節點並對外提供服務。

❽ linux怎麼查看gpfs版本

GPFS
安裝

3.1
、建立集群

3.1.1
、創建集群文件系統
node1
mmcrcluster -n /tmp/gpfs_node -p node1 -s node2 -r /usr/bin/ssh -R /usr/bin/scp
命令顯示：

mmcrcluster: Processing node 1
mmcrcluster: Processing node2
mmcrcluster: Command successfully completed
mmcrcluster: Propagating the cluster configuration data to all affected nodes.

This is an
asynchronous process.
3.1.2
、顯示集群文件系統

mmlscluster
GPFS cluster information
========================

GPFS cluster name:
node1

GPFS cluster id:
13882348004399855353

GPFS UID domain:
node1

Remote shell command:
/usr/bin/ssh

Remote file command:
/usr/bin/scp

GPFS cluster configuration servers:
-----------------------------------

Primary server:
node1

Secondary server:

Node
Daemon node name
IP address
Admin node name
Designation

1
node1

10.3.164.24
node1

quorum-manager
2
node2

10.3.164.25
node2

quorum-manager

3.2
、創建
NSD
3.2.
、使用
mmcrnsd
創建
NSD
mmcrnsd -F /tmp/gpfs_disk -v yes
命令顯示
:
mmcrnsd: Processing disk hdb
mmcrnsd: Propagating the cluster configuration data to all
affected nodes.
This is an asynchronous process.
3.2.2
、顯示
NSD
mmlsnsd
–
m
Disk name
NSD volume ID
Device
Node name
Remarks

-------------------------------------------------------------------------------
gpfs1nsd
C0A801F54A9B3732
/dev/hdb
node1
primary node
gpfs1nsd
C0A801F54A9B3732
/dev/hdb
node2
3.3
、啟動
GPFS
文件系統

mmstartup
–
a
Mon Aug 31 10:37:48 CST 2009: mmstartup: Starting GPFS ...
3.4
、查看
GPFS
文件系統狀態

mmgetstate -a

Node number
Node name
GPFS state

------------------------------------------

1

node1
active

2

node2
active
3.5
、建立文件系統

#mkdir /gpfs
建立掛載點

#./bin/mmcrfs /gpfs gpfsdev -F /tmp/gpfs_disk -A yes -B 1024K -v yes
命令顯示：

The following disks of gpfsdev will be formatted on node node1:
gpfs1nsd: size 2241856 KB
Formatting file system ...

Disks up to size 2 GB can be added to storage pool 'system'.
Creating Inode File
Creating Allocation Maps
Clearing Inode Allocation Map
Clearing Block Allocation Map
Completed creation of file system /dev/gpfsdev.
mmcrfs: Propagating the cluster configuration data to all

affected nodes.
This is an asynchronous process.
3.6
、檢查文件系統

#cat /etc/fstab
………………………

/dev/gpfsdev
/gpfs
gpfs
rw,mtime,atime,dev=gpfsdev,autostart 0 0
Df-g
/dev/hdb

/gpfs

❾ linux與unix有哪些相同或不同點

不同點如下：

1、版本不同

Linux是一個Unix克隆版，由Linus Torvalds從頭開始編寫，並得到了網路上一個鬆散的黑客團隊的幫助。它旨在實現POSIX合規性。Linux只是一個內核。所有Linux發行版都包括GUI系統+。

2、文件系統不同

Linux默認支持並使用ext3或ext4文件系統。UNIX附帶了各種文件系統，如jfs，gpfs（AIX），jfs，gpfs（HP-UX），jfs，gpfs（Solaris）。

(9)gpfsforlinux擴展閱讀：

系統管理工具

1、UNIX在HP-UX上附帶了自己的工具，例如SAM。

2、Suse Linux附帶Yast

3、Redhat Linux附帶了自己的gui工具redhat-config- *。

但是，編輯文本配置文件和鍵入命令是UNIX和Linux下sys管理工作的最常用選項。