計算機集群編譯
1. 如何對區域網內的多台linux進行集群化管理
它非常適合用來快速配置一個集群中的所有運行相同服務和具備相同配置的計算機節點。現在有大量的開源管理工具，都可以實現這樣的管理，比如dsh、SUSE Manager等。下面是用ClusterSSH管理多台Linux伺服器的具體過程。
如果你是一名Linux系統管理員，那你每天一定會和許許多多的機器打交道，因為你要定期監測和維護這些機器，如一批Web伺服器，如果你要同時在多台機器上敲入相同的命令，你可能會通過SSH登錄，然後逐台敲入，如果使用ClusterSSH，可以為你節省不少類似的工作時間。
ClusterSSH是用Tk/Perl包裝XTerm和SSH後形成的新工具，就其本身而言，它可以運行在任何兼容POSIX的操作系統上，我曾經在Linux，Solaris和Mac OS X上運行過它，它需要Perl庫Tk（在Debian或Ubuntu上就是perl-tk）和X11::Protocol（在Debian或Ubuntu上就是libx11-protocol-perl），此外，xterm和OpenSSH是必不可少的。
安裝在Debian或Ubuntu上安裝ClusterSSH是相當簡單的，只需要敲入sudo apt-get install clusterssh就可以安裝好，至於依賴包你也不必擔心，一切都會為你裝好的，它也提供了適合Fedora的rpm包，在FreeBSD上可通過port系統安裝，還為Mac OS X准備了MacPort版本，因此你可以在你的蘋果電腦上安裝ClusterSSH，當然，如果你是極客，也可以下載源代碼自己編譯。
配置可以通過ClusterSSH的全局配置文件/etc/clusters，或用戶home目錄下的。csshrc文件來配置它，我喜歡用戶級的配置方式，這樣同一個系統中的不同用戶可以根據自己的喜好進行配置，ClusterSSH定義了一個「cluster」機器組，你可以通過一個界面來控制這個組中的所有機器，在配置文件的頂端「clusters」部分，你可以詳盡地列出你的集群，然後用獨立的段落來描述每個集群。
例如，假設我有兩個集群，每個集群由兩台機器組成，「Cluster1」由「Test1」和「Test2」兩台機器組成，「Cluster2」由「Test3」和「Test4」兩台機器組成，~.csshrc（或/etc/clusters）配置文件的內容看起來應該是：
clusters = cluster1 cluster2
cluster1 = test1 test2
cluster2 = test3 test4你也可以創建中間集群（包含其它集群的集群），如果你想創建一個名叫「all」的集群包含所有的機器，有兩種實現手段，首先，你可以創建一個包含所有機器的集群，如：
clusters = cluster1 cluster2 all
cluster1 = test1 test2
cluster2 = test3 test4
all = test1 test2 test3 test4但我更喜歡的方法是使用一個包含其它集群的中間集群：
clusters = cluster1 cluster2 allcluster1 = test1 test2
2. 不同配置的幾台PC電腦，可以組成Linux集群或者windows集群嗎
可以，集群不要求配置一樣~
集群是一組相互獨立的、通過高速網路互聯的計算機，它們構成了一個組，並以單一系統的模式加以管理。一個客戶與集群相互作用時，集群像是一個獨立的伺服器。集群配置是用於提高可用性和可縮放性。--網路
集群下不同節點去實現對應的功能，可以對應功能去搭配合適的硬體，所以不會要求配置一樣。
3. ubuntu系統下怎麼編譯內核文件
一、下載源代碼和編譯軟體的准備
安裝有關編譯程序。安裝make ,gcc, make-kpkg,運行menuconfig等等和編譯內核相關的工具。安裝不了，請檢查/etc/apt/sources.list 文件。有關命令：代碼:$sudo apt-get install build-essential kernel-package libncurses5-dev
二、解壓源代碼注意，網上很多教程上說應該解壓到 /usr/src,純屬以訛傳訛，linux掌門人linus說解壓到任何目錄上都可以。當然，linus的說法是正確的。我放在自己的主目錄下的src目錄。如果你下載源代碼是放到自己的主目錄下或者運行上面的wget下載的，那麼運行下列命令：代碼:$ cd ~$ mkdir src && tar jfx linux-2.6.25.10.tar.bz2 -C src/現在，源代碼就在 ~/src/linux-2.6.25.10進入源代碼的目錄，准備下一步的工作。後面都在這個目錄裡面進行。代碼:$ cd ~/src/linux-2.6.25.10
三、開始編譯前的准備工作。首先，清理以前編譯時留下的臨時文件。如果是剛剛解開的包，不需要執行這步。如果是第二次或者是第n次編譯，那麼一定要執行。相關命令如下：代碼:$ sudo make mrproper網上很多教程上說把現在使用的內核的config拷貝過來參考，據實驗，是不需要的，ubuntu還有debian會自動做這步。不過這條命令倒是可以學習一下。當然你可以將以前的配置拷貝過來。命令：代碼:cp /boot/config-`uname -r` ./.config
四、開始配置內核選項。相關命令：代碼:$sudo make menuconfig配置用到的鍵只有幾個，esc退出菜單;空格改變選項狀態;游標鍵上下左右移動,回車選定。選項意義：M是編譯成可以隨時加入的模塊，*是編譯進入內核，空就是不要。配置選項非常多，具體配置可以參考金步國先生翻譯的資料：Linux 2.6.19.x 內核編譯配置選項。 請大家遵循一個原則，如果你自己使用的內核已經選用了某個選項，如果你沒用充分的理由，不要隨便改動。這樣雖然內核不那麼精簡，但是不容易出現問題。我們可以精簡的部分是硬體模塊部分，對於自己沒有的硬體要毫不猶豫的清除。如果你很執著，或者你有潔癖，你也可以一項項對過去，按照金步國先生的資料描述去選擇基本上沒有問題。
五、必須強調的幾個選項:1、
在「General setup」裡面的「Prompt for development and/or incomplete
code/drivers」金步國認為是不需要。但是如果你的硬體比較新，那幾乎是必須選的，這樣，我們才可以找到4965無線網卡，alsa聲音驅動等
等。Kernel log buffer size 我選15，雙核。如果你用ia64，要選16。Control Group support 集群支持？可以不要Choose SLAB allocator (SLUB (Unqueued Allocator)) 內存管理模式slab和slub選擇slub。
2、在「Block layer」里，假如沒有2TB的硬碟，就去掉：Support for Large Block Devices 。Support for Large Single Files 也不需要，誰有2TB的文件？
3、Processor type and features中是關於cpu的，要認真選。Symmetric multi-processing support是打開多核的開關，我的cpu是雙核的，選中。Processor family (Core 2/newer Xeon) 我的是Core 2/newer Xeon。找到自己的cpu後，把Generic x86 support選項取消。Subarchitecture Type 選(PC-compatible)Maximum number of CPUs 輸入自己的核心數目，我輸入2。SMT (Hyperthreading) scheler support說的是超線程技術，P4有支持的，我的t8100不支持，目前大部分市場上的家用cpu都不支持。High Memory Support (4GB) 1G以下選1G；我是3G，選4G；4G以上的選16G在「 Timer frequency 」里，默認是250Hz，較新的cpu都可以選擇了1000Hz，性能更好。
4、Power management options中把APM (Advanced Power Management) BIOS support關閉。現在的電腦都用acpi了。CPU Frequency scaling 是筆記本cpu節電技術Default CPUFreq governor (conservative) cpu節電模式有四個，筆記本默認選conservative比較好。ACPI Processor P-States driver 必須選，不然CPU Frequency就不能用。後面的可選自己硬體相關的，我選的是Intel Enhanced SpeedStep和 Intel Speedstep on ICH-M chipsets，其他的統統消滅。
5、Bus options的選擇：Bus options (PCI, PCMCIA, EISA, MCA, ISA)PCI support PCI Express support 現在新買的機器基本上都是PCI Express了ISA support 較新的新機器沒有ISA設備，可以去掉MCA support 去掉NatSemi SCx200 support 去掉PCI Hotplug Support Support for PCI Hotplug (EXPERIMENTAL) 如果沒有PCI熱插拔設備，去掉這里的選項可以考慮全部編譯進內核，而不是以模塊形式存在。
6、Device Drivers是重點，由於linux不但面向個人工作站，更多的是面向伺服器的應用，所以可以把自己機器上沒有的硬體全部去掉，而不用面面俱到。但是通用型的選項要慎重。比如在網卡的部分，除了我的千兆網卡 Broadcom Tigon3 support和4965無線網卡Intel Wireless WiFi 4965AGN，其餘的硬體支持統統去掉。再比如音效卡部分，我的是hd音效卡，我只是在PCI devices中，選intel hd 音效卡，再選Build IDT/Sigmatel HD-audio codec support，除此之外的硬體支持全部去掉。
音效卡還有一個細節，在ubuntu7.10裡面， 需要在/etc/modprobe.d/alsa-base後面添加options
snd-hda-intel probe_mask=1
model=3stack，這樣我的筆記本喇叭才可以發聲，不然只有外接耳機或者音箱。這次編譯以後，這個動作就不必了，但是兩個耳機插口只有一個可以用
了。再比如我的電腦中沒有agp，就可以直接把agp相關的選項全部取消。要注意的：ATA/ATAPI/MFM/RLL support Include IDE/ATA-2 DISK support 如果你的/boot是放在IDE硬碟上，那麼這里一定要選＊，選M都不行。否則啟動時會出現「waiting for root file system」的提示而停滯不前。 SCSI emulation support 要用刻錄機，必須選。SCSI device support 現在都是SATA硬碟，一定要選＊ SCSI disk support 如果你的/boot放在SATA硬碟上，一定要選＊。
SCSI CDROM support 雖然康寶刻錄機是ide介面的，但是必須把它當成scsi介面的，這是老問題了。用刻錄機，必須選。
Graphics supportSupport for frame buffer devices 選中，進入選擇 VESA VGA graphics support 選上，不然字元界面啟動會有問題，後面的顯卡選擇：由於我的顯卡是nvidia 8400gs，要自己安裝nvidia公司的驅動，所以一個都沒有選。這樣導致ubuntu開機動畫會出問題，我索性在grub中的splash字元全部刪除，把開機動畫關閉。字元界面很正常。 Console display driver support 有人開機後字元控制台錯誤，就是這部分選項沒有選，出問題了。 Framebuffer Console support 需要打開。
Bootup logo 開機圖標，會在自檢的畫面上加上個性圖標。需要在grub上添加「vga＝」的選項 簡稱fuse。是必選的，如果你要用windows分區。
CD-ROM/DVD Filesystems ISO 9660 CDROM file system support 一般選＊DOS/FAT/NT Filesystems VFAT (Windows-95) fs support 有FAT32分區就選＊吧 NTFS file system support 有NTFS分區就選＊吧 NTFS write support 如果想對 NTFS分區進行寫操作，選＊必須將啟動盤的文件系統編譯進內核，默認是編譯成模塊，這樣無法啟動系統。ubuntu採用的文件系統是ext3,請把ext2,ext3相關的必要選項都編譯進入內核。
8、Virtualization這個大類是我多花幾百元買t8100的主要原因，因為t8100支持intel vt技術使linux上的虛擬機的性能大幅度提高。這里的選項我除了amd的，其他都編譯成模塊。
9、全部設置完成，最後一項是保存設置。按照我的習慣，先在上一層目錄保存一個備份，文件名類似 ../config20080630然後再保存到當起目錄,文件名 .config退出設置程序。
六、開始編譯內核。ubuntu的工具是make-kpkg,和其他的發行版相比，步驟相對簡單。相關命令:代碼:$sudo make-kpkg clean 這條命令好像不要超級許可權，很多資料上說要，不過這不是原則問題。
$ sudo make-kpkg -initrd --initrd --append-to-version=dell1400 kernel_image kernel-headers上述命令中的dell1400可以用自己喜歡的字元代替，最後的字元一定是數字.輸完上述命令回車之前，建議大家把瀏覽器還有別的運用程序都關掉，機器開始的工作比較艱苦。
我的機器大概十幾分鍾。
七、安裝內核編譯完成就是安裝工作。編譯好的內核在上一層目錄。包括linux-headers-...-_i386.deb和linux-image-...-i386.deb兩個文件，如果你不搞開發的話，只要安裝內核就可以，頭文件以後要用的時候再說。安裝相關命令：
代碼:$ cd ..$ sudo dpkg -i linux-image-（按tab鍵）文件名很長，如果不用tab自動補足是不可能的，tab鍵萬歲。安裝完成後和老內核比較一下大小代碼:
$ ls -l /boot/
八、重新啟動驗證新內核。代碼:$ sudo reboot
九、顯卡驅動如果你的顯卡和我一樣是nvidia顯卡，啟動之後往往無法正常進入x－window。即使能看到gdm登錄界面，效果也是很差的。那麼就要安裝nvidia驅動。用ctrl+alt+f1 進入字元命令行，輸入用戶名，密碼登錄。 ＃ps ax看看和gdm相關的進程，把這些進程全部關閉;用sudo /etc/init.d/gdm stop有可能有一個進程沒有關閉：＃kill 進程號然後安裝nvidia顯卡驅動,當然驅動要先下好，到nvidia驅動所在的目錄里，運行：＃ sh ./NVIDIA-Linux-x86-173.14.12-pkg1.run重新啟動以後就ok。要用nvidia的驅動，每次升級內核都要這么做。
十、無線網卡相關的內核選項是Networking --->Wireless --->Generic IEEE 802.11 Networking Stack (mac80211)還有4965的驅動。4965
無線網卡驅動雖然已經編入內核，但沒有firmware無法使用。需要把原來內核的firmware拷貝到新內核對應的目錄，名字和內核一致,我的內核是
linux－image-2.6.25.10dell1400，那建的目錄名就是2.6.25.10dell1400。代碼:具體命令：$ cd /lib/firmware/$ sudo mkdir 2.6.25.10dell1400把你的老內核中的4965的firmware拷貝過來。$ sudo cp 2.6.24-16-generic/* 2.6.25.10dell1400/上面的命令和下面的命令是等價的：$ cd /lib/firmware/$ sudo cp -R 2.6.24-16-generic/ 2.6.25.10dell1400/
重新啟動系統，無線網卡就正常了。
附編譯使用的機器配置：dell vostro 1400,t8100,nvidia 8400cs顯卡，內置SigmaTel STAC9228晶元的音效卡，4965無線網卡，BCM5906M千兆網卡，3G內存,160G硬碟,combo刻錄。
編譯系統版本：ubuntu 8.04桌面版.
4. 如何最快搭建LINUX伺服器集群
1.2.並行技術
這是一個非常簡單的建造四節點的小集群系統的例子，它是構建在Linux操作系統上，通過MPICH軟體包實現的，希望這個小例子能讓大家對集群系統的構建有一個最基本的了解。
2.使用MPICH構建一個四節點的集群系統
這是一個非常簡單的建造四節點的小集群系統的例子，它是構建在Linux操作系統上，通過MPICH軟體包實現的，希望這個小例子能讓大家對集群系統的構建有一個最基本的了解。
2.1 所需設備
1).4台採用Pentium II處理器的PC機，每台配
置64M內存，2GB以上的硬碟，和EIDE介面的光碟驅動器。
2).5塊100M快速乙太網卡，如SMC 9332 EtherPower 10/100(其中四塊卡用於連接集群中的結點，另外一塊用於將集群中的其中的一個節點與其它網路連接。)
3).5根足夠連接集群系統中每個節點的，使用5類非屏蔽雙絞線製作的RJ45纜線
4).1個快速乙太網(100BASE-Tx)的集線器或交換機
5).1張Linux安裝盤
2.2 構建說明
對計算機硬體不熟的人，實施以下這些構建步驟會感到吃力。如果是這樣，請找一些有經驗的專業人士尋求幫助。
1. 准備好要使用的採用Pentium II處理器的PC機。確信所有的PC機都還沒有接上電源，打開PC機的機箱，在准備與網路上的其它設備連接的PC機上安裝上兩塊快速乙太網卡，在其它的 PC機上安裝上一塊快速乙太網卡。當然別忘了要加上附加的內存。確定完成後蓋上機箱，接上電源。
2. 使用4根RJ45線纜將四台PC機連到快速乙太網的集線器或交換機上。使用剩下的1根RJ45線將額外的乙太網卡(用於與其它網路相連的那塊，這樣機構就可以用上集群)連接到機構的區域網上(假定你的機構區域網也是快速乙太網)，然後打開電源。
3. 使用LINUX安裝盤在每一台PC機上安裝。請確信在LINUX系統中安裝了C編譯器和C的LIB庫。當你配置TCP/IP時，建議你為四台PC分別指定為192.168.1.1、192.168.1.2、192.168.1.3、192.168.1.4。第一台PC為你的伺服器節點(擁有兩塊網卡的那台)。在這個伺服器節點上的那塊與機構區域網相連的網卡，你應該為其指定一個與機構區域網吻合的IP地址。
4.當所有PC都裝好Linux系統後，編輯每台機器的/etc/hosts文件，讓其包含以下幾行：
192.168.1.1 node1 server
192.168.1.2 node2
192.168.1.3 node3
192.168.1.4 node4
編輯每台機器的/etc/hosts.equiv文件，使其包含以下幾行：
node1
node2
node3
node4
$p#
以下的這些配置是為了讓其能使用MPICH』s p4策略去執行分布式的並行處理應用。
1. 在伺服器節點
，建一個/mirror目錄，並將其配置成為NFS伺服器，並在/etc/exports文件中增加一行：
/mirror node1(rw) node2(rw) node3(rw) node4(rw)
2. 在其他節點上，也建一個/mirror目錄，關在/etc/fstab文件中增加一行：
server:/mirror /mirror nfs rw,bg,soft 0 0
3. /mirror這個目錄從伺服器上輸出，裝載在各個客戶端，以便在各個節點間進行軟體任務的分發。
4. 在伺服器節點上，安裝MPICH。MPICH的文檔可在
5.任何一個集群用戶(你必須在每一個節點新建一個相同的用戶)，必須在/mirror目錄下建一個屬於它的子目錄，如 /mirror/username，用來存放MPI程序和共享數據文件。這種情況，用戶僅僅需要在伺服器節點上編譯MPI程序，然後將編譯後的程序拷貝到在/mirror目錄下屬於它的的子目錄中，然後從他在/mirror目錄下屬於它的的子目錄下使用p4 MPI策略運行MPI程序。
2.3 MPICH安裝指南
1.如果你有gunzip，就d下載mpich.tar.gz，要不然就下載mpich.tar.Z。你可以到http://www.mcs.anl.gov/mpi/mpich/downloa下載，也可以使用匿名ftp到ftp.mcs.anl.gov的pub/mpi目錄拿。(如果你覺得這個東西太大，你可以到pub/mpi/mpisplit中取分隔成塊的幾個小包，然後用cat命令將它們合並)
2.解壓：gunzip ;c mpich.tar.gz tar xovf-(或zcat mpich.tar.Ztar xovf-)
3.進入mpich目錄
4.執行：./configure為MPICH選擇一套適合你的實際軟硬體環境的參數組，如果你對這些默認選擇的參數不滿意，可以自己進行配置(具體參見MPICH的配置文檔)。最好選擇一個指定的目錄來安裝和配置MPICH，例如：
./configure -prefix=/usr/local/mpich-1.2.0
5.執行：make >&make.log 這會花一段較長的時間，不同的硬體環境花的時間也就不同，可能從10分鍾到1個小時，甚至更多。
6.(可選)在工作站網路，或是一台單獨的工作站，編輯mpich/util/machines/machines.xxx(xxx是MPICH對你機器體系結構取的名稱，你能很容易的認出來)以反映你工作站的當地主機名。你完全可以跳過這一步。在集群中，這一步不需要。
7.(可選)編譯、運行一個簡單的測試程序：
cd examples/basic
make cpi
ln ;s ../../bin/mpirun mpirun
./mpirun ;np 4 cpi
此時，你就在你的系統上運行了一個MPI程序。
8.(可選)構建MPICH其餘的環境，為ch_p4策略使
用安全的服務會使得任何啟動速度加快，你可以執行以下命令構建：
make serv_p4
(serv_p4是一個較新的P4安全服務的版本，它包含在MPICH 1.2.0版中)，nupshot程序是upshot程序的一個更快版本，但他需要tk 3.6版的源代碼。如果你有這個包，你就用以下命令可以構建它：
make nupshot
9.(可選)如果你想將MPICH安裝到一個公用的地方讓其它人使用它，你可以執行：
make install 或 bin/mpiinstall
你可以使用-prefix選項指定MPICH安裝目錄。安裝後將生成include、lib、bin、sbin、www和man目錄以及一個小小的示例目錄，
到此你可以通告所有的用戶如何編譯、執行一個MPI程序。
5. Gitlab+Jenkins+Docker+Harbor+K8s集群搭建CICD平台
上帝藉由各種途徑使人變得孤獨，好讓我們可以走向自己。 ——赫爾曼·黑塞《德米安》
CI即為 持續集成(Continue Integration,簡稱CI) ，用通俗的話講，就是 持續的整合版本庫代碼編譯後製作應用鏡像 。建立有效的持續集成環境可以減少開發過程中一些不必要的問題、 提高代碼質量、快速迭代 等,
Jenkins :基於Java開發的一種持續集成工具,用於監控持續重復的工作,旨在提供一個開放易用的軟體平台,使軟體的持續集成變成可能。
Bamboo : 是一個企業級商用軟體,可以部署在大規模生產環境中。
CD即持續交付Continuous Delivery和持續部署Continuous Deployment，用通俗的話說，即可以持續的部署到生產環境給客戶使用，這里分為兩個階段，持續交付我理解為滿足上線條件的過程，但是沒有上線，持續部署，即為上線應用的過程
關於 CD環境 ，我們使用以前搭建好的 K8s集群 ，K8s集群可以實現應用的 健康 檢測，動態擴容，滾動更新 等優點，關於K8s集群的搭建，小夥伴可以看看我的其他文章
拉取鏡像，啟動並設置開機自啟
配置docker加速器
GitLab 不多介紹。一個基於Git的版本控制平台，,提供了Git倉庫管理、代碼審查、問題跟蹤、活動反饋和wiki，當然同時也提供了
切記:這里的埠要設置成80，要不push項目會提示沒有報錯，如果宿主機埠被佔用，需要把這個埠騰出來
external_url 'http://192.168.26.55』
gitlab_rails[『gitlab_ssh_host』] = 餘.168.26.55』
gitlab_rails[gitlab_shell_ssh_port] = 222
修改完配置文件之後。直接啟動容器
相關的git命令
下面我們要配置私有的docker鏡像倉庫，用到的機器為：
這里倉庫我們選擇 harbor ，因為有web頁面，當然也可以使用 registry
首先需要設置selinux、防火牆
安裝並啟動docker並安裝docker-compose，關於docker-compose，這里不用了解太多，一個輕量的docker編排工具
解壓harbor 安裝包：harbor-offline-installer-v2.0.6.tgz，導入相關鏡像
修改配置文件
harbor.yml：設置IP和用戶名密碼
./prepare && ./install.sh
查看相關的鏡像
訪問測試
這里因為我們要在192.168.26.55(CI伺服器)上push鏡像到192.168.26.56(私倉)，所有需要修改CI伺服器上的Docker配置。添加倉庫地址
修改後的配置文件
載入使其生效
CI機器簡單測試一下
push一個鏡像，可以在私倉的web頁面查看
鏡像jenkins拉取
這里為什麼要改成 1000，是因為容器里是以 jenkins 用戶的身份去讀寫數據，而在容器里jenkins 的 uid 是 1000，
更換國內清華大學鏡像,Jenkins下載插件特別慢，更換國內的清華源的鏡像地址會快不少
"http://www.google.com/" 替換為 "http://www..com/"
替換後查看
重啟docker，獲取登錄密匙
需要修改jenkins綁定的docker的啟動參數 ， ExecStart=/usr/bin/dockerd -H tcp://0.0.0.0:2376 -H fd:// --containerd=/run/containerd/containerd.sock
修改鏡像庫啟動參數後需要重啟docker
後面 gitlab 要和 jenkins 進行聯動，所以必須要需要對 jenkins 的安全做一些設置，依次點擊 系統管理-全局安全配置-授權策略，勾選"匿名用戶具有可讀許可權"
添加 JVM 運行參數 -Dhudson.security.csrf..DISABLE_CSRF_PROTECTION=true 運行跨站請求訪問
這里的話我們要通過jenkins上的kubectl客戶端連接k8s,所以我們需要安裝一個k8s的客戶端kubectl，下載k8s客戶端
然後拷貝kubeconfig 證書,k8s集群中查看證書位置,這里的證書是之前創建好的,小夥伴可以看看我之前的文章
命令測試沒有問題
我們要部署 Nginx 來運行 hexo 博客系統， hexo 編譯完後為一堆靜態文件，所以我們需要創建一個 svc 和一個 deploy ，使用 SVC 提供服務，使用 deploy 提供服務能力,使用 Nginx+hexo的靜態文件 構成的鏡像
這里我們先用一個Nginx鏡像來代替hexo博客的鏡像
查看deployments和pod
訪問測試沒有問題，之後我們配置好jenkins上的觸發器，直接替換就OK
我們通過 kubectl set 命令更新 deploy 的鏡像時，獲取的鏡像是通過私倉獲取的，所以需要在啟動參數添加私倉地址
這里所有的節點都需要設置後重啟docker
訪問jenkins，接下來才是重點，我們要的jenkins上配置整個CICD流程，從而實現自動化
下面我們編譯一下hexo，生成public的一個文件夾,然後上傳gitlab
同時需要編寫Dockerfile文件來創建鏡像
6. 如何搭建android編譯集群
編譯配置
編譯前
（不建議寫到環境變數中）
7. 如何配置超級計算機
把各種部件連成一台完整的超級電腦的方法如下：
1.首先要確定硬體部件和所需要的資源
需要一個頭節點（head node），至少一打的計算節點（compute node），一台乙太網交換機，一個電源分配單元（power distribution unit）和一個伺服器機架。計算一下電力消耗，冷卻需求和佔地需求。同樣，你需要確定你的私有網路的IP地址段，節點的命名，預計使用的軟體包以及搭建 服務集群所用的技術（後面會有更多解釋）。
2.建立計算節點
需要自己組裝計算節點，或者你也可以使用預配置的伺服器。
●選擇一款能夠最大化空間、冷卻和能源消耗效率的機架式伺服器；
●或者，可以使用一打左右閑置的過時伺服器——它們集合在一起工作的性能要比它們獨立運行時的總和還多，而且還能省你一大筆錢！整個系統的處理器、網路適配器、主板應該是同一型號的，這樣才能達到最佳運行效能。當然了，還要給每個節點配內存和硬碟，並且至少給頭節點配一台光碟機。
3.將伺服器裝在機架上
安裝的時候從下面開始，這樣可以避免機架頭重腳輕。你可能會需要朋友的幫助才能完成這件事——這么多的伺服器將非常的重，把它們放到機架的滑軌上會非常困難。
4.在機架頂端安裝乙太網交換機
現在來配置交換機：允許9000位元組的大的幀，將IP地址設置為你在第一步裡面確定的靜態地址，關閉例如SMTP嗅探這樣不必要的路由協議。
5.安裝能源分配單元
根據目前你的節點的最大需求，可能220V就能滿足你的高性能計算需求了。
6. 一切都安裝妥當之後，就可以開始配置環節了
Linux是高性能計算集群（HPC Cluster）操作系統的事實標准，這不僅因為Linux是科學計算的理想環境，也是由於在數以百計甚至千計的節點上安裝的時候，Linux不會產生任何花費。設想一下，在如此多的節點上安裝Windows會花掉你多少錢呢？
●從更新主板BIOS的固件開始，將所有節點的BIOS固件都更新至最新的版本；
●在每個節點上都安裝好你喜歡的Linux發行版，頭節點需要安裝隊圖形界面的支持。比較流行的選擇，包括CentOS、OpenSuse、Scientific Linux、RedHat以及SLES；
●使用Rocks Cluster Distribution來搭建計算集群。除了它已經安裝好計算集群需要使用的所有工具外，Rock還提供了一種通過PXE和RedHat的「Kick Start」來進行批量部署的方案。
7. 安裝消息傳送界面、資源管理器以及其他必須的庫
如果上一步里你沒有選擇Rock做為你的節點的操作系統，那麼現在你需要手動設置並行計算機制所必需的軟體。
●首先，你需要一個便攜的bash管理系統，例如Torque Resource Manager，這些軟體允許你劃分以及分配計算任務；
●如果安裝了Torque Resource Manager，那麼你還需要Maui Cluster Scheler來完成設置；
●其次，需要安裝消息傳送界面（message passing interface），用來在不同的計算節點的進程之間共享數據。
最後，不要忘了用多線程的數學庫及編譯器來編寫計算任務。
8.將所有的計算節點接入網路
頭節點負責將任務分配到計算節點，計算節點再把結果返回回來，節點間的消息傳遞也是如此，所以當然是越快越好了。
●使用私有網路將集群中的所有節點互聯起來；
●頭節點其實還充當區域網里的NFS、PXE、DHCP以及NTP伺服器；
●將該網路從公網中分離出來，這樣可以保證該網路中的廣播報文不會影響到其他的網路；
9.對集群進行測試
在你把你強大的Top500計算集群交付給客戶之前，你還要測試一下它的性能。HPL（High Performance Lynpack）評測軟體包是測試集群的計算速度的常見選擇。你需要從源代碼編譯它，編譯的時候根據你選擇的架構，打開所有可能的優化選項。
8. 求集群管理的相關知識！
集群技術案例介紹和具體操作
集群技術案例介紹和具體操作
中國科學院西安網路中心 中科紅旗linux培訓認證中心
集群技術
1.1 什麼是集群
簡單的說，集群（cluster）就是一組計算機，它們作為一個整體向用戶提
供一組網路資源。這些單個的計算機系統就是集群的節點（node）。一個理想的
集群是，用戶從來不會意識到集群系統底層的節點，在他/她們看來，集群是一
個系統，而非多個計算機系統。並且集群系統的管理員可以隨意增加和刪改集群
系統的節點。
1.2 為什麼需要集群
集群並不是一個全新的概念，其實早在七十年代計算機廠商和研究機構就
開始了對集群系統的研究和開發。由於主要用於科學工程計算，所以這些系統並
不為大家所熟知。直到Linux集群的出現，集群的概念才得以廣為傳播。
對集群的研究起源於集群系統良好的性能可擴展性(scalability)。提高CPU
主頻和匯流排帶寬是最初提供計算機性能的主要手段。但是這一手段對系統性能的
提供是有限的。接著人們通過增加CPU個數和內存容量來提高性能，於是出現了
向量機，對稱多處理機(SMP)等。但是當CPU的個數超過某一閾值，象SMP這些
多處理機系統的可擴展性就變的極差。主要瓶頸在於CPU訪問內存的帶寬並不能
隨著CPU個數的增加而有效增長。與SMP相反，集群系統的性能隨著CPU個數的
增加幾乎是線性變化的。圖1顯示了這中情況。
圖1. 幾種計算機系統的可擴展性
對於關鍵業務，停機通常是災難性的。因為停機帶來的損失也是巨大的。下
面的統計數字列舉了不同類型企業應用系統停機所帶來的損失。
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
應用系統每分鍾損失(美元)
呼叫中心(Call Center) 27000
企業資源計劃(ERP)系統13000
供應鏈管理(SCM)系統11000
電子商務(eCommerce)系統10000
客戶服務(Customer Service Center)系統27000
圖2：停機給企業帶來的損失
隨著企業越來越依賴於信息技術，由於系統停機而帶來的損失也越拉越大。
集群系統的優點並不僅在於此。下面列舉了集群系統的主要優點：
高可擴展性：如上所述。
高可用性：集群中的一個節點失效，它的任務可傳遞給其他節點。可以有效防止單點失效。
高性能：負載平衡集群允許系統同時接入更多的用戶。
高性價比：可以採用廉價的符合工業標準的硬體構造高性能的系統。
2.1 集群系統的分類
雖然，根據集群系統的不同特徵可以有多種分類方法，但是一般把集群系統分為兩類：
（1）、高可用(High Availability)集群,簡稱HA集群。
這類集群致力於提供高度可靠的服務。就是利用集群系統的容錯性對外提供7*24小時不間
斷的服務，如高可用的文件伺服器、資料庫服務等關鍵應用。
目前已經有在Linux下的高可用集群，如Linux HA項目。
負載均衡集群：使任務可以在集群中盡可能平均地分攤不同的計算機進行處理，充分利
用集群的處理能力，提高對任務的處理效率。
在實際應用中這幾種集群類型可能會混合使用，以提供更加高效穩定的服務。如在一個使
用的網路流量負載均衡集群中，就會包含高可用的網路文件系統、高可用的網路服務。
（2）、性能計算(High Perfermance Computing)集群，簡稱HPC集群，也稱為科學計算
集群。
在這種集群上運行的是專門開發的並行應用程序，它可以把一個問題的數據分布到多
台的計算機上，利用這些計算機的共同資源來完成計算任務，從而可以解決單機不能勝任
的工作（如問題規模太大，單機計算速度太慢）。
這類集群致力於提供單個計算機所不能提供的強大的計算能力。如天氣預報、石油勘探與油
藏模擬、分子模擬、生物計算等。這些應用通常在並行通訊環境MPI、PVM等中開發，由於MPI
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
是目前的標准，故現在多使用MPI為並行環境。
比較有名的集群Beowulf就是一種科學計算集群項目。
3、集群系統轉發方式和調度演算法
3．1轉發方式
目前LVS主要有三種請求轉發方式和八種調度演算法。根據請求轉發方式的不同，所構
架集群的網路拓撲、安裝方式、性能表現也各不相同。用LVS主要可以架構三種形式的集群，
分別是LVS/NAT、LVS/TUN和LVS/DR，可以根據需要選擇其中一種。
（1）、網路地址轉換（LVS/NAT）
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
（2）、直接路由
（3）、IP隧道
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
三種轉發方式的比較：
3．2、調度演算法
在選定轉發方式的情況下，採用哪種調度演算法將決定整個負載均衡的性能表現，不同
的演算法適用於不同的應用場合，有時可能需要針對特殊場合，自行設計調度演算法。LVS的算
法是逐漸豐富起來的，最初LVS只提供4種調度演算法，後來發展到以下八種：
1.輪叫調度（Round Robin）
調度器通過「輪叫」調度演算法將外部請求按順序輪流分配到集群中的真實伺服器上，它均
等地對待每一台伺服器，而不管伺服器上實際的連接數和系統負載。
2.加權輪叫（Weighted Round Robin）
調度器通過「加權輪叫」調度演算法根據真實伺服器的不同處理能力來調度訪問請求。這樣
可以保證處理能力強的伺服器能處理更多的訪問流量。調度器可以自動詢問真實伺服器的
負載情況，並動態地調整其權值。
3.最少鏈接（Least Connections）
調度器通過「最少連接」調度演算法動態地將網路請求調度到已建立的鏈接數最少的伺服器
上。如果集群系統的真實伺服器具有相近的系統性能，採用「最小連接」調度演算法可以較
好地均衡負載。
4.加權最少鏈接（Weighted Least Connections）
在集群系統中的伺服器性能差異較大的情況下，調度器採用「加權最少鏈接」調度演算法優
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
化負載均衡性能，具有較高權值的伺服器將承受較大比例的活動連接負載。調度器可以自
動詢問真實伺服器的負載情況，並動態地調整其權值。
5.基於局部性的最少鏈接（Locality-Based Least Connections）
「基於局部性的最少鏈接」調度演算法是針對目標IP地址的負載均衡，目前主要用於Cache
集群系統。該演算法根據請求的目標IP地址找出該目標IP地址最近使用的伺服器，若該服務
器是可用的且沒有超載，將請求發送到該伺服器；若伺服器不存在，或者該伺服器超載且
有伺服器處於一半的工作負載，則用「最少鏈接」的原則選出一個可用的伺服器，將請求
發送到該伺服器。
6. 帶復制的基於局部性最少鏈接（ Locality-Based Least Connections with
Replication）
「帶復制的基於局部性最少鏈接」調度演算法也是針對目標IP地址的負載均衡，目前主要
用於Cache集群系統。它與LBLC演算法的不同之處是它要維護從一個目標IP地址到一組服務
器的映射，而LBLC演算法維護從一個目標IP地址到一台伺服器的映射。該演算法根據請求的目
標IP地址找出該目標IP地址對應的伺服器組，按「最小連接」原則從伺服器組中選出一
台伺服器，若伺服器沒有超載，將請求發送到該伺服器；若伺服器超載，則按「最小連接
」原則從這個集群中選出一台伺服器，將該伺服器加入到伺服器組中，將請求發送到該服
務器。同時，當該伺服器組有一段時間沒有被修改，將最忙的伺服器從伺服器組中刪除，
以降低復制的程度。
7.目標地址散列（Destination Hashing）
「目標地址散列」調度演算法根據請求的目標IP地址，作為散列鍵（Hash Key）從靜態分
配的散列表找出對應的伺服器，若該伺服器是可用的且未超載，將請求發送到該伺服器，
否則返回空。
8.源地址散列（Source Hashing）
「源地址散列」調度演算法根據請求的源IP地址，作為散列鍵（Hash Key）從靜態分配的
散列表找出對應的伺服器，若該伺服器是可用的且未超載，將請求發送到該伺服器，否則
返回空。
了解這些演算法原理能夠在特定的應用場合選擇最適合的調度演算法，從而盡可能地保持
Real Server的最佳利用性。當然也可以自行開發演算法，不過這已超出本文范圍，請參考有
關演算法原理的資料。
4．1、什麼是高可用性
計算機系統的可用性(availability)是通過系統的可靠性(reliability)和可維護性
(maintainability)來度量的。工程上通常用平均無故障時間(MTTF)來度量系統的可靠性，
用平均維修時間（MTTR）來度量系統的可維護性。於是可用性被定義為：
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
MTTF/(MTTF+MTTR)*100%
業界根據可用性把計算機系統分為如下幾類：
可用比例
(Percent
Availability)
年停機時間
(downtime/year
)
可用性分類
99.5 3.7天
常規系統
(Conventional)
99.9 8.8小時可用系統(Available)
99.99 52.6分鍾
高可用系統(Highly
Available)
99.999 5.3分鍾Fault Resilient
99.9999 32秒Fault Tolerant
為了實現集群系統的高可用性，提高系統的高可性，需要在集群中建立冗餘機制。一個功
能全面的集群機構如下圖所示
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
負載均衡伺服器的高可用性
為了屏蔽負載均衡伺服器的失效，需要建立一個備份機。主伺服器和備份機上都運行
High Availability監控程序，通過傳送諸如「I am alive」這樣的信息來監控對方的運
行狀況。當備份機不能在一定的時間內收到這樣的信息時，它就接管主伺服器的服務IP並
繼續提供服務；當備份管理器又從主管理器收到「I am alive」這樣的信息是，它就釋放
服務IP地址，這樣的主管理器就開開始再次進行集群管理的工作了。為在住伺服器失效的
情況下系統能正常工作，我們在主、備份機之間實現負載集群系統配置信息的同步與備份，
保持二者系統的基本一致。
HA的容錯備援運作過程
自動偵測(Auto-Detect)階段 由主機上的軟體通過冗餘偵測線，經由復雜的監聽程序。邏
輯判斷，來相互偵測對方運行的情況，所檢查的項目有：
主機硬體(CPU和周邊)
主機網路
主機操作系統
資料庫引擎及其它應用程序
主機與磁碟陣列連線
為確保偵測的正確性，而防止錯誤的判斷，可設定安全偵測時間，包括偵測時間間隔，
偵測次數以調整安全系數，並且由主機的冗餘通信連線，將所匯集的訊息記錄下來，以供
維護參考。
自動切換(Auto-Switch)階段 某一主機如果確認對方故障，則正常主機除繼續進行原來的
任務，還將依據各種容錯備援模式接管預先設定的備援作業程序，並進行後續的程序及服
務。
自動恢復(Auto-Recovery)階段 在正常主機代替故障主機工作後，故障主機可離線進行修
復工作。在故障主機修復後，透過冗餘通訊線與原正常主機連線，自動切換回修復完成的
主機上。整個回復過程完成由EDI-HA自動完成，亦可依據預先配置，選擇回復動作為半自
動或不回復。
4．2、HA三種工作方式：
（1）、主從方式 （非對稱方式）
工作原理：主機工作，備機處於監控准備狀況；當主機宕機時，備機接管主機的一切工作，
待主機恢復正常後，按使用者的設定以自動或手動方式將服務切換到主機上運行，數據的
一致性通過共享存儲系統解決。
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
（2）、雙機雙工方式（互備互援）
工作原理：兩台主機同時運行各自的服務工作且相互監測情況，當任一台主機宕機時，另
一台主機立即接管它的一切工作，保證工作實時，應用服務系統的關鍵數據存放在共享存
儲系統中。
（3）、集群工作方式（多伺服器互備方式）
工作原理：多台主機一起工作，各自運行一個或幾個服務，各為服務定義一個或多個備用
主機，當某個主機故障時，運行在其上的服務就可以被其它主機接管。
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
相關文檔
http://tech.sina.com.cn/it/2004-04-09/1505346805.shtml
http://stonesoup.esd.ornl.gov
LINUX下的集群實列應用
最近有客戶需要一個負載均衡方案，筆者對各種軟硬體的負載均衡方案進行了調查和
比較，從IBM sServer Cluster、Sun Cluster PlatForm 等硬體集群，到中軟、紅旗、
TurboLinux的軟體集群，發現無論採用哪個廠商的負載均衡產品其價格都是該客戶目前所
不能接受的。於是筆者想到了開放源項目Linux Virtual Server(簡稱LVS)。經過對LVS的研
究和實驗，終於在Red Hat 9.0上用LVS成功地構架了一組負載均衡的集群系統。整個實
現過程整理收錄如下，供讀者參考。
選用的LVS實際上是一種Linux操作系統上基於IP層的負載均衡調度技術，它在操
作系統核心層上，將來自IP層的TCP/UDP請求均衡地轉移到不同的伺服器，從而將一組
伺服器構成一個高性能、高可用的虛擬伺服器。使用三台機器就可以用LVS實現最簡單的集
群，如圖1所示。
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
圖1 LVS實現集群系統結構簡圖
圖1顯示一台名為Director的機器在集群前端做負載分配工作；後端兩台機器稱之為
Real Server，專門負責處理Director分配來的外界請求。該集群的核心是前端的Director
機器，LVS就是安裝在這台機器上，它必須安裝Linux。Real Server則要根據其選用的負
載分配方式而定，通常Real Server上的設置比較少。接下來介紹Director機器上LVS的
安裝過程。
安裝
LVS的安裝主要是在Director機器上進行，Real Server只需針對不同的轉發方式做簡單
的設定即可。特別是對LVS的NAT方式，Real Server惟一要做的就是設一下預設的網關。
所以構架集群的第一步從安裝Director機器開始。
首先，要在Director機器上安裝一個Linux操作系統。雖然早期的一些Red Hat版本，
如6.2、7.2、8.0等自帶Red Hat自己的集群軟體，或者是在內核中已經支持LVS，但是為
了更清楚地了解LVS的機制，筆者還是選擇自行將LVS編入Linux內核的方式進行安裝，
Linux版本採用Red Hat 9.0。
如果用戶對Red Hat的安裝比較了解，可以選擇定製安裝，並只安裝必要的軟體包。
安裝中請選擇GRUB 做為啟動引導管理軟體。因為GRUB 在系統引導方面的功能遠比
LILO強大，在編譯Linux內核時可以體會它的方便之處。
LVS是在Linux內核中實現的，所以要對原有的Linux內核打上支持LVS的內核補丁，
然後重新編譯內核。支持LVS 的內核補丁可以從LVS 的官方網
http://www.linuxvirtualserver.org 下載，下載時請注意使用的Linux核心版本，必須下載和
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
使用的Linux內核版本相一致的LVS內核補丁才行。對於Red Hat 9.0，其Linux內核版本
是2.4.20，所以對應內核補丁應該是http://www.linuxvirtualserver.org/software/kernel-
2.4/linux-2.4.20-ipvs-1.0.9.patch.gz。筆者經過多次實驗，使用Red Hat 9.0自帶的Linux
源代碼無法成功編譯LVS 的相關模組。由於時間關系筆者沒有仔細研究，而是另外從
kernel.org上下載了一個tar包格式的2.4.20內核來進行安裝，順利完成所有編譯。下面是
整個內核的編譯過程：
1.刪除Red Hat自帶的Linux源代碼
# cd /usr/src
# rm -rf linux*
2.下載2.4.20內核
# cd /usr/src
# wget ftp://ftp.kernel.org/pub/linux/kernel/v2.4/linux-2.4.20.tar.bz2
3.解壓到當前目錄/usr/src
# cd /usr/src
# tar -xjpvf linux-2.4.20.tar.bz2
4.建立鏈接文件
# cd /usr/src # ln -s linux-2.4.20 linux-2.4 # ln -s linux-2.4.20 linux
5.打上LVS的內核補丁
# cd /usr/src
#wget http://www.linuxvirtualserver.org/software/kernel-2.4/linux-2.4.20-ipvs-
1.0.9.patch.gz
# gzip -cd linux-2.4.20-ipvs-1.0.9.patch.gz
# cd /usr/src/linux
# patch -p1 < ../linux-2.4.20-ipvs-1.0.9.patch
在打補丁時，注意命令執行後的信息，不能有任何錯誤信息，否則核心或模組很可能
無法成功編譯。
6.打上修正ARP問題的內核補丁
# cd /usr/src
# wget http://www.ssi.bg/~ja/hidden-2.4.20pre10-1.diff
# cd /usr/src/linux
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
# patch -p1 < ../hidden-2.4.20pre10-1.diff
這一步在Director機器上可以不做，但是在使用LVS/TUN和LVS/DR方式的Real Server
上必須做。
7.為新核心命名
打開/usr/src/linux/Makefile。注意，在開始部分有一個變數EXTRAVERSION可以自行定
義。修改這個變數，比如改成「EXTRAVERSION=-LVS」後，編譯出的核心版本號就會顯
示成2.4.20-LVS。這樣給出有含義的名稱將有助於管理多個Linux核心。
8.檢查源代碼
# make mrproper
這一步是為確保源代碼目錄下沒有不正確的.o文件及文件的互相依賴。因為是新下載的內
核，所以在第一次編譯時，這一步實際可以省略。
9.配置核心選項
# make menuconfig
命令執行後會進入一個圖形化的配置界面，可以通過這個友好的圖形界面對內核進行定製。
此過程中，要注意對硬體驅動的選擇。Linux支持豐富的硬體，但對於伺服器而言，用不到
的硬體驅動都可以刪除。另外，像Multimedia devices、Sound、Bluetooth support、Amateur
Radio support等項也可以刪除。
注意，以下幾項配置對LVS非常重要，請確保作出正確的選擇：
(1)Code maturity level options項
對此項只有以下一個子選項，請選中為*，即編譯到內核中去。
Prompt for development and/or incomplete code/drivers
(2)Networking options項
對此項的選擇可以參考以下的配置，如果不清楚含義可以查看幫助：
<*> Packet socket
[ ] Packet socket: mmapped IO
< > Netlink device emulation
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
Network packet filtering (replaces ipchains)
[ ] Network packet filtering debugging
Socket Filtering
<*> Unix domain sockets
TCP/IP networking
IP: multicasting
IP: advanced router
IP: policy routing
[ ] IP: use netfilter MARK value as routing key
[ ] IP: fast network address translation
<M> IP: tunneling
IP: broadcast GRE over IP
[ ] IP: multicast routing
[ ] IP: ARP daemon support (EXPERIMENTAL)
[ ] IP: TCP Explicit Congestion Notification support
[ ] IP: TCP syncookie support (disabled per default)
IP: Netfilter Configuration --->
IP: Virtual Server Configuration --->
(3)Networking options項中的IP: Virtual Server Configuration項
如果打好了LVS的內核補丁，就會出現此選項。進入Virtual Server Configuration選項，
有以下子選項：
<M> virtual server support (EXPERIMENTAL)
IP virtual server debugging
(12) IPVS connection table size (the Nth power of 2)
--- IPVS scheler
<M> round-robin scheling
<M> weighted round-robin scheling
<M> least-connection scheling scheling
<M> weighted least-connection scheling
<M> locality-based least-connection scheling
<M> locality-based least-connection with replication scheling
<M> destination hashing scheling
<M> source hashing scheling
<M> shortest expected delay scheling
<M> never queue scheling
--- IPVS application helper
<M> FTP protocol helper
以上所有項建議全部選擇。
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
(4)Networking options項中的IP: Netfilter Configuration項
對於2.4版本以上的Linux Kernel來說，iptables是取代早期ipfwadm和ipchains的
更好選擇，所以除非有特殊情況需要用到對ipchains和ipfwadm的支持，否則就不要選它。
本文在LVS/NAT方式中，使用的就是iptables，故這里不選擇對ipchains和ipfwadm的
支持：
< > ipchains (2.2-style) support
< > ipfwadm (2.0-style) support
10. 編譯內核
(1)檢查依賴關系
# make dep
確保關鍵文件在正確的路徑上。
(2)清除中間文件
# make clean
確保所有文件都處於最新的版本狀態下。
(3)編譯新核心
# make bzImage
(4)編譯模組
# make moles
編譯選擇的模組。
(5)安裝模組
# make moles_install
# depmod -a
生成模組間的依賴關系，以便modprobe定位。
(6)使用新模組
# cp System.map /boot/System.map-2.4.20-LVS
# rm /boot/System.map
# ln -s /boot/System.map-2.4.20-LVS /boot/System.map
# cp arch/i386/boot/bzImage /boot/vmlinuz-2.4.20-LVS
# rm /boot/vmlinuz
# ln -s /boot/vmlinuz-2.4.20-LVS /boot/vmlinuz
# new-kernel-pkg --install --mkinitrd --depmod 2.4.20-LVS
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
(7)修改GRUB，以新的核心啟動
執行完new-kernel-pkg命令後，GRUB的設置文件/etc/grub.conf中已經增加了新核心的
啟動項，這正是開始安裝Linux時推薦使用GRUB做引導程序的原因。
grub.conf中新增內容如下：
title Red Hat Linux (2.4.20-LVS)
root (hd0,0)
kernel /boot/vmlinuz-2.4.20LVS ro root=LABEL=/
initrd /boot/initrd-2.4.20LVS.img
將Kernel項中的root=LABEL=/改成 root=/dev/sda1 (這里的/dev/sda1是筆者Linux的根
分區，讀者可根據自己的情況進行不同設置）。
保存修改後，重新啟動系統:
# reboot
系統啟動後，在GRUB的界面上會出現Red Hat Linux(2.4.20-LVS)項。這就是剛才編譯的
支持LVS的新核心，選擇此項啟動，看看啟動過程是否有錯誤發生。如果正常啟動，ipvs
將作為模塊載入。同時應該注意到，用LVS的內核啟動後在/proc目錄中新增了一些文件，
比如/proc/sys/net/ipv4/vs/*。
11.安裝IP虛擬伺服器軟體ipvsadm
用支持LVS的內核啟動後，即可安裝IP虛擬伺服器軟體ipvsadm了。用戶可以用tar包或
RPM 包安裝，tar 包可以從以下地址http://www.linuxvirtualserver.org/software/kernel-
2.4/ipvsadm-1.21.tar.gz 下載進行安裝。
這里採用源RPM包來進行安裝：
# wget http://www.linuxvirtualserver.org/software/kernel-2.4/ipvsadm-1.21-7.src.rpm
# rpmbuild --rebuild ipvsadm-1.21-7.src.rpm
# rpm -ivh /usr/src/redhat/RPMS/i386/ipvsadm-1.21-7.i386.rpm
注意：高版本的rpm命令去掉了--rebuild這個參數選項，但提供了一個rpmbuild命令來實
現它。這一點和以前在Red Hat 6.2中以rpm—rebuild XXX.src.rpm來安裝源RPM包的習
慣做法有所不同。
安裝完，執行ipvsadm命令，應該有類似如下的信息出現：
# ipvsadm
中科紅旗linux技術支持服務中心---西安站 http://linux.xab.ac.cn
中國科學院西安網路中心 中科紅旗linux培訓認證中心
IP Virtual Server version 1.0.9 (size=4096)
Prot LocalAddress:Port Scheler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
出現類似以上信息，表明支持LVS 的內核和配置工具ipvsadm 已完全安裝，這台
Director機器已經初步安裝完成，已具備構架各種方式的集群的條件。
實例
理解了上述關於請求轉發方式和調度演算法的基本概念後，就可以運用LVS來具體實現
幾種不同方式的負載均衡的集群系統。LVS的配置是通過前面所安裝的IP虛擬伺服器軟體
ipvsadm來實現的。ipvsadm與LVS的關系類似於iptables和NetFilter的關系，前者只是
一個建立和修改規則的工具，這些命令的作用在系統重新啟動後就消失了，所以應該將這
些命令寫到一個腳本里，然後讓它在系統啟動後自動執行。網上有不少配置LVS的工具，
有的甚至可以自動生成腳本。但是自己手工編寫有助於更深入地了解，所以本文的安裝沒
有利用其它第三方提供的腳本，而是純粹使用ipvsadm命令來配置。
下面就介紹一下如何配置LVS/NAT、LVS/TUN、LVS/DR方式的負載均衡集群。
1.設定LVS/NAT方式的負載均衡集群
NAT是指Network Address Translation，它的轉發流程是：Director機器收到外界請求，
改寫數據包的目標地址，按相應的調度演算法將其發送到相應Real Server上，Real Server
處理完該請求後，將結果數據包返回到其默認網關，即Director機器上，Dire
9. GCC編譯連接問題stl_algobase.h:343: undefined reference to
這個錯誤非常常見，高版本的gcc編譯器的庫文件，常有改動，文件名或者變數名都有可能相對於低版本gcc發生變化。
我的解決辦法是，找出編譯平台也就是4.4.7版本里的對應的頭文件或者變數名函數名，修改你的代碼中所有include或者引用的地方。
因為你的編譯平台是447. 你是基於463構建的工程，引用的頭文件肯定有些是 447里不具備的或者名字路徑不一樣的。
10. 什麼是高性能計算集群
作為一個在高性能計算領域十多年的老兵，大概回答下
高性能計算是一個非常大的領域，總的來看，可以分為三個層面：
硬體層面，包括高性能網路，高性能處理器，高性能伺服器，高性能存儲器件等。高性能網路層面，目前超級計算機主要基於兩種高性能網路，一種是Infiniband，一種是RoCE。高性能處理器層面，包括高性能CPU，如AMD、Intel的高性能伺服器CPU。高性能協處理器，如NV的GPU，Intel之前的MIC等。國產的申威處理器也是高性能處理器。高性能伺服器，主要是散熱。因為機器性能高，功耗自然也就大，散熱一般是大問題，目前國內在這塊做的比較好的是曙光，PUE可以做到1.1以下。高性能存儲器件發展也非常迅速，Intel的內存存儲已經開始實用。但是存儲因為他對計算性能影響有限，之前在高性能領域關注不是太多，隨著AI對高性能計算的需求越來越強烈，而AI又是基於數據的，存儲對於高性能計算的重要性在逐步體現。
基礎軟體層面，包括調度、存儲、通信、編譯、計算等各種基礎軟體。常用的調度包括slurm，PBS，存儲包括Lustre、Gluster，通信如MPI，以及各種開源或者晶元廠商提供的編譯、計算庫，如blas庫，fft庫，稀疏矩陣計算庫，元運算元庫等等。這些基礎軟體和高性能硬體一起，組成了高性能計算的核心部分，也是非常有技術挑戰的部分。以及一些基礎演算法，如七個小矮人：結構性網格、非結構性網格、快速傅立葉變化、Dense Linear Algebra、Sparse Linear Algebra、粒子動力學、Monte Carlo。
應用軟體層面，這個主要是高性能計算在各個行業的應用，比如前面同學提到的大規模科學問題、天氣預報、生物制葯、地形分析、數據挖掘、圖像處理、基因測序、人工智慧、密碼破譯、核爆模擬、飛機製造、量化交易等各個領域的應用。這些應用往往都需要有行業專家來參與，高性能計算的專家提供1，2提到的軟體和基礎庫，行業專家一起，配合把行業對應應用進行並行化，進行性能優化，最後提供一個可以在超級計算機上大規模運行的軟體。
以上3個層面，每一個層面都有大量的工作可以做，比如軟體層面，其中任何一個方向，都值得深入。藍海大腦主要是做計算，提供高性能的計算庫，一個實驗室上百人，就專門只做這個事情，為國產的、商用的處理器，提供高性能計算庫，提出新的計算演算法，提出新的優化方法。