fastdfs對象存儲

❶ fastdfs可否確定硬碟中有沒有存儲空間

如果是我，我會再買一個硬碟，2t的也就500多關鍵是現在很多網盤都有和諧和誤傷現象，你放心？尤其是網路雲115的話本身就是付費的如果你自信你盤里不會有和諧的資源，就慢慢傳吧

❷ fastdfs 和hdfs的區別

主要是定位和應用場合不一樣。
hadoop的文件系統HDFS主要解決並行計算中分布式存儲數據的問題。其單個數據文件通常很大，採用了分塊（切分）存儲的方式；
FastDFS主要用於大中網站，為文件上傳和下載提供在線服務。所以在負載均衡、動態擴容等方面都支持得比較好，FastDFS不會對文件進行分快（切分）存儲。

❸ 請問fastdfs怎麼用比較合適呢

時間過去這么久了， 可能樓主的問題早就解決了 。 但是還是回答一些我知道的信息：先訪問Tracker server 獲取到空閑的storage server ， 然後直接訪問storage server 。 同一個group 中的一台storage server 宕機不會影響到系統的運行 ， 因為同一個group 中的storage server 存儲的內容都是一樣的 ， 如果有一台storage server 宕機了，Tracker server 不會返回這台宕機的storage server 地址。

❹ 通過client api載入fastdfs全局配置文件使用哪個對象

FastDFS是一個開源的輕量級分布式文件系統，它對文件進行管理，功能包括：文件存儲、文件同步、文件訪問（文件上傳、文件下載）等，解決了大容量存儲和負載均衡的問題。特別適合以文件為載體的在線服務，如相冊網站、視頻網站等等。
FastDFS服務端有兩個角色：跟蹤器（tracker）和存儲節點（storage）。跟蹤器主要做調度工作，在訪問上起負載均衡的作用。
存儲節點存儲文件，完成文件管理的所有功能：存儲、同步和提供存取介面，FastDFS同時對文件的metadata進行管理。所謂文件的meta data就是文件的相關屬性，以鍵值對（key valuepair）方式表示，如：width=1024，其中的key為width，value為1024。文件metadata是文件屬性列表，可以包含多個鍵值對。
跟蹤器和存儲節點都可以由一台或多台伺服器構成。跟蹤器和存儲節點中的伺服器均可以隨時增加或下線而不會影響線上服務。其中跟蹤器中的所有伺服器都是對等的，可以根據伺服器的壓力情況隨時增加或減少。
為了支持大容量，存儲節點（伺服器）採用了分卷（或分組）的組織方式。存儲系統由一個或多個卷組成，卷與卷之間的文件是相互獨立的，所有卷的文件容量累加就是整個存儲系統中的文件容量。一個卷可以由一台或多台存儲伺服器組成，一個卷下的存儲伺服器中的文件都是相同的，卷中的多台存儲伺服器起到了冗餘備份和負載均衡的作用。
在卷中增加伺服器時，同步已有的文件由系統自動完成，同步完成後，系統自動將新增伺服器切換到線上提供服務。
當存儲空間不足或即將耗盡時，可以動態添加卷。只需要增加一台或多台伺服器，並將它們配置為一個新的卷，這樣就擴大了存儲系統的容量。
FastDFS中的文件標識分為兩個部分：卷名和文件名，二者缺一不可。
FastDFS file upload
上傳文件交互過程：
1. client詢問tracker上傳到的storage，不需要附加參數；
2. tracker返回一台可用的storage；
3. client直接和storage通訊完成文件上傳。
FastDFS file download
下載文件交互過程：
1. client詢問tracker下載文件的storage，參數為文件標識（卷名和文件名）；
2. tracker返回一台可用的storage；
3. client直接和storage通訊完成文件下載。
需要說明的是，client為使用FastDFS服務的調用方，client也應該是一台伺服器，它對tracker和storage的調用均為伺服器間的調用。

❺ 請教關於FastDFS和FastDHT使用問題

回復1# temp_hacker >>請問，如果現在開始使用FastDHT，它會自動去記錄以前在FastDFS上存儲的文件信息嗎？不會的。>>如果不能，有沒有辦法讓FastDHT去記錄以前的存儲在FastDFS上的文件呢？謝謝！如果你要自定義文件ID，可以使用定製一套client API：my-fastdfs-client。文件ID映射就是保存到FastDHT中的。如果以前已經上傳了一些文件，需要你自己做個數據遷移或者重建文件ID映射。 查看原帖>>

採納哦

❻ fastdfs能存儲什麼東西

FastDFS是一個開源的輕量級分布式文件系統，它對文件進行管理，功能包括：文件存儲、文件同步、文件訪問（文件上傳、文件下載）等，解決了大容量存儲和負載均衡的問題。特別適合以文件為載體的在線服務，如相冊網站、視頻網站等等。

❼ 我要用hadoop來實現海量圖片的存儲，到底應該用raid來保證數據可靠性，還是用HDFS的冗餘機制呢

圖片這樣比較小的文件，不建議使用hadoop來做，用fastdfs之類的布置簡單，效果也比較好。raid5對於單點故障可以做到恢復，一旦多台機器同時出現問題，是沒辦法恢復的，單個圖片文件較小，一般也不能分成多塊，用raid5有點無力的感覺。當然如果你圖片經過打包司馬的，文件比較大（500MB以上），還是可以用的。

❽ 有了cdn為什麼還要用fastdfs

因為cdn的速度與fastdfs相差並不是很大，但是價格卻十分昂貴，所以相同情況下，企業都會選擇使用fastdfs分布式文件系統。

❾ 如何安裝FastDFS

Google了一下，流行的開源分布式文件系統有很多，介紹如下：

mogileFS：Key-Value型元文件系統，不支持FUSE，應用程序訪問它時需要API，主要用在web領域處理海量小圖片，效率相比mooseFS高很多。
fastDFS：國人在mogileFS的基礎上進行改進的key-value型文件系統，同樣不支持FUSE，提供比mogileFS更好的性能。
mooseFS：支持FUSE，相對比較輕量級，對master伺服器有單點依賴，用perl編寫，性能相對較差，國內用的人比較多
glusterFS：支持FUSE，比mooseFS龐大
ceph：支持FUSE，客戶端已經進入了linux-2.6.34內核，也就是說可以像ext3/rasierFS一樣，選擇ceph為文件系統。徹底的分布式，沒有單點依賴，用C編寫，性能較好。基於不成熟的btrfs，其本身也非常不成熟。
lustre：Oracle公司的企業級產品，非常龐大，對內核和ext3深度依賴
NFS：老牌網路文件系統，具體不了解，反正NFS最近幾年沒發展，肯定不能用。
鑒於fastDFS是國人開發，也有國內的一些大公司在使用，so…

普通的文件架構其實一兩年內也是沒有問題的，但有句話叫未雨綢繆，於是決定折騰折騰。
源碼下載：
尋求幫助：

一、安裝libevent
fastDFS需要安裝libevent比較新的版本，將本機的比較低的版本卸載了。

rpm -qa libevent
libevent-1.4.13-1.el6.x86_64
rpm -e --nodeps libevent
安裝一個最新穩定版

wget
tar zxvf libevent-2.0.18-stable.tar.gz
cd libevent-2.0.18-stable
./configure
make && make install
為libevent創建軟鏈接到/lib庫下，64位系統對應/lib64

ln -s /usr/local/lib/libevent* /lib/
ln -s /usr/local/lib/libevent* /lib64/
二、安裝FastDFS

wget
tar zxvf FastDFS_v3.06.tar.gz
cd FastDFS
./make.sh
./make.sh install
三、配置FastDFS
環境：
tracker server
192.168.1.5
storage server
192.168.1.51
192.168.1.52

1、配置並啟動 tracker server
①配置 tracker.conf

mkdir /data/fastdfs
vim /etc/fdfs/tracker.conf
base_path=/data/fastdfs
②啟動 tracker

/usr/local/bin/fdfs_trackerd /etc/fdfs/tracker.conf
③開機啟動

vim /etc/rc.local
/usr/local/bin/fdfs_trackerd /etc/fdfs/tracker.conf
2、配置並啟動 storage server
①配置 tracker.conf

mkdir /data/fastdfs
mkdir /data/images
vim /etc/fdfs/storage.conf
base_path=/data/fastdfs
store_path0=/data/images
tracker_server=192.168.1.5:22122
②啟動 tracker

/usr/local/bin/fdfs_storage /etc/fdfs/storage.conf
③開機啟動

vim /etc/rc.local
/usr/local/bin/fdfs_storage /etc/fdfs/storage.conf
3、為storage節點安裝fastdfs-nginx-mole模塊
①安裝模塊
安裝Nginx詳見：
需重新編譯Nginx

wget
tar zxvf fastdfs-nginx-mole_v1.10.tar.gz
wget
tar zxvf nginx-1.2.0.tar.gz
cd nginx-1.2.0
./configure --prefix=/usr/local/nginx --add-mole=../fastdfs-nginx-mole/src
make && make install
cd ..
②配置
編輯nginx.conf

vim /usr/local/nginx/conf/nginx.conf
server {
listen 80;
server_name localhost;

location /M00 {
alias /data/images/data;
ngx_fastdfs_mole;
}
......
}
給 storage 的存儲目錄做一個軟連接

ln -s /data/images/data/ /data/images/data/M00
拷貝mod_fastdfs.conf 到 /etc/fdfs/

cp fastdfs-nginx-mole/src/mod_fastdfs.conf /etc/fdfs/
vim /etc/fdfs/mod_fastdfs.conf
base_path=/data/fastdfs
tracker_server=192.168.1.5:22122
store_path0=/data/images
啟動nginx

/usr/local/nginx/sbin/nginx
四、使用FastDFS
1、上傳文件
FastDFS安裝包中，自帶了客戶端程序，通過程序可以進行文件上傳。在使用這個客戶端程序之前，首先需要配置client.conf，然後再進行文件上傳及下載。
在tracker上修改客戶端配置文件client.conf

vim /etc/fdfs/client.conf
base_path=/data/fastdfs
tracker_server=192.168.1.5:22122
vim a.html
This Is FastDFS Test.
上傳文件

/usr/local/bin/fdfs_test /etc/fdfs/client.conf upload a.html
This is FastDFS client test program v3.06

Copyright (C) 2008, Happy Fish / YuQing

FastDFS may be copied only under the terms of the GNU General
Public License V3, which may be found in the FastDFS source kit.
Please visit the FastDFS Home Page /
for more detail.

[2012-04-29 12:42:53] INFO - base_path=/data/tracker, connect_timeout=30, network_timeout=60, tracker_server_count=1, anti_steal_token=0, anti_steal_secret_key length=0

tracker_query_storage_store_list_without_group:
server 1. group_name=group1, ip_addr=192.168.1.51, port=23000
server 2. group_name=group1, ip_addr=192.168.1.52, port=23000

group_name=group1, ip_addr=192.168.1.51, port=23000
storage_upload_by_filename
group_name=group1, remote_filename=M00/00/00/wKgBM0-cxs32qFyYAAAADigvbpc90.html
source ip address: 192.168.1.51
file timestamp=2012-04-29 12:42:53
file size=14
file crc32=674197143
file url:
storage_upload_slave_by_filename
group_name=group1, remote_filename=M00/00/00/wKgBM0-cxs32qFyYAAAADigvbpc90_big.html
source ip address: 192.168.1.51
file timestamp=2012-04-29 12:42:53
file size=14
file crc32=674197143
file url:
上傳成功
試試用

訪問看看吧。

看了幾天了，還是有些地方不是很明白，暫時擱置，不能再浪費時間了。