FastDFS分佈式文件系統的安裝及配置

時間  2019-11-08
標籤 fastdfs 分佈式 文件 系統 安裝 配置 欄目 系統架構 简体版
原文   原文鏈接

分佈式文件系統（Distributed File System）是指文件系統管理的物理存儲資源不必定直接鏈接在本地節點上，而是經過計算機網絡與節點相連。分佈式文件系統的設計基於客戶機/服務器模式。一個典型的網絡可能包括多個供多用戶訪問的服務器。另外，對等特性容許一些系統扮演客戶機和服務器的雙重角色。 html

FastDFS是一個開源的輕量級分佈式文件系統，它對文件進行管理，功能包括：文件存儲、文件同步、文件訪問（文件上傳、文件下載）等，解決了大容量存儲和負載均衡的問題。特別適合以文件爲載體的在線服務，如相冊網站、視頻網站等等。 vim

一：安裝FastDFS 瀏覽器

一、首先安裝libevent。 服務器

 
     
 
  
  1.  wget http://monkey.org/~provos/libevent-2.0.11-stable.tar.gz   
    2.  
 
  
  2.  tar -zxvf libevent-2.0.11-stable.tar.gz   
    3.  
 
  
  3.  cd libevent-2.0.11-stable   
    4.  
 
  
  4.  ./configure --prefix=/usr   
    5.  
 
  
  5.  make clean   
    6.  
 
  
  6.  make   
    7.  
 
  
  7.  make install  
    8.

二、安裝FastDFS的步驟 網絡

 
     
 
  
  1.  wget http://fastdfs.googlecode.com/files/FastDFS_v3.03.tar.gz   
    2.  
 
  
  2.  tar -zxvf FastDFS_v3.03.tar.gz   
    3.  
 
  
  3.  cd FastDFS   
    4.  
 
  
  4.  vim make.sh 將#WITH_HTTPD=1 修改爲WITH_HTTPD=1 以支持 http   
    5.  
 
  
  5.  ./make.sh   
    6.  
 
  
  6.  ./make.sh install  
    7.

二：FastDFS的配置 app

一、配置及啓動Tracker Server： 負載均衡

 
     
 
  
  1.  mkdir /home/fastdfs   
    2.  
 
  
  2.  vi /etc/fdfs/tracker.conf   
    3.  
 
  
  3.  base_path=/home/yuqing/fastdfs -> base_path=/home/fastdfs   
    4.  
 
  
  4.  http.server_port=8080 -> http.server_port=9090  
    5.  
 
  
  5.  ##include http.conf -> #include http.conf   
    6.  
 
  
  6.  reserved_storage_space = 4GB -> reserved_storage_space = 1GB  
    7.  

 
 
     
 
  
  1.  cd /usr/local/bin   
    2.  
 
  
  2.  fdfs_trackerd /etc/fdfs/tracker.conf  
    3.

檢查tracker是否啓動成功，能夠查看以下文件/home/fastdfs/logs/trackerd.log： dom

 
     
 
  
  1.  [2011-10-21 14:29:44] INFO - FastDFS v3.03, base_path=/home/fastdfs, run_by_group=, run_by_user=, connect_timeout=30s, network_timeout=60s, port=22122, bind_addr=, max_connections=256, work_threads=4, store_lookup=2, store_group=, store_server=0, store_path=0, reserved_storage_space=1024MB, download_server=0, allow_ip_count=-1, sync_log_buff_interval=10s, check_active_interval=120s, thread_stack_size=64 KB, storage_ip_changed_auto_adjust=1, storage_sync_file_max_delay=86400s, storage_sync_file_max_time=300s, use_trunk_file=0, slot_min_size=256, slot_max_size=16 MB, trunk_file_size=64 MB   
    2.  
 
  
  2.  [2011-10-21 14:29:44] INFO - HTTP supported: server_port=9090, default_content_type=application/octet-stream, anti_steal_token=0, token_ttl=0s, anti_steal_secret_key length=0, token_check_fail content_type=, token_check_fail buff length=0, check_active_interval=30, check_active_type=tcp, check_active_uri=/status.html  
    3.

二、配置及啓動Storage Server： tcp

 
     
 
  
  1.  mkdir /home/fastdfs/fdfs_storage   
    2.  
 
  
  2.  cd /etc/fdfs   
    3.  
 
  
  3.  vi storage.conf   
    4.  
 
  
  4.  base_path=/home/yuqing/fastdfs -> /home/fastdfs/fdfs_storage   
    5.  
 
  
  5.  store_path0=/home/yuqing/fastdfs -> store_path0=/home/fastdfs/fdfs_storage   
    6.  
 
  
  6.  group_name=group1  
    7.  
 
  
  7.  tracker_server=192.168.209.121:22122 -> tracker_server=173.252.200.228:22122   
    8.  
 
  
  8.  ##include http.conf ->#include http.conf  
    9.

接下來會出現不少mkdir data path，這是系統在建立數據目錄。 分佈式

 
     
 
  
  1.  [2011-10-21 14:49:20] INFO - FastDFS v3.03, base_path=/home/fastdfs/fdfs_storage, store_path_count=1, subdir_count_per_path=256, group_name=group1, run_by_group=, run_by_user=, connect_timeout=30s, network_timeout=60s, port=23000, bind_addr=, client_bind=1, max_connections=256, work_threads=4, disk_rw_separated=1, disk_reader_threads=1, disk_writer_threads=1, disk_rw_direct=0, buff_size=256KB, heart_beat_interval=30s, stat_report_interval=60s, tracker_server_count=1, sync_wait_msec=50ms, sync_interval=0ms, sync_start_time=00:00, sync_end_time=23:59, write_mark_file_freq=500, allow_ip_count=-1, file_distribute_path_mode=0, file_distribute_rotate_count=100, fsync_after_written_bytes=0, sync_log_buff_interval=10s, sync_binlog_buff_interval=10s, sync_stat_file_interval=300s, thread_stack_size=512 KB, upload_priority=10, if_alias_prefix=, check_file_duplicate=0, FDHT group count=0, FDHT server count=0, FDHT key_namespace=, FDHT keep_alive=0, HTTP server port=8888, domain name=   
    2.  
 
  
  2.  [2011-10-21 14:49:20] INFO - HTTP supported: server_port=8888, http_trunk_size=262144, default_content_type=application/octet-stream, anti_steal_token=0, token_ttl=0s, anti_steal_secret_key length=0, token_check_fail content_type=, token_check_fail buff length=0  
    3.  
 
  
  3.  [2011-10-21 14:49:42] INFO - file: storage_param_getter.c, line: 97, storage_ip_changed_auto_adjust=1, store_path=0, reserved_storage_space=1024 MB, use_trunk_file=0, slot_min_size=0, slot_max_size=16 MB, trunk_file_size=64 MB   
    4.  
 
  
  4.  [2011-10-21 14:49:44] INFO - file: tracker_client_thread.c, line: 304, successfully connect to tracker server 173.252.200.228:22122, as a tracker client, my ip is 173.252.200.228   
    5.  
 
  
  5.  [2011-10-21 14:50:14] INFO - file: tracker_client_thread.c, line: 1100, tracker server 173.252.200.228:22122, set tracker leader: 173.252.200.228:22122  
    6.

三：測試及使用FastDFS

一、FastDFS之配置client： 

 
     
 
  
  1.  vi /etc/fdfs/client.conf   
    2.  
 
  
  2.  base_path=/home/yuqing/fastdfs-> base_path=/home/fastdfs   
    3.  
 
  
  3.  tracker_server=192.168.209.121:22122 -> tracker_server=173.252.200.228:22122   
    4.  
 
  
  4.  http.tracker_server_port=8080 ->http.tracker_server_port=9090  
    5.  
 
  
  5.  ##include http.conf ->#include http.conf  
    6.

二、測試上傳文件： 

 
     
 
  
  1.  cd ~   
    2.  
 
  
  2.  fdfs_test /etc/fdfs/client.conf upload FastDFS_v3.03.tar.gz  
    3.

執行成功後會出現以下提示： 

 
     
 
  
  1.  This is FastDFS client test program v3.03   
    2.  
 
  
  2.    
    3.  
 
  
  3.  Copyright (C) 2008, Happy Fish / YuQing   
    4.  
 
  
  4.    
    5.  
 
  
  5.  FastDFS may be copied only under the terms of the GNU General   
    6.  
 
  
  6.  Public License V3, which may be found in the FastDFS source kit.   
    7.  
 
  
  7.  Please visit the FastDFS Home Page http://www.csource.org/   
    8.  
 
  
  8.  for more detail.   
    9.  
 
  
  9.    
    10.  
 
  
  10.  [2011-10-21 15:14:59] INFO - base_path=/home/fastdfs, connect_timeout=30, network_timeout=60, tracker_server_count=1, anti_steal_token=0, anti_steal_secret_key length=0  
    11.  
 
  
  11.    
    12.  
 
  
  12.  tracker_query_storage_store_list_without_group:   
    13.  
 
  
  13.  server 1. group_name=group1, ip_addr=173.252.200.228, port=23000  
    14.  
 
  
  14.    
    15.  
 
  
  15.  group_name=group1, ip_addr=173.252.200.228, port=23000  
    16.  
 
  
  16.  storage_upload_by_filename   
    17.  
 
  
  17.  group_name=group1, remote_filename=M00/00/00/rfzI5E6hG_O5wNKxAAVAc72y1Jc.tar.gz   
    18.  
 
  
  18.  source ip address: 173.252.200.228   
    19.  
 
  
  19.  file timestamp=2011-10-21 15:14:59   
    20.  
 
  
  20.  file size=344179  
    21.  
 
  
  21.  file crc32=3182613655  
    22.  
 
  
  22.  file url: http://173.252.200.228:9090/group1/M00/00/00/rfzI5E6hG_O5wNKxAAVAc72y1Jc.tar.gz   
    23.  
 
  
  23.  storage_upload_slave_by_filename   
    24.  
 
  
  24.  group_name=group1, remote_filename=M00/00/00/rfzI5E6hG_O5wNKxAAVAc72y1Jc_big.tar.gz   
    25.  
 
  
  25.  source ip address: 173.252.200.228   
    26.  
 
  
  26.  file timestamp=2011-10-21 15:14:59   
    27.  
 
  
  27.  file size=344179  
    28.  
 
  
  28.  file crc32=3182613655  
    29.  
 
  
  29.  file url: http://173.252.200.228:9090/group1/M00/00/00/rfzI5E6hG_O5wNKxAAVAc72y1Jc_big.tar.gz  
    30.

三、測試下載文件

在瀏覽器中，輸入上圖中的url地址，tracker server會自動重定向到存儲文件的storage server，文件下載成功。至此，已經成功搭建了FastDFS，編寫你本身的client來進行訪問吧！

相關文章
相關標籤/搜索
每日一句
    每一个你不满意的现在，都有一个你没有努力的曾经。
本站公眾號
   歡迎關注本站公眾號,獲取更多信息
聯繫我們 最近搜索 最新文章 沪ICP备13005482号-10 MyBatis教程 SQL 教程 MySQL教程 Java 教程 Thymeleaf 教程 Hibernate教程 Spring教程 Redis教程