當(dāng)前位置：首頁(yè) > 编程资源 > 编程问答 >内容正文

编程问答

fastdfs 一个group内实现按照不同的项目,指定路径存储.

發(fā)布時(shí)間：2023/12/9 编程问答 32 豆豆

生活随笔收集整理的這篇文章主要介紹了 fastdfs 一个group内实现按照不同的项目,指定路径存储. 小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.

為什么80%的碼農(nóng)都做不了架構(gòu)師？>>> ??

環(huán)境介紹:

1: 公司目前有5個(gè)項(xiàng)目 A B C D E ?日后可能會(huì)有所增加.

2: 使用fastdfs存儲(chǔ)這5各項(xiàng)目的文件,要求各各項(xiàng)目的文件分開存儲(chǔ),也就是每個(gè)項(xiàng)目的文件存儲(chǔ)到一個(gè)固定的位置.

3: ?三臺(tái)機(jī)器ip地址分配如下

????tracker角色 IP:192.168.1.219 ?

????storageA角色 IP: 192.168.1.215

????storageB角色 ?IP:192.168.1.216

4: 這里主要記錄下實(shí)現(xiàn)思路,具體的配置方法都很簡(jiǎn)單.

---------tracker這臺(tái)機(jī)器 ?主要有兩個(gè)服務(wù) fdfs_tracker ? 和 nginx---------------

tracker.conf的配置文件很簡(jiǎn)單這里不貼出來(lái)了?

nginx的配置文件如下: ? nginx負(fù)責(zé)把訪問(wèn)請(qǐng)求轉(zhuǎn)發(fā)給后臺(tái)的兩臺(tái)storage.

[root@trackerB ~]# cat /usr/local/nginx/conf/nginx.conf | grep -v "#" | grep -v "^$"

user ?www;

worker_processes ?1;

error_log ?logs/error.log;

events {

? ? worker_connections ?1024;

}

http {

? ? include ? ? ? mime.types;

? ? default_type ?application/octet-stream;

? ? server_names_hash_bucket_size 128;

? ? client_header_buffer_size 32k;

? ? large_client_header_buffers 4 32k;

? ? client_max_body_size 300m;

? ? sendfile ? ? ? ?on;

? ? tcp_nopush ? ? on;

? ? keepalive_timeout ?120;

? ? gzip ?on;

? ? gzip_min_length 1k;

? ? gzip_buffers 4 16k;

? ? gzip_http_version 1.1;

? ? gzip_comp_level 2;

? ? gzip_types text/plain application/x-javascript text/css application/xml;

? ? gzip_vary on;

? ? gzip_disable "MSIE[1-6].";

? ? proxy_redirect off;

? ? proxy_set_header Host $http_host;

? ? proxy_set_header X-Real-IP $remote_addr;

? ? proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;

? ? proxy_connect_timeout 90;

? ? proxy_send_timeout 90;

? ? proxy_read_timeout 90;

? ? proxy_buffer_size 16k;

? ? proxy_buffers 4 64k;

? ? proxy_busy_buffers_size 128k;

? ? proxy_temp_file_write_size 128k;

? ? log_format ?access ?'$remote_addr - $remote_user [$time_local] "$request" '

? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?'$status $body_bytes_sent "$http_referer" '

? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?'"$http_user_agent" "$upstream_addr" "$upstream_response_time" "$host"';

? ? proxy_cache_path /var/cache/nginx/proxy_cache levels=1:2 keys_zone=http-cache:500m max_size=10g inactive=30d;

? ? proxy_temp_path /var/cache/nginx/proxy_cache/tmp;

? ? upstream group1 {

? ? ? ? server 192.168.1.215:80;

? ? ? ? server 192.168.1.216:80;

? ? }

? ? server {

? ? ? ? listen ? ? ? 80;

? ? ? ? server_name ?image.ty.com;

? ? location ~* /group1/(M00|M01|M02|M03|M04|M05) {????????????????#這里我使用了6個(gè)存儲(chǔ)路徑,每個(gè)項(xiàng)目一個(gè)

? ? ? ? proxy_next_upstream http_502 http_504 error timeout invalid_header;

? ? ? ? proxy_cache http-cache;

? ? ? ? proxy_cache_valid 200 304 12h;

? ? ? ? proxy_cache_key $uri$is_args$args;

? ? ? ? proxy_pass http://group1;

? ? ? ? expires 3d;

? ? }

? ? access_log ?logs/image.access.log ?access;

? ? ? ? location / {

? ? ? ? ? ? root ? html;

? ? ? ? ? ? index ?index.html index.htm;

? ? ? ? }

? ? ? ? error_page ? 500 502 503 504 ?/50x.html;

? ? ? ? location = /50x.html {

? ? ? ? ? ? root ? html;

? ? ? ? }

? ? }

? ? include /usr/local/nginx/conf/vhost/*.conf;

}

---------------storage角色的兩臺(tái)機(jī)器-------------------

這兩天機(jī)器的配置完全一樣. 都運(yùn)行了fdfs_storage 和 nginx , 其中nginx添加了fastdfs模塊

fdfs_storage的配置文件storage.conf內(nèi)容如下:

[root@localhost ~]# cat /etc/fdfs/storage.conf | grep -v "^#" | grep -v "^$"

disabled=false

group_name=group1

bind_addr=

client_bind=true

port=23000

connect_timeout=30

network_timeout=60

heart_beat_interval=30

stat_report_interval=60

base_path=/data/

max_connections=256

buff_size = 256KB

accept_threads=1

work_threads=4

disk_rw_separated = true

disk_reader_threads = 1

disk_writer_threads = 1

sync_wait_msec=50

sync_interval=0

sync_start_time=00:00

sync_end_time=23:59

write_mark_file_freq=500

store_path_count=6????????????????一共?store_path0-5?六個(gè)存儲(chǔ)路徑.

store_path0=/data/data1

store_path1=/data/data2

store_path2=/data/data3

store_path3=/data/data4

store_path4=/data/data5

store_path5=/data/data6

subdir_count_per_path=256

tracker_server=192.168.1.219:22122 ? ??

log_level=info

run_by_group=

run_by_user=

allow_hosts=*

file_distribute_path_mode=0

file_distribute_rotate_count=100

fsync_after_written_bytes=0

sync_log_buff_interval=10

sync_binlog_buff_interval=10

sync_stat_file_interval=300

thread_stack_size=512KB

upload_priority=10

if_alias_prefix=

check_file_duplicate=0

file_signature_method=hash

key_namespace=FastDFS

keep_alive=0

use_access_log = false

rotate_access_log = false

access_log_rotate_time=00:00

rotate_error_log = false

error_log_rotate_time=00:00

rotate_access_log_size = 0

rotate_error_log_size = 0

log_file_keep_days = 0

file_sync_skip_invalid_record=false

use_connection_pool = false

connection_pool_max_idle_time = 3600

http.domain_name=

http.server_port=8888

nginx配置文件如下

[root@localhost ~]# cat /usr/local/nginx/conf/nginx.conf | grep -v "^#" | grep -v "^$"

worker_processes ?1;

events {

? ? worker_connections ?1024;

}

http {

? ? include ? ? ? mime.types;

? ? default_type ?application/octet-stream;

? ? log_format ?main ?'$remote_addr - $remote_user [$time_local] "$request" '

? ? ? ? ? ? ? ? ? ? ? '$status $body_bytes_sent "$http_referer" '

? ? ? ? ? ? ? ? ? ? ? '"$http_user_agent" "$http_x_forwarded_for"';

? ? access_log ?logs/access.log ?main;

? ? sendfile ? ? ? ?on;

? ? keepalive_timeout ?65;

? ? client_max_body_size 2m;

? ? server {

? ? ? ? listen ? ? ? 80;

? ? ? ? server_name ?localhost;

? ? ? ? #charset koi8-r;

? ? ? ? access_log ?logs/host.access.log ?main;

? ? ? ? location /group1/M00 { ? ? ? ? ? ? ? ? ? ? ? ?#根據(jù)請(qǐng)求路徑配置對(duì)應(yīng)的存儲(chǔ)路徑.

? ? ? ? ? ? root ? /data/data1;

? ? ? ? ? ? ngx_fastdfs_module; ? ? ? ? ? ? ? ? ? ? ?#使用nginxmodule處理請(qǐng)求

? ? ? ? }

? ? ? ? location /group1/M01 {

? ? ? ? ? ? root ? /data/data2;