yl197837 发表于 2015-9-10 09:23:32

FastDFS配置文件(storage.conf)


[*]# 该配置文件是否生效
[*]# false:生效
[*]# true:无效
[*]disabled=false
[*]
[*]# 本storage server所属组名
[*]group_name=group1
[*]
[*]# 绑定IP
[*]# 后面为绑定的IP地址 (常用于服务器有多个IP但只希望一个IP提供服务)。
[*]# 如果不填则表示所有的(一般不填就OK),相信较熟练的SA都常用到类似功能,
[*]# 很多系统和应用都有
[*]bind_addr=
[*]
[*]# bind_addr通常是针对server的。当指定bind_addr时,本参数才有效。
[*]# 本storage server作为client连接其他服务器(如tracker server、其他storage server),是否绑定bind_addr。
[*]# if bind an address of this host when connect to other servers
[*]# (this storage server as a client)
[*]# true for binding the address configed by above parameter: "bind_addr"
[*]# false for binding any address of this host
[*]client_bind=true
[*]
[*]# storage server服务端口
[*]port=23000
[*]
[*]# 连接超时(秒)
[*]# 默认值 30s
[*]connect_timeout=30
[*]
[*]# 网络超时(秒)
[*]# 默认值 30s
[*]network_timeout=60
[*]
[*]# 心跳间隔时间,单位为秒 (这里是指主动向tracker server 发送心跳)
[*]heart_beat_interval=30
[*]
[*]# storage server向tracker server报告磁盘剩余空间的时间间隔,单位为秒。
[*]stat_report_interval=60
[*]
[*]# base_path目录地址,根目录必须存在子目录会自动生成
[*]# 注 :这里不是上传的文件存放的地址,之前是的,在某个版本后更改了
[*]base_path=/home/yuqing/fastdfs
[*]
[*]# 最大连接数
[*]# default value is 256
[*]# more max_connections means more memory will be used
[*]max_connections=256
[*]
[*]# the buff size to recv / send data
[*]# 该参数必须大于8KB
[*]# 默认值是64KB
[*]# since V2.00
[*]buff_size = 256KB
[*]
[*]# w线程数,通常设置CPU数,值 <= 最大连接数
[*]# 默认值 4
[*]# since V2.00
[*]work_threads=4
[*]
[*]# V2.09引入本参数。设置为true,表示不使用操作系统的文件内容缓冲特性。
[*]# 如果文件数量很多,且访问很分散,可以考虑将本参数设置为true
[*]# if read / write file directly
[*]# if set to true, open file will add the O_DIRECT flag to avoid file caching
[*]# by the file system. be careful to set this parameter.
[*]# default value is false
[*]disk_rw_direct = false
[*]
[*]# 磁盘IO读写是否分离,缺省是分离的。
[*]# if disk read / write separated
[*]##false for mixed read and write
[*]##true for separated read and write
[*]# default value is true
[*]# since V2.00
[*]disk_rw_separated = true
[*]
[*]# 针对单个存储路径的读线程数,缺省值为1。
[*]# 读写分离时,系统中的读线程数 = disk_reader_threads * store_path_count
[*]# 读写混合时,系统中的读写线程数 = (disk_reader_threads + disk_writer_threads) * store_path_count
[*]# disk reader thread count per store base path
[*]# for mixed read / write, this parameter can be 0
[*]# default value is 1
[*]# since V2.00
[*]disk_reader_threads = 1
[*]
[*]# 针对单个存储路径的写线程数,缺省值为1。
[*]# 读写分离时,系统中的写线程数 = disk_writer_threads * store_path_count
[*]# 读写混合时,系统中的读写线程数 = (disk_reader_threads + disk_writer_threads) * store_path_count
[*]# disk writer thread count per store base path
[*]# for mixed read / write, this parameter can be 0
[*]# default value is 1
[*]# since V2.00
[*]disk_writer_threads = 1
[*]
[*]# 同步文件时,如果从binlog中没有读到要同步的文件,休眠N毫秒后重新读取。0表示不休眠,立即再次尝试读取。
[*]# 出于CPU消耗考虑,不建议设置为0。如何希望同步尽可能快一些,可以将本参数设置得小一些,比如设置为10ms
[*]# when no entry to sync, try read binlog again after X milliseconds
[*]# must > 0, default value is 200ms
[*]sync_wait_msec=50
[*]
[*]# 同步上一个文件后,再同步下一个文件的时间间隔,单位为毫秒,0表示不休眠,直接同步下一个文件
[*]# after sync a file, usleep milliseconds
[*]# 0 for sync successively (never call usleep)
[*]sync_interval=0
[*]
[*]# 允许系统同步的时间开始时间段 (默认是全天) 一般用于避免高峰同步产生一些问题而设定
[*]# storage sync start time of a day, time format: Hour:Minute
[*]# Hour from 0 to 23, Minute from 0 to 59
[*]sync_start_time=00:00
[*]
[*]# 允许系统同步的时间结束时间段 (默认是全天) 一般用于避免高峰同步产生一些问题而设定
[*]# storage sync end time of a day, time format: Hour:Minute
[*]# Hour from 0 to 23, Minute from 0 to 59
[*]sync_end_time=23:59
[*]
[*]# 同步完N个文件后,把storage的mark文件同步到磁盘
[*]# 注:如果mark文件内容没有变化,则不会同步
[*]# write to the mark file after sync N files
[*]# default value is 500
[*]write_mark_file_freq=500
[*]
[*]# 存放文件时storage server支持多个路径(例如磁盘)。这里配置存放文件的基路径数目,通常只配一个目录
[*]# path(disk or mount point) count, default value is 1
[*]store_path_count=1
[*]
[*]# 逐一配置store_path个路径,索引号基于0。注意配置方法后面有0,1,2 ......,需要配置0到store_path - 1。
[*]# 如果不配置base_path0,那边它就和base_path对应的路径一样。
[*]# store_path#, based 0, if store_path0 not exists, it's value is base_path
[*]# the paths must be exist
[*]store_path0=/home/yuqing/fastdfs
[*]#store_path1=/home/yuqing/fastdfs2
[*]
[*]# FastDFS存储文件时,采用了两级目录。这里配置存放文件的目录个数 (系统的存储机制,大家看看文件存储的目录就知道了)
[*]# 如果本参数只为N(如:256),那么storage server在初次运行时,会自动创建 N * N 个存放文件的子目录
[*]# subdir_count* subdir_count directories will be auto created under each
[*]# store_path (disk), value can be 1 to 256, default value is 256
[*]subdir_count_per_path=256
[*]
[*]# tracker_server 的列表 要写端口的哦 (再次提醒是主动连接tracker_server )
[*]# 有多个tracker server时,每个tracker server写一行
[*]# tracker_server can ocur more than once, and tracker_server format is
[*]#"host:port", host can be hostname or ip address
[*]tracker_server=10.0.14.145:22122
[*]#tracker_server=10.0.14.93:22122
[*]
[*]# 日志级别
[*]#standard log level as syslog, case insensitive, value list:
[*]### emerg for emergency
[*]### alert
[*]### crit for critical
[*]### error
[*]### warn for warning
[*]### notice
[*]### info
[*]### debug
[*]log_level=info
[*]
[*]# 指定运行该程序的用户组(不填 就是当前用户组,哪个启动进程就是哪个)
[*]run_by_group=
[*]
[*]# 操作系统运行FastDFS的用户 (不填 就是当前用户,哪个启动进程就是哪个)
[*]run_by_user=
[*]
[*]# 可以连接到此 tracker server 的ip范围(对所有类型的连接都有影响,包括客户端,storage server)
[*]# "*" means match all ip addresses, can use range like this: 10.0.1. or
[*]# host.domain.com, for example:
[*]# allow_hosts=10.0.1.
[*]# allow_hosts=host.domain.com
[*]allow_hosts=*
[*]
[*]# 0: 轮流存放,在一个目录下存储设置的文件数后(参数file_distribute_rotate_count中设置文件数),使用下一个目录进行存储。
[*]# 1: 随机存储,根据文件名对应的hash code来分散存储。
[*]# the mode of the files distributed to the data path
[*]# 0: round robin(default)
[*]# 1: random, distributted by hash code
[*]file_distribute_path_mode=0
[*]
[*]# 当上面的参数file_distribute_path_mode配置为0(轮流存放方式)时,本参数有效。
[*]# 当一个目录下的文件存放的文件数达到本参数值时,后续上传的文件存储到下一个目录中。
[*]# default value is 100
[*]file_distribute_rotate_count=100
[*]
[*]# 当写入大文件时,每写入N个字节,调用一次系统函数fsync将内容强行同步到硬盘。0表示从不调用fsync
[*]# call fsync to disk when write big file
[*]# 0: never call fsync
[*]# other: call fsync when written bytes >= this bytes
[*]# default value is 0 (never call fsync)
[*]fsync_after_written_bytes=0
[*]
[*]# 同步或刷新日志信息到硬盘的时间间隔,单位为秒
[*]# 注意:storage server 的日志信息不是时时写硬盘的,而是先写内存。
[*]# must > 0, default value is 10 seconds
[*]sync_log_buff_interval=10
[*]
[*]# 同步binglog(更新操作日志)到硬盘的时间间隔,单位为秒
[*]# 本参数会影响新上传文件同步延迟时间
[*]# sync binlog buff / cache to disk every interval seconds
[*]# default value is 60 seconds
[*]sync_binlog_buff_interval=10
[*]
[*]# 把storage的stat文件同步到磁盘的时间间隔,单位为秒。
[*]# 注:如果stat文件内容没有变化,不会进行同步
[*]# sync storage stat info to disk every interval seconds
[*]# default value is 300 seconds
[*]sync_stat_file_interval=300
[*]
[*]# 线程栈的大小。FastDFS server端采用了线程方式。
[*]# 对于V1.x,storage server线程栈不应小于512KB;对于V2.0,线程栈大于等于128KB即可。
[*]# 线程栈越大,一个线程占用的系统资源就越多。
[*]# 对于V1.x,如果要启动更多的线程(max_connections),可以适当降低本参数值。
[*]# thread stack size, should >= 512KB
[*]# default value is 512KB
[*]thread_stack_size=512KB
[*]
[*]# 本storage server作为源服务器,上传文件的优先级,可以为负数。值越小,优先级越高。
[*]# 这里就和 tracker.conf 中store_server= 2时的配置相对应了
[*]# the priority as a source server for uploading file.
[*]# the lower this value, the higher its uploading priority.
[*]# default value is 10
[*]upload_priority=10
[*]
[*]# the NIC alias prefix, such as eth in Linux, you can see it by ifconfig -a
[*]# multi aliases split by comma. empty value means auto set by OS type
[*]# default values is empty
[*]if_alias_prefix=
[*]
[*]# 是否检测上传文件已经存在。如果已经存在,则不存文件内容,建立一个符号链接以节省磁盘空间。
[*]# 这个应用要配合FastDHT 使用,所以打开前要先安装FastDHT
[*]# 1或yes 是检测,0或no 是不检测
[*]# if check file duplicate, when set to true, use FastDHT to store file indexes
[*]# 1 or yes: need check
[*]# 0 or no: do not check
[*]# default value is 0
[*]check_file_duplicate=0
[*]
[*]# 文件去重时,文件内容的签名方式:
[*]## hash: 4个hash code
[*]## md5:MD5
[*]# file signature method for check file duplicate
[*]## hash: four 32 bits hash code
[*]## md5: MD5 signature
[*]# default value is hash
[*]# since V4.01
[*]file_signature_method=hash
[*]
[*]# 当参数check_file_duplicate设定为1 或 yes时 (true/on也是可以的) , 在FastDHT中的命名空间。
[*]# namespace for storing file indexes (key-value pairs)
[*]# this item must be set when check_file_duplicate is true / on
[*]key_namespace=FastDFS
[*]
[*]# 与FastDHT servers 的连接方式 (是否为持久连接) ,默认是0(短连接方式)。
[*]# 可以考虑使用长连接,这要看FastDHT server的连接数是否够用。
[*]# set keep_alive to 1 to enable persistent connection with FastDHT servers
[*]# default value is 0 (short connection)
[*]keep_alive=0
[*]
[*]# 可以通过 #include filename 方式来加载 FastDHT servers的配置,装上FastDHT就知道该如何配置啦。
[*]# 同样要求 check_file_duplicate=1 时才有用,不然系统会忽略
[*]# fdht_servers.conf 记载的是 FastDHT servers 列表
[*]# you can use "#include filename" (not include double quotes) directive to
[*]# load FastDHT server list, when the filename is a relative path such as
[*]# pure filename, the base path is the base path of current/this config file.
[*]# must set FastDHT server list when check_file_duplicate is true / on
[*]# please see INSTALL of FastDHT for detail
[*]##include /home/yuqing/fastdht/conf/fdht_servers.conf
[*]
[*]# 是否将文件操作记录到access log
[*]# if log to access log
[*]# default value is false
[*]# since V4.00
[*]use_access_log = false
[*]
[*]# 是否定期轮转access log,目前仅支持一天轮转一次
[*]# if rotate the access log every day
[*]# default value is false
[*]# since V4.00
[*]rotate_access_log = false
[*]
[*]# access log定期轮转的时间点,只有当rotate_access_log设置为true时有效
[*]# rotate access log time base, time format: Hour:Minute
[*]# Hour from 0 to 23, Minute from 0 to 59
[*]# default value is 00:00
[*]# since V4.00
[*]access_log_rotate_time=00:00
[*]
[*]# 是否定期轮转error log,目前仅支持一天轮转一次
[*]# if rotate the error log every day
[*]# default value is false
[*]# since V4.02
[*]rotate_error_log = false
[*]
[*]# error log定期轮转的时间点,只有当rotate_error_log设置为true时有效
[*]# rotate error log time base, time format: Hour:Minute
[*]# Hour from 0 to 23, Minute from 0 to 59
[*]# default value is 00:00
[*]# since V4.02
[*]error_log_rotate_time=00:00
[*]
[*]# access log按文件大小轮转
[*]# 设置为0表示不按文件大小轮转,否则当access log达到该大小,就会轮转到新文件中
[*]# rotate access log when the log file exceeds this size
[*]# 0 means never rotates log file by log file size
[*]# default value is 0
[*]# since V4.02
[*]rotate_access_log_size = 0
[*]
[*]# error log按文件大小轮转
[*]# 设置为0表示不按文件大小轮转,否则当error log达到该大小,就会轮转到新文件中
[*]# rotate error log when the log file exceeds this size
[*]# 0 means never rotates log file by log file size
[*]# default value is 0
[*]# since V4.02
[*]rotate_error_log_size = 0
[*]
[*]# 文件同步的时候,是否忽略无效的binlog记录
[*]# if skip the invalid record when sync file
[*]# default value is false
[*]# since V4.02
[*]file_sync_skip_invalid_record=false
[*]
[*]# 是否使用连接池
[*]# default value is false
[*]# since V4.05
[*]use_connection_pool = false
[*]
[*]# 连接的空闲时间超过这个时间将被关闭,单位:秒
[*]# default value is 3600
[*]# since V4.05
[*]connection_pool_max_idle_time = 3600
[*]
[*]# 下面是http的配置了。如果系统较大,这个服务有可能支持不了,可以自行换一个webserver,我喜欢lighttpd,当然ng也很好了。
[*]# HTTP是否生效
[*]# true 失效
[*]# false 生效
[*]http.disabled=false
[*]
[*]# Web服务器的这个存储服务器上的端口
[*]# the port of the web server on this storage server
[*]http.server_port=8888
[*]
[*]# http.trunk_size表示读取文件内容的buffer大小(一次读取的文件内容大小),也就是回复给HTTP client的块大小。
[*]http.trunk_size=256KB
[*]
[*]# storage server上web server域名,通常仅针对单独部署的web server。这样URL中就可以通过域名方式来访问storage server上的文件了,
[*]# 这个参数为空就是IP地址的方式。
[*]# use the ip address of this storage server if domain_name is empty,
[*]# else this domain name will ocur in the url redirected by the tracker server
[*]http.domain_name=
[*]
[*]# HTTP服务的其他配置文件
[*]#include http.conf





来自为知笔记(Wiz)
页: [1]
查看完整版本: FastDFS配置文件(storage.conf)