关于Linux单机、集群部署FastDFS分布式文件系统的步骤。
集群部署:2台tarcker服务器,2台storage服务器。
192.168.201.86 ---------(trackerd+storage+nginx)
192.168.201.87 ---------(trackerd)
192.168.201.88 ---------(storage)
所有tracker机都要安装步骤一、二。
所有storage机都要安装步骤一、三、想要支持浏览器还要安装步骤四、五。
单机部署安装步骤一、二、三、四、五。
一、安装libfsatcomon、libevent
1.首先检查依赖环境gcc安装没有,如果没有安装,先安装
yum install gcc* make*
yum install perl libevent ------------装fastDFS的依赖工具
2.安装libfastcommon
# 切换目录
cd /usr/local --------------------解压到此目录下或者移动(复制)到此目录下再进行解压。
# 解压(没有unzip命令的同学自行安装:yum –y install unzip*)
unzip libfastcommon-master.zip -d libfastcommon-master
# 进到解压后的文件目录下
cd libfastcommon-master
# 进行安装
./make.sh
./make.sh install
3.fastDFS需要安装libevent比较新的版本,将本机的比较低的版本卸载了。
ls -al /usr/lib | grep libevent
-------------------查看是否已安装,如果已安装且版本低于1.3,则先进行卸载。
rpm -qa libevent
libevent-1.4.13-1.el6.x86_64
rpm -e --nodeps libevent
安装一个最新稳定版
cd /usr/local
wget https://github.com/downloads/libevent/libevent/libevent-2.0.18-stable.tar.gz
tar zxvf libevent-2.0.18-stable.tar.gz
cd libevent-2.0.18-stable
./configure
make && make install
为libevent创建软链接到/lib库下,64位系统对应/lib64
ln -s /usr/local/lib/libevent* /lib/
ln -s /usr/local/lib/libevent* /lib64/
二、安装FastDFS
Cd /usr/local
wget http://fastdfs.googlecode.com/files/FastDFS_v3.06.tar.gz
tar zxvf FastDFS_v3.06.tar.gz
cd FastDFS
./make.sh
./make.sh install
如果安装成功,则在/etc/fdfs下会生成3个文件。

1.配置tracker节点
Mkdir –p /home/tao/fastdfs
cd /etc/fdfs
cp tracker.conf.sample tracker.conf
#修改的文件内容如下(基础配置,不考虑性能调优情况下):
vi tracker.conf base_path=/home/tao/fastdfs
#设置 tracker 的数据文件和日志目录(需预先创建)
http.server_port=6666 (默认为8080,不建议修改,除非已经被其他应用占用,我这里更改了。)
cp client.conf.sample client.conf
cp storage.conf.sample storage.conf -------------剩余两个配置文件也要复制一份。
启动 tracker
/usr/local/FastDFS/init.d/fdfs_trackerd start /etc/fdfs/tracker.conf ------------如果显示没有这个目录,则在/usr/local/FastDFS/init.d下没有fdfs_trackerd这个启动文件,可用find / -name “fdfs_trackerd*”查找其路径,复制到路径下即可。
也可以直接做软连接:
ln -s /usr/bin/fdfs_trackerd /usr/local/bin
ln -s /usr/bin/stop.sh /usr/local/bin
ln -s /usr/bin/restart.sh /usr/local/bin
Service fdfs_trackerd start -----------------用命令也可以激活服务。
成功启动如下图:
用此命令查看端口是否被侦听
设置开机启动
Vi /etc/rc.d/rc.local
/usr/local/bin/fdfs_trackerd /etc/fdfs/tracker.conf
Service fdfs trackerd start
三. 配置并启动 storage server节点
配置 storage.conf
vim /etc/fdfs/storage.conf
base_path=/home/tao/fastdfs
store_path0=/home/tao/fastdfs
tracker_server=192.168.201.86:22122
启动 storage
/usr/local/bin/fdfs_storaged /etc/fdfs/storage.conf
Service fdfs_storaged start
检查服务端口是否开启,成功启动则如下图:

设置开机启动
vim /etc/rc.d/rc.local
/usr/local/bin/fdfs_storaged /etc/fdfs/storage.conf
Service fdfs_storaged start
检查存储服务是否注册:命令:/usr/bin/fdfs_monitor /etc/fdfs/storage.conf
成功链接则如下图:ACTIVE(激活在线)

四 .配置client.conf文件
Cd /etc/fdfs/
Cp client.conf.sample client.conf
Vi client.conf
base_path=/home/tao/fastdfs
tracker_server=192.168.201.86:22122
http.tracker_server_port=8080
测试上传:
Mkdir test.txt
/usr/bin/fdfs_test /etc/fdfs/client.conf upload /目标文件路径
发现报错:
此处报错是因为text.txt/是一个目录而不是文件,在其下touch一个test再次上传则成功,如下图:

如果上传错误,可能是防火墙没有放行端口。这里举例两种防火墙的添加端口。
vi /etc/sysconfig/iptables
添加:
-A INPUT -m state --state NEW -m tcp -p tcp --dport 22122/23000/8080 -j ACCEPT
#重启防火墙
service iptables restart
firewall-cmd --zone=public --remove-port=22122/23000/8080/tcp –permanent ------添加端口
firewall-cmd –reload ----------重启防火墙。
启动nginx : /opt/nginx/sbin/nginx
(重启 Nginx 的命令为:/opt/nginx/sbin/nginx -s reload)
其他命令:

五 。此时可以上传但是不能浏览器访问和下载。需要安装支持服务的插件。
安装NGINX,使其支持HTTP协议访问。
需要重新编译libevent
解压:tar -zxvf fastdfs-nginx-module_v1.16.tar.gz
进入vi config
修改:CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon"

# 将FastDFS-nginx-module/src下的mod_FastDFS.conf拷贝至/etc/fdfs/下
cp mod_fastdfs.conf /etc/fdfs/
# 修改mod_fastdfs.conf的内容
vi /etc/fdfs/mod_fastdfs.conf
base_path=/data/fastdfs-storage/logs tracker_server=192.168.201.86:22122 #tracker_server=192.168.201.88:22122(多个tracker配置多行) url_have_group_name=true
#url中包含group名称
store_path0=/data/fastdfs-storage
#指定文件存储路径
修改配置文件后进行保存,之后将http.conf 与 mime.types拷贝到/etc/fdfs下
# 切换盘符
cd /usr/local/FastDFS/conf/
# 拷贝文件
cp http.conf mime.types /etc/fdfs/
安装nginx:
Mkdir /var/temp/nginx/client -----------创建虚拟存储路径
# 解压 tar -zxvf nginx-1.8.0.tar.gz # 切换目录 cd nginx-1.8.0 # 环境准备 yum install -y pcre pcre-devel yum install -y zlib zlib-devel yum install -y openssl openssl-devel yum install gd-devel # 执行 ./configure \ --prefix=/data/nginx \
--pid-path=/var/run/nginx/nginx.pid \
--lock-path=/var/lock/nginx.lock \
--error-log-path=/var/log/nginx/error.log \
--http-log-path=/var/log/nginx/access.log \
--with-http_gzip_static_module \
--http-client-body-temp-path=/var/temp/nginx/client \
--http-proxy-temp-path=/var/temp/nginx/proxy \
--http-fastcgi-temp-path=/var/temp/nginx/fastcgi \
--http-uwsgi-temp-path=/var/temp/nginx/uwsgi \
--http-scgi-temp-path=/var/temp/nginx/scgi \
--add-module=/usr/local/fastdfs-nginx-module/src \
--with-http_image_filter_module
# 执行 make && make install
# 切换目录 cd /data/nginx/conf/
# 修改配置文件 vi nginx.conf
#添加location location /group1/M00/{ ngx_fastdfs_module; }
ln -s /home/tao/fastdfs/data /mnt/xfsd/fastdfs/storage/data/M00
--------------这样做的目的是将真实路径映射到访问路径上

当启动nginx报错:nginx: [emerg] open() "/usr/local/nginx/logs/nginx.pid" failed (2: No such file or directory)
只要在 /usr/local/nginx/下创建logs目录即可解决。
注意:实验中storage.conf里的http端口号要和nginx.conf以及client.conf的一致。
确认三个服务都起来,端口处于侦听状态。
浏览器访问之前上传的文件:
报400 Bad Request错误,如下图:

解决方法:vi /etc/fdfs/mod_fastdfs.conf

看仔细了,我把这个英文单词写错了,耽误了一天时间排错。改掉则访问成功。

报404 Not Found错误

解决方法:路径格式不对。/group1/M00/00/00 没有正确映射到真实存储路径/home/tao/fastdfs/data/00/00 上。
关于Linux单机、集群部署FastDFS分布式文件系统的步骤。的更多相关文章
- Redis基本概念、基本使用与单机集群部署
1. Redis基础 1.1 Redis概述 Redis是一个开源.先进的key-value存储,并用于构建高性能.可扩展的应用程序的完美解决方案. Redis从它的许多竞争继承了三个主要特点: ...
- centos7下部署FastDFS分布式文件系统
前言 项目中用到文件服务器,有朋友推荐用FastDFS,所以就了解学习了一番,感觉确实颇为强大,在此再次感谢淘宝资深架构师余庆大神开源了如此优秀的轻量级分布式文件系统,本篇文章就记录一下FastDFS ...
- 手把手教你Linux服务器集群部署.net网站 - 让MVC网站运行起来
一.Linux下面安装需要软件 我们这里需要安装的软件有: 1) Mono 3.2.8 : C#跨平台编译器,能使.Net运行与Linux下,目前.net 4.0可以完美运行在该平台下 2) ngin ...
- 手把手教你Linux服务器集群部署.net网站 - Linux系统安装和设置
在开源软件已成趋势化的今天,微软这‘老古董’也开始向开源方向发力,这对我们.NET开发者是极大的喜讯.而在开源软件中, Linux就是其中一个优秀的代表,几乎各行业和计算机有关的都有它的身影,其中一点 ...
- Docker容器与容器云之Docker单机集群部署案例
准备工作: CentOS 7安装docker: #yum -y install docker 1.获取节点所需镜像 --主机执行 #docker pull django #docker pull ha ...
- Presto集群部署
前言: 随着大数据的普及,大部分企业的大数据查询与统计渐渐出现瓶颈.虽说存储方面有分布式的HDFS,HBSE,MongoDB等可以应对,但是面对千万级别(1x10^7)界别的数据量查询时,以上组件也不 ...
- 分布式FastDFS集群部署
FastDFS FastDFS的作者余庆在其 GitHub 上是这样描述的:"FastDFS is an open source high performance distributed f ...
- Dubbo+zookeeper构建高可用分布式集群(二)-集群部署
在Dubbo+zookeeper构建高可用分布式集群(一)-单机部署中我们讲了如何单机部署.但没有将如何配置微服务.下面分别介绍单机与集群微服务如何配置注册中心. Zookeeper单机配置:方式一. ...
- 分布式监控工具Ganglia 介绍 与 集群部署.
如果你目的很明确就是冲着标题来的,不爱看我唠叨,请直接进入第二个分割线之后的内容. 其实之前就是有做Swift监控平台的打算的,但是因为没什么硬性需求么,也不要紧的,就一直搁置了.最近实验室来了个大二 ...
随机推荐
- js __proto__ 和prototype的联系
1.Javascript中所有的对象都是Object的实例,并继承Object.prototype的属性和方法,也就是说,Object.prototype是所有对象的爸爸.(个人感觉搞清楚这一点很重要 ...
- axios的中文使用文档
axios 基于promise用于浏览器和node.js的http客户端 原文链接 lewis1990@amoy 特点 支持浏览器和node.js 支持promise 能拦截请求和响应 能转换请求和响 ...
- 【D3D12学习手记】The Command Queue and Command Lists
GPU有一个命令队列,CPU通过Direct3D API将命令提交到队列里来使用命令列表(command lists),如下图.当一套命令(a set of commands)已经被提交到命令队列,他 ...
- keystone入口manage.py
/opt/stack/keystone/keystone/cmd/manage.py OpenStack所有项目都是基于Python开发,并且都是标准的Python项目,通过setuptools工具管 ...
- SQL Server 2005 和自增长主键identity说再见——NEWSEQUENTIALID()(转载)
在SQL Server 2005环境下,表的主键应该怎样设计.目前主要用到的主键方案共三种: 自动增长主键 手动增长主键 UNIQUEIDENTIFIER主键 1.先说自动增长主键,它的优点是简单,类 ...
- app测试自动化操作方法之三
首先导包: from appium.webdriver.common.touch_action import TouchAction #(导包指针定位滑动手势密码那个) #设置手势密码(前提是在设备上 ...
- 实现文件上传功能(FileUpload组件)
文件上传: 项目中经常用到文件上传. 自己实现文件上传,使用文件上传组件fileupload组件 1.指定表单类型为文件上传, enctype=”multipart/form-data” 2.提交方式 ...
- nginx reload的原理
nginx启动时,会启动两个进程: 一个是Master进程和worker进程.改变配置后nginx做的事1)改变了nginx配置之后,HUP signal的信号需要发送给主进程.2)主进程首先会检测新 ...
- 记一次 Vultr配置
这里不想排版,因为心情复杂. 第一次搞这个VPS,真的是很气人,由于中英文的关系我一开始就误操作了,让VPS一直挂载着Ubuntu18.10,所以系统一直是在光盘的引导界面,这个问题知道我注册后的四个 ...
- 【VS开发】static、extern分析总结
引用请注明出处:http://blog.csdn.net/int64ago/article/details/7396325 对于写了很多小程序的人,可能static和extern都用的很少,因为sta ...