实战:docker搭建FastDFS文件系统并集成SpringBoot
实战:docker搭建FastDFS文件系统并集成SpringBoot
前言
15年的时候,那时候云存储还远远没有现在使用的这么广泛,归根结底就是成本和安全问题,记得那时候我待的公司是做建站开发的,前期用了自建mongodb的GridFS来存文件,
后来改为fastDFS,今天我们来聊聊FastDFS.
简介
fastDFS 是以C语言开发的一项开源轻量级分布式文件系统,他对文件进行管理,主要功能有:文件存储,文件同步,文件访问(文件上传/下载),特别适合以文件为载体的在线服务,如图片网站,视频网站等。
特性如下:
- 适合类型:4KB~500MB
- 文件分布:小文件合并存储不分片处理
- 备份机制:组内冗余备份
- 通讯协议接口:Api 和 HTTP
- 开发语言: C语言
- 用户和社群:主要是国内用户群体
核心概念
FastDFS 服务端有两个核心概念:跟踪器(tracker)和存储节点(storage)。
前者起负载均衡和调度作用,后者则是提供容量存储和备份。
这两个概念理解清楚了有助于以下的服务端搭建。
Docker搭建服务端
Docker安装和入门之类的就不多做讲解了,以前也写过不少,没看过的读者可以从历史页面搜搜温习以下。
本机以Mac环境开启Docker服务进行安装,其他环境都是基于Docker环境的大同小异。
1.运行命令查找镜像
docker search fastdfs

2.下载图中所示镜像
docker pull delron/fastdfs
我这边已经下载了,所以执行更新操作

如果是没下载镜像的坐等下载完就行了~
下载完成以后查看镜像:
docker images

3.启动跟踪器(tracker)容器服务
docker run -d --name tracker -p 22122:22122 -v ~/docker_work/tracker:/var/fdfs delron/fastdfs tracker

这样就启动起来了,容器默认端口是22122。
启动后在挂载宿主目录下生成了这两个目录

4.启动存储服务器
在启动存储服务器之前,我们需要查询跟踪服务器的ip,启动容器的时候需要用到。
以下命令查看所有容器ip:
docker inspect -f='{{.Name}} {{.NetworkSettings.IPAddress}} {{.HostConfig.PortBindings}}' $(docker ps -aq)

172.17.0.2,拿个小本本记下来
当然,宿主机有映射也可以直接用宿主机的Ip 192.168.3.112
我这边就直接用宿主机ip了,
docker run -d --name storage -p 8888:8888 -p 23000:23000 -e TRACKER_SERVER=192.168.3.112:22122 -v ~/docker_work/storage:/var/fdfs -e GROUP_NAME=group1 delron/fastdfs storage
其中8888为该镜像自带Nginx对应的访问端口,23000是storage服务端口。
如果大家需要修改对应的端口和配置,自行百度一下就好,这里就不多介绍了。
ping一下端口看服务起来没有:

5.验证图片服务器的服务
服务器搭建好之后,我们进入容器使用命令来验证下是否可以上传。
首先往挂载目录放一张图片
cp Downloads/ewm.jpg ~/docker_work/storage
然后进入容器,首次进入发现是在nginx目录下,切换到/var/fdfs
执行文件上传命令,相关命令如下:
docker exec -it storage bash
ls
cd /var/fdfs
/usr/bin/fdfs_upload_file /etc/fdfs/client.conf ewm.jp
相关截图如下:

命令执行成功后会返回文件path后缀,我们贴到浏览器就可以访问了。

至此图片服务器就搞定了,我们接下来开始集成程序来玩它了。
6.创建SpringBoot程序并集成fastdfs依赖
这里的封装依赖找的一个开源的轮子
地址:https://github.com/tobato/FastDFS_Client
pom文件
<dependency>
<groupId>com.github.tobato</groupId>
<artifactId>fastdfs-client</artifactId>
<version>1.26.1-RELEASE</version>
</dependency>
以下是项目集成目录结构图和PostMan测试调用,就不一个个类贴来贴去了,代码都在Github自取就行了。

Postman调用

访问

总结
本文以mac环境为例,演示了如何搭建图片服务器和测试,并结合客户端SpringBoot项目封装和调用图片服务器api,下次我们讲讲MongoDb的GridFS,看看到底谁更香呢?
本文Java集成源代码:https://github.com/pengziliu/GitHub-code-practice
实战:docker搭建FastDFS文件系统并集成SpringBoot的更多相关文章
- 使用docker搭建FastDFS文件系统
1.首先下载FastDFS文件系统的docker镜像 docker search fastdfs 2.使用docker镜像构建tracker容器(跟踪服务器,起到调度的作用): docker run ...
- Docker中搭建FastDFS文件系统(多图)
关于FastDFS FastDFS 是以 C 语言开发的一项开源轻量级分布式文件系统,他对文件进行管理,主要功能有:文件存储,文件同步,文件访问(文件上传/下载)等,特别适合以文件为载体的在线服务,如 ...
- 一、手把手教你docker搭建fastDFS文件上传下载服务器
在搭建fastDFS文件上传下载服务器之前,你需要准备的有一个可连接的linux服务器,并且该linux服务器上已经安装了docker,若还有没安装docker的,先百度自行安装docker. 1.执 ...
- 使用docker搭建FastDFS
拉取镜像(使用docker-componse可以忽略) [root@localhost ~]# docker pull phinexdaz/fdfs_tracker [root@localhost ~ ...
- 云存储?不依赖三方服务自己也可以搞,利用Docker来搭建分布式文件系统FastDfs
原文转载自「刘悦的技术博客」https://v3u.cn/a_id_78 对于文件存储来说,一般情况下简单的处理就是在Django配置文件中配置存储目录,按照规则对文件进行上传或者下载. 实际上,当文 ...
- ASP.NET Core & Docker & Jenkins 零基础持续集成实战
原文:ASP.NET Core & Docker & Jenkins 零基础持续集成实战 一.本系列教程说明 源代码管理工具:Gogs 持续集成工具:Jenkins 容器:Docker ...
- 【Linux】【自学笔记】docker搭建一个spring-boot程序
写在开始 最近捣腾Linux,安装虚拟机VMware并安装了CentOS 7系统,开始研究Linux,但是无从下手,就结合工作中用到的东西一步一步研究,事实并不是那么顺利.特此开博客,记录在过程 ...
- docker搭建elasticsearch、kibana,并集成至spring boot
步骤如下: 一.基于docker搭建elasticsearch环境 1.拉取镜像 docker pull elasticsearch5.6.8 2.制作elasticsearch的配置文件 maste ...
- IDEA 集成 Docker 插件实现一键远程部署 SpringBoot 应用,无需三方依赖,开源微服务全栈项目有来商城云环境的部署方式
一. 前言 最近有些童鞋对开源微服务商城项目 youlai-mall 如何部署到线上环境以及项目中 的Dockerfile 文件有疑问,所以写了这篇文章做个答疑以及演示完整的微服务项目发布到线上的流程 ...
随机推荐
- docker安装,卸载和入门
Docker 简介 背景 开发和运维之间因为环境不同而导致的矛盾 集群环境下每台机器部署相同的应用 DevOps(Development and Operations) 简介 Docker是一个开源的 ...
- Howdoo欢迎Mitel成为内容发布支持者
原文链接:https://medium.com/howdoo/howdoo-welcomes-mitel-as-a-launch-supporter-4c40027d4dd1 “Mitel很高兴能够成 ...
- 还能这么玩?用VsCode画类图、流程图、时序图、状态图...不要太爽!
文章每周持续更新,各位的「三连」是对我最大的肯定.可以微信搜索公众号「 后端技术学堂 」第一时间阅读(一般比博客早更新一到两篇) 软件设计中,有好几种图需要画,比如流程图.类图.组件图等,我知道大部分 ...
- 数据可视化之DAX篇(二)Power BI中的度量值和计算列,你搞清楚了吗?
https://zhuanlan.zhihu.com/p/75462046 对于初学者,总是会把度量值和计算列搞混,我也经常碰到这样的问题,有些星友用文章中的代码总是报错,发给我一看,才知道TA把本来 ...
- 精通java并发-wait,notify和notifyAll的总结(含案例)
目前CSDN,博客园,简书同步发表中,更多精彩欢迎访问我的gitee pages wait,notify和notifyAll 总结 在调用wait方法时,线程必须要持有被调用对象的锁,当调用wait方 ...
- Unity-JobSystem
NativeContainer 为什么 为解决Job之间数据处理结果的隔离问题. 是什么 NativeContainer是托管的值类型,可以相对安全的操作native内存. 注意 不能两个job同时写 ...
- 2020牛客暑期多校训练营(第一场)H Minimum-cost Flow
Minimum-cost Flow 题目:给n个点,m条边.接下来m行包含(a,b,c),即a,b之间有单位流量代价为c的边.接下来有q个问题,每个问题给定(x,y),即假设每条边的容量为x/y时,从 ...
- Go的100天之旅-03变量
变量 变量介绍 变量这个词来源于数学,类似方程中的x.y,代表的是存储在计算机中的值.这里主要介绍Go和其它编程语言不一样的地方,在前面我们提到过,Go是一门静态语言.静态语言区别动态语言一个重要的特 ...
- JavaScript 基础 学习 (一)
JavaScript 基础 学习 获取页面中的元素的方法 作用:通过各种方式获取页面中的元素 比如:id,类名,标签名,选择器 的方式来获取元素 伪数组: 长的和数组差不多,也是按照索引排 ...
- Qt-线程的使用
1 简介 参考视频:https://www.bilibili.com/video/BV1XW411x7NU?p=74 使用多线程的好处:提高应用程序响应速度.使多CPU更加高效.改善程序结构. 在Q ...