实战:docker搭建FastDFS文件系统并集成SpringBoot

前言

15年的时候,那时候云存储还远远没有现在使用的这么广泛,归根结底就是成本和安全问题,记得那时候我待的公司是做建站开发的,前期用了自建mongodb的GridFS来存文件,

后来改为fastDFS,今天我们来聊聊FastDFS.

简介

fastDFS 是以C语言开发的一项开源轻量级分布式文件系统,他对文件进行管理,主要功能有:文件存储,文件同步,文件访问(文件上传/下载),特别适合以文件为载体的在线服务,如图片网站,视频网站等。

特性如下:

  • 适合类型:4KB~500MB
  • 文件分布:小文件合并存储不分片处理
  • 备份机制:组内冗余备份
  • 通讯协议接口:Api 和 HTTP
  • 开发语言: C语言
  • 用户和社群:主要是国内用户群体

核心概念

FastDFS 服务端有两个核心概念:跟踪器(tracker)和存储节点(storage)。

前者起负载均衡和调度作用,后者则是提供容量存储和备份。

这两个概念理解清楚了有助于以下的服务端搭建。

Docker搭建服务端

Docker安装和入门之类的就不多做讲解了,以前也写过不少,没看过的读者可以从历史页面搜搜温习以下。

本机以Mac环境开启Docker服务进行安装,其他环境都是基于Docker环境的大同小异。

1.运行命令查找镜像

docker search fastdfs

2.下载图中所示镜像

docker pull delron/fastdfs

我这边已经下载了,所以执行更新操作

如果是没下载镜像的坐等下载完就行了~

下载完成以后查看镜像:

docker images

3.启动跟踪器(tracker)容器服务

docker run -d --name tracker -p 22122:22122 -v ~/docker_work/tracker:/var/fdfs delron/fastdfs tracker

这样就启动起来了,容器默认端口是22122。

启动后在挂载宿主目录下生成了这两个目录

4.启动存储服务器

在启动存储服务器之前,我们需要查询跟踪服务器的ip,启动容器的时候需要用到。

以下命令查看所有容器ip:

docker inspect -f='{{.Name}} {{.NetworkSettings.IPAddress}} {{.HostConfig.PortBindings}}' $(docker ps -aq)

172.17.0.2,拿个小本本记下来

当然,宿主机有映射也可以直接用宿主机的Ip 192.168.3.112

我这边就直接用宿主机ip了,

docker run -d --name storage -p 8888:8888 -p 23000:23000 -e TRACKER_SERVER=192.168.3.112:22122 -v ~/docker_work/storage:/var/fdfs -e GROUP_NAME=group1 delron/fastdfs storage

其中8888为该镜像自带Nginx对应的访问端口,23000是storage服务端口。

如果大家需要修改对应的端口和配置,自行百度一下就好,这里就不多介绍了。

ping一下端口看服务起来没有:

5.验证图片服务器的服务

服务器搭建好之后,我们进入容器使用命令来验证下是否可以上传。

首先往挂载目录放一张图片

cp Downloads/ewm.jpg ~/docker_work/storage

然后进入容器,首次进入发现是在nginx目录下,切换到/var/fdfs

执行文件上传命令,相关命令如下:

docker exec -it storage bash
ls
cd /var/fdfs
/usr/bin/fdfs_upload_file /etc/fdfs/client.conf ewm.jp

相关截图如下:

命令执行成功后会返回文件path后缀,我们贴到浏览器就可以访问了。

至此图片服务器就搞定了,我们接下来开始集成程序来玩它了。

6.创建SpringBoot程序并集成fastdfs依赖

这里的封装依赖找的一个开源的轮子

地址:https://github.com/tobato/FastDFS_Client

pom文件

<dependency>
<groupId>com.github.tobato</groupId>
<artifactId>fastdfs-client</artifactId>
<version>1.26.1-RELEASE</version>
</dependency>

以下是项目集成目录结构图和PostMan测试调用,就不一个个类贴来贴去了,代码都在Github自取就行了。

Postman调用

访问

总结

本文以mac环境为例,演示了如何搭建图片服务器和测试,并结合客户端SpringBoot项目封装和调用图片服务器api,下次我们讲讲MongoDb的GridFS,看看到底谁更香呢?

本文Java集成源代码:https://github.com/pengziliu/GitHub-code-practice

实战:docker搭建FastDFS文件系统并集成SpringBoot的更多相关文章

  1. 使用docker搭建FastDFS文件系统

    1.首先下载FastDFS文件系统的docker镜像 docker search fastdfs 2.使用docker镜像构建tracker容器(跟踪服务器,起到调度的作用): docker run ...

  2. Docker中搭建FastDFS文件系统(多图)

    关于FastDFS FastDFS 是以 C 语言开发的一项开源轻量级分布式文件系统,他对文件进行管理,主要功能有:文件存储,文件同步,文件访问(文件上传/下载)等,特别适合以文件为载体的在线服务,如 ...

  3. 一、手把手教你docker搭建fastDFS文件上传下载服务器

    在搭建fastDFS文件上传下载服务器之前,你需要准备的有一个可连接的linux服务器,并且该linux服务器上已经安装了docker,若还有没安装docker的,先百度自行安装docker. 1.执 ...

  4. 使用docker搭建FastDFS

    拉取镜像(使用docker-componse可以忽略) [root@localhost ~]# docker pull phinexdaz/fdfs_tracker [root@localhost ~ ...

  5. 云存储?不依赖三方服务自己也可以搞,利用Docker来搭建分布式文件系统FastDfs

    原文转载自「刘悦的技术博客」https://v3u.cn/a_id_78 对于文件存储来说,一般情况下简单的处理就是在Django配置文件中配置存储目录,按照规则对文件进行上传或者下载. 实际上,当文 ...

  6. ASP.NET Core & Docker & Jenkins 零基础持续集成实战

    原文:ASP.NET Core & Docker & Jenkins 零基础持续集成实战 一.本系列教程说明 源代码管理工具:Gogs 持续集成工具:Jenkins 容器:Docker ...

  7. 【Linux】【自学笔记】docker搭建一个spring-boot程序

    写在开始    最近捣腾Linux,安装虚拟机VMware并安装了CentOS 7系统,开始研究Linux,但是无从下手,就结合工作中用到的东西一步一步研究,事实并不是那么顺利.特此开博客,记录在过程 ...

  8. docker搭建elasticsearch、kibana,并集成至spring boot

    步骤如下: 一.基于docker搭建elasticsearch环境 1.拉取镜像 docker pull elasticsearch5.6.8 2.制作elasticsearch的配置文件 maste ...

  9. IDEA 集成 Docker 插件实现一键远程部署 SpringBoot 应用,无需三方依赖,开源微服务全栈项目有来商城云环境的部署方式

    一. 前言 最近有些童鞋对开源微服务商城项目 youlai-mall 如何部署到线上环境以及项目中 的Dockerfile 文件有疑问,所以写了这篇文章做个答疑以及演示完整的微服务项目发布到线上的流程 ...

随机推荐

  1. day52 html进阶

    目录 一.分组与嵌套 二.伪类选择器 三.伪元素选择器 四.选择器优先级 五.css属性相关 1 字体属性 2 文字属性 3 背景图片 4 边框 5 display属性 6 盒子模型 7 浮动 一.分 ...

  2. 从0开始,手把手教你使用React开发答题App

    项目演示地址 项目演示地址 项目源码 项目源码 其他版本教程 Vue版本 小程序版本 项目代码结构 前言 React 框架的优雅不言而喻,组件化的编程思想使得React框架开发的项目代码简洁,易懂,但 ...

  3. CRLF injection 简单总结

    CRLF injection 简单总结 简介 CRLF是"回车 + 换行"(\r\n)的简称,即我们都知道在HTTP协议中,HTTP Header与HTTP Body是用两个CRL ...

  4. POJ 1095 Trees Made to Order 最详细的解题报告

    题目来源:Trees Made to Order 题目大意:根据下面的规则给一棵二叉树编号: 规则1:如果二叉树为空,则编号为0: 规则2:如果二叉树只有一个节点,则编号为1: 规则3:所有含有m个节 ...

  5. 从零搭建Spring Cloud Gateway网关(三)——报文结构转换

    背景 作为网关,有些时候可能报文的结构并不符合前端或者某些服务的需求,或者因为某些原因,其他服务修改报文结构特别麻烦.或者需要修改的地方特别多,这个时候就需要走网关单独转换一次. 实现 话不多说,直接 ...

  6. 接口测试框架实战(三)| JSON 请求与响应断言

    关注公众号,获取测试开发实战干货合辑.本文节选自霍格沃兹<测试开发实战进阶>课程教学内容. 数据驱动就是通过数据的改变驱动自动化测试的执行,最终引起测试结果的改变.简单来说,就是参数化在自 ...

  7. 模板方法模式(c++实现)

    外观模式 目录 外观模式 模式定义 模式动机 UML类图 源码实现 优点 缺点 模式定义 模板方法模式(Facade),定义一个操作中的算法的骨架,而将一些步骤延迟到子类中.模板方法使得子类可以不改变 ...

  8. 关于Excel去空格问题

    做开发,导入导出是一项基本功能,基本每个系统都有. 导入日期字段难免碰到因为空格问题引起的日期格式化Bug 下面分享一项Excel识别空格以及去空格的方法. 一:识别空格技巧(不要相信你的眼睛,有些空 ...

  9. CSS栅格布局

    CSS栅格布局 认识栅格布局 CSS的栅格布局也被称为网格布局(Grid Layout),它是一种新兴的布局方式. 栅格布局是一个二维系统,这意味着它可以同时处理列和行,与弹性布局相似,栅格系统也是由 ...

  10. CCNA - Part10 数据包的通信过程

    这篇文章主要是对数据包在同网段和不同网段的转发流程梳理,使用 ping 命令进行实际抓包测试. 网关的概念: 对于像 PC 等终端设备来说,通过交换机可以实现同网段的通信.但如果想要给其他网段发生数据 ...