实战:docker搭建FastDFS文件系统并集成SpringBoot

前言

15年的时候,那时候云存储还远远没有现在使用的这么广泛,归根结底就是成本和安全问题,记得那时候我待的公司是做建站开发的,前期用了自建mongodb的GridFS来存文件,

后来改为fastDFS,今天我们来聊聊FastDFS.

简介

fastDFS 是以C语言开发的一项开源轻量级分布式文件系统,他对文件进行管理,主要功能有:文件存储,文件同步,文件访问(文件上传/下载),特别适合以文件为载体的在线服务,如图片网站,视频网站等。

特性如下:

  • 适合类型:4KB~500MB
  • 文件分布:小文件合并存储不分片处理
  • 备份机制:组内冗余备份
  • 通讯协议接口:Api 和 HTTP
  • 开发语言: C语言
  • 用户和社群:主要是国内用户群体

核心概念

FastDFS 服务端有两个核心概念:跟踪器(tracker)和存储节点(storage)。

前者起负载均衡和调度作用,后者则是提供容量存储和备份。

这两个概念理解清楚了有助于以下的服务端搭建。

Docker搭建服务端

Docker安装和入门之类的就不多做讲解了,以前也写过不少,没看过的读者可以从历史页面搜搜温习以下。

本机以Mac环境开启Docker服务进行安装,其他环境都是基于Docker环境的大同小异。

1.运行命令查找镜像

docker search fastdfs

2.下载图中所示镜像

docker pull delron/fastdfs

我这边已经下载了,所以执行更新操作

如果是没下载镜像的坐等下载完就行了~

下载完成以后查看镜像:

docker images

3.启动跟踪器(tracker)容器服务

docker run -d --name tracker -p 22122:22122 -v ~/docker_work/tracker:/var/fdfs delron/fastdfs tracker

这样就启动起来了,容器默认端口是22122。

启动后在挂载宿主目录下生成了这两个目录

4.启动存储服务器

在启动存储服务器之前,我们需要查询跟踪服务器的ip,启动容器的时候需要用到。

以下命令查看所有容器ip:

docker inspect -f='{{.Name}} {{.NetworkSettings.IPAddress}} {{.HostConfig.PortBindings}}' $(docker ps -aq)

172.17.0.2,拿个小本本记下来

当然,宿主机有映射也可以直接用宿主机的Ip 192.168.3.112

我这边就直接用宿主机ip了,

docker run -d --name storage -p 8888:8888 -p 23000:23000 -e TRACKER_SERVER=192.168.3.112:22122 -v ~/docker_work/storage:/var/fdfs -e GROUP_NAME=group1 delron/fastdfs storage

其中8888为该镜像自带Nginx对应的访问端口,23000是storage服务端口。

如果大家需要修改对应的端口和配置,自行百度一下就好,这里就不多介绍了。

ping一下端口看服务起来没有:

5.验证图片服务器的服务

服务器搭建好之后,我们进入容器使用命令来验证下是否可以上传。

首先往挂载目录放一张图片

cp Downloads/ewm.jpg ~/docker_work/storage

然后进入容器,首次进入发现是在nginx目录下,切换到/var/fdfs

执行文件上传命令,相关命令如下:

docker exec -it storage bash
ls
cd /var/fdfs
/usr/bin/fdfs_upload_file /etc/fdfs/client.conf ewm.jp

相关截图如下:

命令执行成功后会返回文件path后缀,我们贴到浏览器就可以访问了。

至此图片服务器就搞定了,我们接下来开始集成程序来玩它了。

6.创建SpringBoot程序并集成fastdfs依赖

这里的封装依赖找的一个开源的轮子

地址:https://github.com/tobato/FastDFS_Client

pom文件

<dependency>
<groupId>com.github.tobato</groupId>
<artifactId>fastdfs-client</artifactId>
<version>1.26.1-RELEASE</version>
</dependency>

以下是项目集成目录结构图和PostMan测试调用,就不一个个类贴来贴去了,代码都在Github自取就行了。

Postman调用

访问

总结

本文以mac环境为例,演示了如何搭建图片服务器和测试,并结合客户端SpringBoot项目封装和调用图片服务器api,下次我们讲讲MongoDb的GridFS,看看到底谁更香呢?

本文Java集成源代码:https://github.com/pengziliu/GitHub-code-practice

实战:docker搭建FastDFS文件系统并集成SpringBoot的更多相关文章

  1. 使用docker搭建FastDFS文件系统

    1.首先下载FastDFS文件系统的docker镜像 docker search fastdfs 2.使用docker镜像构建tracker容器(跟踪服务器,起到调度的作用): docker run ...

  2. Docker中搭建FastDFS文件系统(多图)

    关于FastDFS FastDFS 是以 C 语言开发的一项开源轻量级分布式文件系统,他对文件进行管理,主要功能有:文件存储,文件同步,文件访问(文件上传/下载)等,特别适合以文件为载体的在线服务,如 ...

  3. 一、手把手教你docker搭建fastDFS文件上传下载服务器

    在搭建fastDFS文件上传下载服务器之前,你需要准备的有一个可连接的linux服务器,并且该linux服务器上已经安装了docker,若还有没安装docker的,先百度自行安装docker. 1.执 ...

  4. 使用docker搭建FastDFS

    拉取镜像(使用docker-componse可以忽略) [root@localhost ~]# docker pull phinexdaz/fdfs_tracker [root@localhost ~ ...

  5. 云存储?不依赖三方服务自己也可以搞,利用Docker来搭建分布式文件系统FastDfs

    原文转载自「刘悦的技术博客」https://v3u.cn/a_id_78 对于文件存储来说,一般情况下简单的处理就是在Django配置文件中配置存储目录,按照规则对文件进行上传或者下载. 实际上,当文 ...

  6. ASP.NET Core & Docker & Jenkins 零基础持续集成实战

    原文:ASP.NET Core & Docker & Jenkins 零基础持续集成实战 一.本系列教程说明 源代码管理工具:Gogs 持续集成工具:Jenkins 容器:Docker ...

  7. 【Linux】【自学笔记】docker搭建一个spring-boot程序

    写在开始    最近捣腾Linux,安装虚拟机VMware并安装了CentOS 7系统,开始研究Linux,但是无从下手,就结合工作中用到的东西一步一步研究,事实并不是那么顺利.特此开博客,记录在过程 ...

  8. docker搭建elasticsearch、kibana,并集成至spring boot

    步骤如下: 一.基于docker搭建elasticsearch环境 1.拉取镜像 docker pull elasticsearch5.6.8 2.制作elasticsearch的配置文件 maste ...

  9. IDEA 集成 Docker 插件实现一键远程部署 SpringBoot 应用,无需三方依赖,开源微服务全栈项目有来商城云环境的部署方式

    一. 前言 最近有些童鞋对开源微服务商城项目 youlai-mall 如何部署到线上环境以及项目中 的Dockerfile 文件有疑问,所以写了这篇文章做个答疑以及演示完整的微服务项目发布到线上的流程 ...

随机推荐

  1. 微软全球资深副总裁对 VS Code 黑宝书的推荐序!VS Code 月活用户已达 1200 万!

    前不久,首本 VS Code 中文书终于问世了! 在本书出版之前,我很高兴能邀请到微软全球资深副总裁 Julia Liuson 为本书写推荐序!下面,我们就来看一下 Julia 所写的推荐序的完整内容 ...

  2. 【Linux】CentOS7 常用命令集合

    CentOS7 常用命令集合 常用命令 文件与目录 操作命令解析 cd /home 进入 ‘/home’ 目录cd .. 返回上一级目录cd ../.. 返回上两级目录cd - 返回上次所在目录cp ...

  3. Dot Net Core中间件内部运行机制

    public void Configure(IApplicationBuilder app, IWebHostEnvironment env) { if (env.IsDevelopment()) { ...

  4. Github Actions简单部署一个vue/react项目

    大体介绍 本文对github actions部署前端项目做一个简单的总结,总体来说,我感觉用它想要部署一个前端项目,可以说非常简单,简单得令人震惊

  5. Maven 专题(九):后记

    尚硅谷视频链接:https://www.bilibili.com/video/av84877781/看视频的时候,根据自己的需要,访问量多的不一定是好的,适合自己的才是最好的,总的来说,尚硅谷的视频质 ...

  6. flask 源码专题(十一):LocalStack和Local对象实现栈的管理

    目录 04 LocalStack和Local对象实现栈的管理 1.源码入口 1. flask源码关于local的实现 2. flask源码关于localstack的实现 3. 总结 04 LocalS ...

  7. Django框架07 /cookie和session

    Django框架07 /cookie和session 目录 Django框架07 /cookie和session 1. django请求生命周期 2. cookie 3. session 4. 总结 ...

  8. 神经网络结构:DenseNet

    论文地址:密集连接的卷积神经网络 博客地址(转载请引用):https://www.cnblogs.com/LXP-Never/p/13289045.html 前言 在计算机视觉还是音频领域,卷积神经网 ...

  9. picker-view、微信小程序自定义时间选择器(非官方)

    picker-view自定义时间选择器 官网的自定义时间选择器比较简陋.日期不准 下面是我自己写的一个demo <view class="baseList"> < ...

  10. bzoj2843极地旅行社

    bzoj2843极地旅行社 题意: 一些点,每个点有一个权值.有三种操作:点与点连边,单点修改权值,求两点之间路径上点的权值和(需要判输入是否合法) 题解: 以前一直想不通为什么神犇们的模板中LCT在 ...