在 Ubuntu 上搭建 MinIO 服务器
在日常开发时,如果有文件上传下载的需求(比如用户头像),但是又不想使用对象存储,那么自己搭建一个 MinIO 服务器是一个比较简单的解决方案。
MinIO 是一个基于 Apache License v2.0 开源协议的对象存储服务。它兼容亚马逊S3云存储服务接口,非常适合于存储大容量非结构化的数据,例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等,而一个对象文件可以是任意大小,从 几kb 到最大 5T 不等。
MinIO是一个非常轻量的服务,可以很简单的和其他应用的结合,类似 NodeJS, Redis 或者 MySQL。
MinIO 中文网站:https://www.minio.org.cn/docs/minio/linux/operations/installation.html
部署 MinIO 并修改 minioadmin 的账户密码
本文主要介绍在 Ububtu 上单节点单硬盘部署 MinIO,步骤如下:
下载 MinIO 服务器
wget https://dl.min.io/server/minio/release/linux-amd64/minio
为 MinIO 二进制文件添加执行权限
chmod +x minio
在合适的位置创建一个文件夹,用于存储 MinIO 上传的文件数据
# 在根目录创建 minio-data 文件夹,存储 MinIO 上传的文件数据
mkdir ~/minio-data
安装 MinIO。将 MinIO 的二进制文件移到 /usr/local/bin/目录下,以使其全局可用
sudo mv minio /usr/local/bin/
使用持久化环境变量作为 MinIO console 的登录账户和密码。
编辑 .bashrc文件,这里使用 nano。
nano ~/.bashrc
在文件的最后加上环境变量
export MINIO_ROOT_USER=newrootuser
export MINIO_ROOT_PASSWORD=newrootpassword
重新加载.bashrc以使更改生效
source ~/.bashrc
启动 MinIO
nohup minio server --secure ~/minio-data
这里使用nohup确保会话关闭之后 MinIO 不会停止,也可以使用screen等会话技术,或者将 MinIO 作为一个服务启动。这里不做过多介绍。
启动 MinIO 之后,在浏览器访问 ip+9000 端口即可访问 MinIO 的 Web 控制台。如果访问不了,请先检查 MinIO 的两个端口是否已经开放,一个是 MinIO 的 WebUI 端口,这个是随机的;一个是 MinIO 的 API 端口,这个固定是 9000。
在浏览器访问 ip+9000 实际会跳转到 WebUI 的端口。但是在使用 API 上传下载文件需要使用 9000 端口。
给 MinIO 配置域名
如果不想直接暴露 MinIO 的地址和端口,则可以使用 Nginx 给 MinIO 配置域名访问。
在此之前,您需要先准备一个已备案的域名并解析到当前服务器。
步骤如下:
先安装 Nginx (如果没有的话)
sudo apt-get update
sudo apt-get install nginx
一般不建议直接更改位于/etc/nginx/nginx.conf的 nginx 主配置文件。采用如下的配置方式:
在/etc/nginx/sites-available/创建新的配置文件,可以直接以当前配置的域名未文件名。我这里由于需要配置多个域名,文件名叫做minio.conf
cd /etc/nginx/sites-available/
touch minio.conf
书写配置文件
nano minio.conf
配置文件示例
# WebUI 配置
server {
listen 80;
server_name yourdomain.com; # 替换为您的域名
location / {
proxy_pass http://localhost:44366; # 替换为实际的端口
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Proto $scheme;
}
}
# API 配置
server {
listen 80;
server_name api.yourdomain.com; # 替换为您的API域名
location / {
proxy_pass http://localhost:9000; # 替换为实际的端口
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Proto $scheme;
}
}
启用新创建的配置文件。将/etc/nginx/sites-available/minio.conf链接到/etc/nginx/sites-enabled/目录
sudo ln -s /etc/nginx/sites-available/minio.conf /etc/nginx/sites-enabled/
可以先检查一下 nginx,确认没有语法错误
nginx -t
重启 nginx 服务
sudo systemctl restart nginx
此时,在本机浏览器上应该可以用域名访问 Minio console 了。
MinIO 调用示例
在 SpringBoot 中调用
先添加依赖
<dependencies>
<dependency>
<groupId>io.minio</groupId>
<artifactId>minio</artifactId>
<version>8.4.3</version>
</dependency>
</dependencies>
然后创建一个服务类来实现文件的上传下载
import io.minio.*;
import io.minio.messages.Item;
import java.io.InputStream;
import java.security.SecureRandom;
import java.util.Base64;
import java.util.UUID;
@Service
public class MinIOService {
private final MinioClient minioClient;
public MinIOService() {
try {
// 配置更改成自己的,建议写在配置文件中
this.minioClient = MinioClient.builder()
.endpoint("http://localhost:9000")
.credentials("minioadmin", "minioadmin")
.build();
} catch (MinioException e) {
throw new RuntimeException("Failed to create MinioClient", e);
}
}
public String uploadFile(String bucketName, String objectName, InputStream stream, long size) {
try {
minioClient.putObject(bucketName, objectName, stream, size);
return "File uploaded successfully.";
} catch (MinioException | IOException e) {
throw new RuntimeException("File upload failed.", e);
}
}
public InputStream downloadFile(String bucketName, String objectName) {
try {
return minioClient.getObject(bucketName, objectName);
} catch (MinioException | IOException e) {
throw new RuntimeException("File download failed.", e);
}
}
}
并为其书写对应的 Controller
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.core.io.InputStreamResource;
import org.springframework.core.io.Resource;
import org.springframework.http.HttpHeaders;
import org.springframework.http.ResponseEntity;
import org.springframework.web.bind.annotation.*;
import org.springframework.web.multipart.MultipartFile;
import java.io.IOException;
import java.io.InputStream;
@RestController
@RequestMapping("/minio")
public class MinIOController {
@Autowired
private MinIOService minIOService;
@PostMapping("/upload")
public String uploadFile(@RequestParam("file") MultipartFile file) {
String bucketName = "my-bucket";
String objectName = UUID.randomUUID().toString();
try (InputStream stream = file.getInputStream()) {
return minIOService.uploadFile(bucketName, objectName, stream, file.getSize());
} catch (IOException e) {
return "Failed to upload file.";
}
}
@GetMapping("/download/{objectName}")
public ResponseEntity<Resource> downloadFile(@PathVariable String objectName) {
String bucketName = "my-bucket";
InputStream stream = minIOService.downloadFile(bucketName, objectName);
return ResponseEntity.ok()
.header(HttpHeaders.CONTENT_DISPOSITION, "attachment; filename=\"" + objectName + "\"")
.body(new InputStreamResource(stream));
}
}
在 Flask 中调用
下载依赖
pip install minio
然后创建一个 Flask 来集成 MinIO
from flask import Flask, request, send_file, jsonify
from minio import Minio
from minio.error import S3Error
app = Flask(__name__)
# MinIO配置
minio_client = Minio(
# 更改成自己的
"localhost:9000",
access_key="minioadmin",
secret_key="minioadmin",
secure=False
)
@app.route('/upload', methods=['POST'])
def upload_file():
file = request.files['file']
bucket_name = 'my-bucket'
object_name = file.filename
try:
with open('/tmp/' + object_name, 'wb') as f:
f.write(file.read())
minio_client.fput_object(bucket_name, object_name, '/tmp/' + object_name)
return jsonify({'message': 'File uploaded successfully'}), 200
except S3Error as exc:
return jsonify({'error': str(exc)}), 500
@app.route('/download/<object_name>', methods=['GET'])
def download_file(object_name):
bucket_name = 'my-bucket'
try:
response = minio_client.get_object(bucket_name, object_name)
return send_file(
response.stream,
as_attachment=True,
attachment_filename=object_name,
mimetype=response.headers['content-type']
)
except S3Error as exc:
return jsonify({'error': str(exc)}), 500
if __name__ == '__main__':
app.run(debug=True)
推荐阅读
MinIO Plus:> 在日常开发时,如果有文件上传下载的需求(比如用户头像),但是又不想使用对象存储,那么自己搭建一个 MinIO 服务器是一个比较简单的解决方案。
>
MinIO 是一个基于 Apache License v2.0 开源协议的对象存储服务。它兼容亚马逊S3云存储服务接口,非常适合于存储大容量非结构化的数据,例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等,而一个对象文件可以是任意大小,从 几kb 到最大 5T 不等。
MinIO是一个非常轻量的服务,可以很简单的和其他应用的结合,类似 NodeJS, Redis 或者 MySQL。
MinIO 中文网站:https://www.minio.org.cn/docs/minio/linux/operations/installation.html
部署 MinIO 并修改 minioadmin 的账户密码
本文主要介绍在 Ububtu 上单节点单硬盘部署 MinIO,步骤如下:
下载 MinIO 服务器
wget https://dl.min.io/server/minio/release/linux-amd64/minio
为 MinIO 二进制文件添加执行权限
chmod +x minio
在合适的位置创建一个文件夹,用于存储 MinIO 上传的文件数据
# 在根目录创建 minio-data 文件夹,存储 MinIO 上传的文件数据
mkdir ~/minio-data
安装 MinIO。将 MinIO 的二进制文件移到 /usr/local/bin/目录下,以使其全局可用
sudo mv minio /usr/local/bin/
使用持久化环境变量作为 MinIO console 的登录账户和密码。
编辑 .bashrc文件,这里使用 nano。
nano ~/.bashrc
在文件的最后加上环境变量
export MINIO_ROOT_USER=newrootuser
export MINIO_ROOT_PASSWORD=newrootpassword
重新加载.bashrc以使更改生效
source ~/.bashrc
启动 MinIO
nohup minio server --secure ~/minio-data
这里使用nohup确保会话关闭之后 MinIO 不会停止,也可以使用screen等会话技术,或者将 MinIO 作为一个服务启动。这里不做过多介绍。
启动 MinIO 之后,在浏览器访问 ip+9000 端口即可访问 MinIO 的 Web 控制台。如果访问不了,请先检查 MinIO 的两个端口是否已经开放,一个是 MinIO 的 WebUI 端口,这个是随机的;一个是 MinIO 的 API 端口,这个固定是 9000。
在浏览器访问 ip+9000 实际会跳转到 WebUI 的端口。但是在使用 API 上传下载文件需要使用 9000 端口。
给 MinIO 配置域名
如果不想直接暴露 MinIO 的地址和端口,则可以使用 Nginx 给 MinIO 配置域名访问。
在此之前,您需要先准备一个已备案的域名并解析到当前服务器。
步骤如下:
先安装 Nginx (如果没有的话)
sudo apt-get update
sudo apt-get install nginx
一般不建议直接更改位于/etc/nginx/nginx.conf的 nginx 主配置文件。采用如下的配置方式:
在/etc/nginx/sites-available/创建新的配置文件,可以直接以当前配置的域名未文件名。我这里由于需要配置多个域名,文件名叫做minio.conf
cd /etc/nginx/sites-available/
touch minio.conf
书写配置文件
nano minio.conf
配置文件示例
# WebUI 配置
server {
listen 80;
server_name yourdomain.com; # 替换为您的域名
location / {
proxy_pass http://localhost:44366; # 替换为实际的端口
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Proto $scheme;
}
}
# API 配置
server {
listen 80;
server_name api.yourdomain.com; # 替换为您的API域名
location / {
proxy_pass http://localhost:9000; # 替换为实际的端口
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Proto $scheme;
}
}
启用新创建的配置文件。将/etc/nginx/sites-available/minio.conf链接到/etc/nginx/sites-enabled/目录
sudo ln -s /etc/nginx/sites-available/minio.conf /etc/nginx/sites-enabled/
可以先检查一下 nginx,确认没有语法错误
nginx -t
重启 nginx 服务
sudo systemctl restart nginx
此时,在本机浏览器上应该可以用域名访问 Minio console 了。
MinIO 调用示例
在 SpringBoot 中调用
先添加依赖
<dependencies>
<dependency>
<groupId>io.minio</groupId>
<artifactId>minio</artifactId>
<version>8.4.3</version>
</dependency>
</dependencies>
然后创建一个服务类来实现文件的上传下载
import io.minio.*;
import io.minio.messages.Item;
import java.io.InputStream;
import java.security.SecureRandom;
import java.util.Base64;
import java.util.UUID;
@Service
public class MinIOService {
private final MinioClient minioClient;
public MinIOService() {
try {
// 配置更改成自己的,建议写在配置文件中
this.minioClient = MinioClient.builder()
.endpoint("http://localhost:9000")
.credentials("minioadmin", "minioadmin")
.build();
} catch (MinioException e) {
throw new RuntimeException("Failed to create MinioClient", e);
}
}
public String uploadFile(String bucketName, String objectName, InputStream stream, long size) {
try {
minioClient.putObject(bucketName, objectName, stream, size);
return "File uploaded successfully.";
} catch (MinioException | IOException e) {
throw new RuntimeException("File upload failed.", e);
}
}
public InputStream downloadFile(String bucketName, String objectName) {
try {
return minioClient.getObject(bucketName, objectName);
} catch (MinioException | IOException e) {
throw new RuntimeException("File download failed.", e);
}
}
}
并为其书写对应的 Controller
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.core.io.InputStreamResource;
import org.springframework.core.io.Resource;
import org.springframework.http.HttpHeaders;
import org.springframework.http.ResponseEntity;
import org.springframework.web.bind.annotation.*;
import org.springframework.web.multipart.MultipartFile;
import java.io.IOException;
import java.io.InputStream;
@RestController
@RequestMapping("/minio")
public class MinIOController {
@Autowired
private MinIOService minIOService;
@PostMapping("/upload")
public String uploadFile(@RequestParam("file") MultipartFile file) {
String bucketName = "my-bucket";
String objectName = UUID.randomUUID().toString();
try (InputStream stream = file.getInputStream()) {
return minIOService.uploadFile(bucketName, objectName, stream, file.getSize());
} catch (IOException e) {
return "Failed to upload file.";
}
}
@GetMapping("/download/{objectName}")
public ResponseEntity<Resource> downloadFile(@PathVariable String objectName) {
String bucketName = "my-bucket";
InputStream stream = minIOService.downloadFile(bucketName, objectName);
return ResponseEntity.ok()
.header(HttpHeaders.CONTENT_DISPOSITION, "attachment; filename=\"" + objectName + "\"")
.body(new InputStreamResource(stream));
}
}
在 Flask 中调用
下载依赖
pip install minio
然后创建一个 Flask 来集成 MinIO
from flask import Flask, request, send_file, jsonify
from minio import Minio
from minio.error import S3Error
app = Flask(__name__)
# MinIO配置
minio_client = Minio(
# 更改成自己的
"localhost:9000",
access_key="minioadmin",
secret_key="minioadmin",
secure=False
)
@app.route('/upload', methods=['POST'])
def upload_file():
file = request.files['file']
bucket_name = 'my-bucket'
object_name = file.filename
try:
with open('/tmp/' + object_name, 'wb') as f:
f.write(file.read())
minio_client.fput_object(bucket_name, object_name, '/tmp/' + object_name)
return jsonify({'message': 'File uploaded successfully'}), 200
except S3Error as exc:
return jsonify({'error': str(exc)}), 500
@app.route('/download/<object_name>', methods=['GET'])
def download_file(object_name):
bucket_name = 'my-bucket'
try:
response = minio_client.get_object(bucket_name, object_name)
return send_file(
response.stream,
as_attachment=True,
attachment_filename=object_name,
mimetype=response.headers['content-type']
)
except S3Error as exc:
return jsonify({'error': str(exc)}), 500
if __name__ == '__main__':
app.run(debug=True)
推荐阅读
MinIO Plus:https://mp.weixin.qq.com/s/kSkC3X-SQqo5GzXt-H66xw
在 Ubuntu 上搭建 MinIO 服务器的更多相关文章
- Ubuntu上搭建Git服务器
下面我们就看看,如何在Ubuntu上搭建Git服务器.我们使用VMware虚拟机安装两台Ubantu系统,分别命名为gitServer和gitClient_01. 1.安装OpenSSH并配置SSH无 ...
- Ubuntu上搭建GPU服务器
1.安装显卡驱动 2.安装CUDA 3.安装cuDNN 下载: 根据显卡类型以及操作系统,选定CUDA版本和语言设置,下载对应的显卡驱动. 驱动下载地址 安装 $ sudo ./NVIDIA-Linu ...
- Ubuntu 上搭建 Samba 服务器
由于经常要接收同事发送的一些文件,U盘拷来拷去的很麻烦. 在本机Ubuntu上搭了各Samba服务器,过程中遇到点小问题,记录一下 sudo apt-get install samba 创建一个共享目 ...
- 【转载】如何在Ubuntu上安装LAMP服务器系统?
转载自:http://os.51cto.com/art/201307/405333.htm [2013年7月25日 51CTO外电头条]为何应该在Ubuntu上安装LAMP服务器?从事Web开发工作时 ...
- [转载]如何在Ubuntu上安装LAMP服务器系统
[2013年7月25日 51CTO外电头条]为何应该在Ubuntu上安装LAMP服务器?从事Web开发工作时,我更偏爱在不受干扰的情况下,在我那台计算机上的开发环境下进行开发.我宁愿所犯的错误大部分是 ...
- 在Ubuntu下搭建FTP服务器的方法
由于整个学校相当于一个大型局域网,相互之间传送数据非常快,比如要共享个电影,传点资料什么的. 所以我们可以选择搭建一个FTP服务器来共享文件. 那么问题来了,有的同学会问,我们既然在一个局域网内,直接 ...
- 在Ubuntu中搭建KMS服务器
介绍 基于vlmcsd搭建的KMS服务器. 根据github上的说明,这个工具是用C写的,没有任何依赖,可以直接运行.而且它横跨几乎现在所有的系统平台,如Android, FreeBSD, Solar ...
- Ubuntu上搭建Hadoop环境(单机模式+伪分布模式) (转载)
Hadoop在处理海量数据分析方面具有独天优势.今天花了在自己的Linux上搭建了伪分布模式,期间经历很多曲折,现在将经验总结如下. 首先,了解Hadoop的三种安装模式: 1. 单机模式. 单机模式 ...
- 本地虚拟机在ubuntu系统搭建nexus服务器
本地虚拟机在ubuntu系统上搭建nexus服务器 本地虚拟机在ubuntu系统上搭建nexus服务器所需软件: 虚拟机:VM或者Oracle VM VirtualBox 系统:ubuntu-14.0 ...
- Mac上搭建直播服务器Nginx+rtmp
简介 nginx是非常优秀的开源服务器,用它来做hls或者rtmp流媒体服务器是非常不错的选择,本人在网上整理了安装流程,分享给大家并且作备忘. 步骤安装 1.安装Homebrow Homebrew简 ...
随机推荐
- 集成InfluxDb, telegraf, Grafana, App Metrics以记录性能指标
前情概要 刚好有半天得闲功夫, 从项目里面找个功能来水一篇文章. 上线的项目通常都是需要做性能数据收集工作的, 它好处就不想打字了. 业界有很多套方案, 工具[收费的, 免费的], 收集采用[拉取的, ...
- KubeKey 部署 K8s v1.28.8 实战
在某些生产环境下,我们仅需要一个原生的 K8s 集群,无需部署 KubeSphere 这样的图形化管理控制台.在我们已有的技术栈里,已经习惯了利用 KubeKey 部署 KubeSphere 和 K8 ...
- P1762 偶数&杨辉三角
P1762 偶数&杨辉三角(天立OI) 解题思路 一.结论法 杨辉三角形结论 第\(n\)行有\(n\)个数. 每行奇数个数必为\(2^k\)(\(k\)不是行数) 当行数恰为\(2^k\)时 ...
- Linux利用scp命令上传下载文件
scp是secure copy的简写,用于在 Linux 下进行远程拷贝文件的命令,和它类似的命令有cp,不过cp只是在本机进行拷贝不能跨服务器. scp传输是加密的,可能会稍微影响一下速度.当你服务 ...
- Vue生态工具组合
文章目录 1.Vue版本 2.构建工具 3.包管理器 4.状态管理 5.http库 6.UI库 7.站点生成器 8.优质内容收录 vue生态工具多种多样,我们要如何选择并组合起来才最好呢.接下来给大家 ...
- 【VMware VCF】使用 Offline Bundle Transfer Utility(OBTU)配置 VCF 脱机库。
VMware Cloud Foundation 环境中,软件包仓库的来源支持两种方式,分别是 Online Depot 和 Offline Depot.第一种方式,是在 VCF 环境能够连接互联网的情 ...
- Windows通过修改注册表设置系统默认浏览器
前段时间有个程序要求获取系统的默认浏览器,baidu.Google了好久,后又结合procmon.exe跟踪浏览器打开web页面的注册表操作信息,找到了最终的位置,这里做一个总结.亲测win10多个浏 ...
- 使用 vscode 简单配置 ESP32 连接 Wi-Fi 每日定时发送 HTTP 和 HTTPS 请求
最新博客文章链接 文字更新时间:2024/11/07 由于学校校园网,如果长时间不重新登陆的话,网速会下降,所以想弄个能定时发送 HTTP 请求的东西.由于不想给路由器刷系统,也麻烦.就开始考虑使用局 ...
- Metasploit会话连接不稳定问题排查
使用msfvenom生成木马,语句如下: msfvenom -p windows/x64/meterpreter_reverse_tcp lhost=43.154.xxx.xxx lport=4455 ...
- Abp vNext 入门到放弃系列
文章目录 1.模块介绍 2.模块加载机制 3.依赖注入 4.AutoMapper-- 待定 5.本地化--待定 6.模型验证--待定 7.异常处理--待定 8.缓存 9.动态代理和拦截 10.分布式锁 ...