当前位置: 首页 > news >正文

分布式文件管理系统(MinIO)

1.去中心化,每个点是对等的关系,通过Ngix对负载做均衡工作。

        好处: 能够避免单点故障,将多块硬盘组成一个对象存储服务。

2. 使用纠删编码技术来保护数据,是一种回复丢失和损坏的数据的数学算法,他将数据分块冗余的放在各个节点的磁盘上,纠删编码的好处是,当丢失节点的数量恰好等于一半的时候,不能上传数据,但是可以可以访问并下载剩余节点的数据,但是当节点的宕机数量大于一半的时候则不能上传或下载数据。

3.安装及使用

安装方法,在F:\javaSoftWare\minio下建立data_test文件夹用于将数据存储在这三个文件夹中,然后在F:\javaSoftWare\minio下,(含有minio.exe文件),运行如下命令,开启minio。

F:\javaSoftWare\minio>minio.exe server F:\javaSoftWare\minio\data_test\data1 F:\javaSoftWare\minio\data_test\data2 F:\javaSoftWare\minio\data_test\data3 F:\javaSoftWare\minio\data_test\data4

得到的运行结果如下:

1)老版本使用的MINIO_ACCESS_KEY 和 MINIO_SECRET_KEY不推荐使用,推荐使用MINIO_ROOT_USER 和MINIO_ROOT_PASSWORD设置账号和密码。

2)pool即minio节点组成的池子,当前有一个pool和4个硬盘组成的set集合

3)因为集合是4个硬盘,大于2的硬盘损坏数据将无法恢复。

4)账号和密码默认为minioadmin、minioadmin,可以在环境变量中设置通过'MINIO_ROOT_USER' and 'MINIO_ROOT_PASSWORD' 进行设置。

下边输入http://localhost:9000进行登录。

4.测试:

下一步创建bucket,桶,它相当于存储文件的目录,可以创建若干的桶。 

输入bucket的名称,点击“CreateBucket”,创建成功

点击“upload”上传文件。

下边上传几个文件

 我们发现上传的1.mp4文件存储在了四个目录,即四个硬盘上。

5.maven

<dependency><groupId>io.minio</groupId><artifactId>minio</artifactId><version>8.4.3</version>
</dependency>
<dependency><groupId>com.squareup.okhttp3</groupId><artifactId>okhttp</artifactId><version>4.8.1</version>
</dependency>

需要三个参数才能连接到minio服务。

参数

说明

Endpoint

对象存储服务的URL

Access Key

Access key就像用户ID,可以唯一标识你的账户。

Secret Key

Secret key是你账户的密码。

代码示例:

package com.xuecheng.media;import io.minio.*;
import org.apache.commons.io.IOUtils;
import org.junit.jupiter.api.Test;import java.io.File;
import java.io.FileOutputStream;
import java.io.FilterInputStream;/*** @author Mr.M* @version 1.0* @description 测试minio上传文件、删除文件、查询文件* @date 2022/10/13 14:42*/
public class MinIOTest {static MinioClient minioClient =MinioClient.builder().endpoint("http://192.168.101.65:9000").credentials("minioadmin", "minioadmin").build();@Testpublic void upload() {try {UploadObjectArgs uploadObjectArgs = UploadObjectArgs.builder().bucket("testbucket").object("IMG_3118.DNG")//同一个桶内对象名不能重复.filename("F:\\IPHONE照片\\1022\\IMG_3118.DNG").build();//上传minioClient.uploadObject(uploadObjectArgs);System.out.println("上传成功了");} catch (Exception e) {System.out.println("上传失败");}}//指定桶内的子目录@Testpublic void upload2() {try {UploadObjectArgs uploadObjectArgs = UploadObjectArgs.builder().bucket("testbucket").object("test/IMG_3127.JPG")//同一个桶内对象名不能重复.filename("F:\\IPHONE照片\\1022\\IMG_3127.JPG").build();//上传minioClient.uploadObject(uploadObjectArgs);System.out.println("上传成功了");} catch (Exception e) {System.out.println("上传失败");}}//删除文件@Testpublic void delete() {try {RemoveObjectArgs removeObjectArgs = RemoveObjectArgs.builder().bucket("testbucket").object("test/IMG_3127.JPG").build();minioClient.removeObject(removeObjectArgs);} catch (Exception e) {}}//查询文件@Testpublic void getFile() {GetObjectArgs getObjectArgs = GetObjectArgs.builder().bucket("testbucket").object("IMG_3118.DNG").build();try(FilterInputStream inputStream = minioClient.getObject(getObjectArgs);FileOutputStream outputStream = new FileOutputStream(new File("D:\\IMG_3118.DNG"));) {if(inputStream!=null){IOUtils.copy(inputStream,outputStream);}} catch (Exception e) {}}}

http://www.lryc.cn/news/8906.html

相关文章:

  • Springcloud-配置中心config
  • [项目篇] 音乐播放器开发报告
  • Spring Cloud Alibaba--gateway微服务详解之网关(二)
  • Zynq非VDMA方案实现视频3帧缓存输出,无需SDK配置,提供工程源码和技术支持
  • 血液透析过滤芯气密性检测装置中的高精度多段压力控制解决方案
  • PDF加密如何批量解除?快来了解下这个方法
  • C++——哈希4|布隆过滤器
  • python冒号的用法总结
  • 面试题整理
  • C语言深度解剖-关键字(7)
  • 利用JavaScript编写Python内置函数查询工具
  • 【MySQL进阶】SQL优化
  • 最新版海豚调度dolphinscheduler-3.1.3配置windows本地开发环境
  • csv文件完整操作总结
  • 时间序列预测--基于CNN的股价预测(Matlab代码实现)
  • Dubbo与Spring Cloud优缺点分析(文档学习个人理解)
  • 单元测试工具——JUnit的使用
  • Linux_基本权限
  • 3、JavaScript面试题
  • YUV图像
  • .net6API使用AutoMapper和DTO
  • IO知识整理
  • 【正点原子FPGA连载】第十三章QSPI Flash读写测试实验 摘自【正点原子】DFZU2EG_4EV MPSoC之嵌入式Vitis开发指南
  • 深入理解mysql的内核查询成本计算
  • LeetCode 141. 环形链表
  • git提交
  • Java中常见的编码集问题
  • 数据结构与算法(Java版) | 就让我们来看看几个实际编程中遇到的问题吧!
  • 【C++算法】dfs深度优先搜索(上) ——【全面深度剖析+经典例题展示】
  • 总结高频率Vue面试题