热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

Minio开启线程上传文件夹下的所有文件

如何使用:FIeViewer.getListFiles在java获取文件夹下的所有文和大小publicstaticvoidmain(String[]args){Str

如何使用:FIeViewer.getListFiles在java获取文件夹下的所有文和大小

public static void main(String[] args) {String ip &#61;"162.245.236.170";String accKey &#61;"HSCBKASDKLKL";String serKey &#61; "ASNXCJNASJnjksancascjnkjasc";MinioUtil minioUtil &#61; new MinioUtil(ip,accKey,serKey);String m3u8RootPath &#61;"C:\\Users\\NING MEI\\Desktop\\FFmpeg切片测试";//m3u8文件的跟路径String filmId &#61; "hawhauha";List<String> listFiles &#61; FileViewer.getListFiles(m3u8RootPath, "", true);System.out.println(GsonUtils.toJson(listFiles));startPoll(listFiles,minioUtil,filmId);}

package com.TKW.Minio;import io.minio.MinioClient;
import io.minio.errors.*;
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;
import org.xmlpull.v1.XmlPullParserException;import java.io.IOException;
import java.security.InvalidKeyException;
import java.security.NoSuchAlgorithmException;
import java.util.List;public class MinioUtil {private static Logger log &#61; LoggerFactory.getLogger(MinioUtil.class);private static MinioClient minioclient;public MinioUtil(String END_POINT,String ACCESS_KEY, String SECRET_KEY) {String ip &#61; "http://"&#43; END_POINT&#43;":9000";try {minioclient &#61; new MinioClient(ip,ACCESS_KEY,SECRET_KEY);} catch (InvalidEndpointException e) {e.printStackTrace();} catch (InvalidPortException e) {e.printStackTrace();}}/*** minio 桶上传* &#64;param packageName 上传的 桶名字* &#64;param fileName 上传的 文件名* &#64;param suffix 后缀* &#64;param fileUrl 文件路径*/public void push(String packageName, String fileName, String suffix, String fileUrl) throws IOException, InvalidKeyException, NoSuchAlgorithmException, InsufficientDataException, InvalidArgumentException, InternalException, NoResponseException, InvalidBucketNameException, XmlPullParserException, ErrorResponseException {try {boolean isExist &#61;minioclient.bucketExists(packageName);if (isExist){log.info(packageName&#43;"已经存在了");}else {minioclient.makeBucket(packageName);}}catch (Exception e){log.error(e.getMessage());}minioclient.putObject(packageName,fileName&#43;"."&#43;suffix,fileUrl);log.info(fileUrl&#43;fileName&#43;"."&#43;suffix&#43;"插入成功");}/*** 根据 list数目 分配 任务* &#64;param list 文件夹下所有文件的全路径list* &#64;param minioUtil 初始化连接一次的 minioutil &#xff08;避免重复连接&#xff09;* &#64;param filmId 指定 minio 桶下的 文件夹名字*/public static void startPoll(List<String> list, MinioUtil minioUtil, String filmId){int length &#61; list.size();int num &#61; 5; //初始线程数//启动多线程if(num > length){num &#61; length;}int baseNum &#61; length / num;int remainderNum &#61; length % num;int end &#61; 0;for (int i &#61; 0; i < num; i&#43;&#43;) {int start &#61; end ;end &#61; start &#43; baseNum;if(i &#61;&#61; (num-1)){end &#61; length;}else if( i < remainderNum){end &#61; end &#43; 1;}HandleThread thread &#61; new HandleThread("线程[" &#43; (i &#43; 1) &#43; "] ", list, start , end,minioUtil,filmId);thread.start();}}/*** 任务处理类*/public static class HandleThread extends Thread {private String threadName;private List<String> list;private int startIndex;private int endIndex;private MinioUtil minioUtil;private String filmId;public HandleThread(String threadName, List<String> list, int startIndex, int endIndex,MinioUtil minioUtil,String filmId) {this.threadName &#61; threadName;this.list &#61; list;this.startIndex &#61; startIndex;this.endIndex &#61; endIndex;this.minioUtil &#61;minioUtil;this.filmId &#61;filmId;}public void run() {long startTime &#61; System.currentTimeMillis(); //获取开始时间List<String> subList &#61; list.subList(startIndex, endIndex);for (int i &#61; startIndex; i < endIndex; i&#43;&#43;) {try {minioUpload(list.get(i),minioUtil,filmId);} catch (Exception e) {e.printStackTrace();}}System.out.println(threadName&#43;"处理了"&#43;subList.size()&#43;"条&#xff01;startIndex:"&#43;startIndex&#43;"|endIndex:"&#43;endIndex);long endTime &#61; System.currentTimeMillis(); //获取结束时间System.out.println("程序运行时间&#xff1a;" &#43; (endTime - startTime) &#43; "ms"); //输出程序运行时间}}/*** 根据 一个文件开启 一个上传认为* &#64;param file 文件的路径* &#64;param minioUtil 初始化的 minoiuitl地址* &#64;param filmId 桶下的 文件夹名字* &#64;throws IOException* &#64;throws XmlPullParserException* &#64;throws NoSuchAlgorithmException* &#64;throws InvalidKeyException* &#64;throws InvalidArgumentException* &#64;throws ErrorResponseException* &#64;throws NoResponseException* &#64;throws InvalidBucketNameException* &#64;throws InsufficientDataException* &#64;throws InternalException*/public static void minioUpload(String file,MinioUtil minioUtil,String filmId) throws IOException, XmlPullParserException, NoSuchAlgorithmException, InvalidKeyException, InvalidArgumentException, ErrorResponseException, NoResponseException, InvalidBucketNameException, InsufficientDataException, InternalException {String spit &#61;"";if (file.contains("/")){spit &#61;"/";}else if (file.contains("\\")){spit &#61; "\\";}String nameSuffix &#61; file.substring(file.lastIndexOf(spit) &#43; 1);String name &#61; nameSuffix.substring(0, nameSuffix.lastIndexOf("."));String suffix &#61; nameSuffix.substring(nameSuffix.lastIndexOf(".") &#43; 1);System.out.println("开始上传&#43;" &#43; name);minioUtil.push("film", filmId &#43; "/" &#43; name, suffix, file);}}

推荐阅读
  • 关键词:Golang, Cookie, 跟踪位置, net/http/cookiejar, package main, golang.org/x/net/publicsuffix, io/ioutil, log, net/http, net/http/cookiejar ... [详细]
  • Java太阳系小游戏分析和源码详解
    本文介绍了一个基于Java的太阳系小游戏的分析和源码详解。通过对面向对象的知识的学习和实践,作者实现了太阳系各行星绕太阳转的效果。文章详细介绍了游戏的设计思路和源码结构,包括工具类、常量、图片加载、面板等。通过这个小游戏的制作,读者可以巩固和应用所学的知识,如类的继承、方法的重载与重写、多态和封装等。 ... [详细]
  • Java容器中的compareto方法排序原理解析
    本文从源码解析Java容器中的compareto方法的排序原理,讲解了在使用数组存储数据时的限制以及存储效率的问题。同时提到了Redis的五大数据结构和list、set等知识点,回忆了作者大学时代的Java学习经历。文章以作者做的思维导图作为目录,展示了整个讲解过程。 ... [详细]
  • 本文介绍了如何在给定的有序字符序列中插入新字符,并保持序列的有序性。通过示例代码演示了插入过程,以及插入后的字符序列。 ... [详细]
  • 本文讨论了一个关于cuowu类的问题,作者在使用cuowu类时遇到了错误提示和使用AdjustmentListener的问题。文章提供了16个解决方案,并给出了两个可能导致错误的原因。 ... [详细]
  • [大整数乘法] java代码实现
    本文介绍了使用java代码实现大整数乘法的过程,同时也涉及到大整数加法和大整数减法的计算方法。通过分治算法来提高计算效率,并对算法的时间复杂度进行了研究。详细代码实现请参考文章链接。 ... [详细]
  • Go Cobra命令行工具入门教程
    本文介绍了Go语言实现的命令行工具Cobra的基本概念、安装方法和入门实践。Cobra被广泛应用于各种项目中,如Kubernetes、Hugo和Github CLI等。通过使用Cobra,我们可以快速创建命令行工具,适用于写测试脚本和各种服务的Admin CLI。文章还通过一个简单的demo演示了Cobra的使用方法。 ... [详细]
  • Java自带的观察者模式及实现方法详解
    本文介绍了Java自带的观察者模式,包括Observer和Observable对象的定义和使用方法。通过添加观察者和设置内部标志位,当被观察者中的事件发生变化时,通知观察者对象并执行相应的操作。实现观察者模式非常简单,只需继承Observable类和实现Observer接口即可。详情请参考Java官方api文档。 ... [详细]
  • 本文介绍了使用Java实现大数乘法的分治算法,包括输入数据的处理、普通大数乘法的结果和Karatsuba大数乘法的结果。通过改变long类型可以适应不同范围的大数乘法计算。 ... [详细]
  • 本文介绍了一个Java猜拳小游戏的代码,通过使用Scanner类获取用户输入的拳的数字,并随机生成计算机的拳,然后判断胜负。该游戏可以选择剪刀、石头、布三种拳,通过比较两者的拳来决定胜负。 ... [详细]
  • 开发笔记:加密&json&StringIO模块&BytesIO模块
    篇首语:本文由编程笔记#小编为大家整理,主要介绍了加密&json&StringIO模块&BytesIO模块相关的知识,希望对你有一定的参考价值。一、加密加密 ... [详细]
  • 本文介绍了Redis的基础数据结构string的应用场景,并以面试的形式进行问答讲解,帮助读者更好地理解和应用Redis。同时,描述了一位面试者的心理状态和面试官的行为。 ... [详细]
  • 本文介绍了在多平台下进行条件编译的必要性,以及具体的实现方法。通过示例代码展示了如何使用条件编译来实现不同平台的功能。最后总结了只要接口相同,不同平台下的编译运行结果也会相同。 ... [详细]
  • Go GUIlxn/walk 学习3.菜单栏和工具栏的具体实现
    本文介绍了使用Go语言的GUI库lxn/walk实现菜单栏和工具栏的具体方法,包括消息窗口的产生、文件放置动作响应和提示框的应用。部分代码来自上一篇博客和lxn/walk官方示例。文章提供了学习GUI开发的实际案例和代码示例。 ... [详细]
  • 多维数组的使用
    本文介绍了多维数组的概念和使用方法,以及二维数组的特点和操作方式。同时还介绍了如何获取数组的长度。 ... [详细]
author-avatar
多米音乐_35794462
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有