iis服务器助手广告广告
返回顶部
首页 > 资讯 > 精选 >Java多线程断点复制的方法是什么
  • 920
分享到

Java多线程断点复制的方法是什么

2023-07-06 00:07:38 920人浏览 八月长安
摘要

这篇文章主要介绍了Java多线程断点复制的方法是什么的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇Java多线程断点复制的方法是什么文章都会有所收获,下面我们一起来看看吧。细节介绍我这里是使用一个Timer类(

这篇文章主要介绍了Java多线程断点复制的方法是什么的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇Java多线程断点复制的方法是什么文章都会有所收获,下面我们一起来看看吧。

细节介绍

我这里是使用一个Timer类(java.util.Timer)来实现断点功能的,就是使用这个类,每隔一段时间进行一次记录,记录的内容是每个线程复制的进度。

Timer 类的介绍:

A facility for threads to schedule tasks for future execution in a background thread. Tasks may be scheduled for one-time execution, or for repeated execution at regular intervals. 线程在后台线程中调度任务以供将来执行的工具。任务可以安排为一次性执行,也可以安排为定期重复执行。

根据 api 中的介绍可以看出,这个 Timer 类可以只执行一次任务,也可以周期性地执行任务。(注意这个类是 java.util.Timer 类,不是 javax 包下面的类。)

这个类的有很多和时间相关的方法,这里就不介绍了,感兴趣的可以去了解,这里只介绍我们需要使用的一个方法。

public void schedule(TimerTask task, long delay, long period)

Schedules the specified task for repeated fixed-delay execution beginning after the specified delay. Subsequent executions take place at approximately regular intervals separated by the specified period. 为指定的任务安排在指定延迟之后开始的重复固定延迟执行。随后的执行发生在按规定时间间隔的大致间隔。

使用这个方法,按照一个固定的时间间隔记录各个线程的复制进度信息即可。

代码部分

定时任务类

package draGon.local;import java.io.File;import java.io.FileNotFoundException;import java.io.FileOutputStream;import java.io.IOException;import java.io.ObjectOutputStream;import java.util.List;import java.util.Timer;import java.util.TimerTask;public class RecordTask extends TimerTask {public static final String filename = "breakPointRecord.txt";private Timer timer;private List<FileCopyThread> copyThreads;private String outputPath;public RecordTask(Timer timer, List<FileCopyThread> copyThreads, String outputPath) {this.timer = timer;this.copyThreads = copyThreads;this.outputPath = outputPath;}@Overridepublic void run() {try {this.breakPointRecord();} catch (IOException e) {e.printStackTrace();}}public void breakPointRecord() throws FileNotFoundException, IOException {int aliveThreadNum = 0;  //存活线程数目//不使用追加方式,这里只需要最新的记录即可。File recordFile = new File(outputPath, filename);try (ObjectOutputStream oos = new ObjectOutputStream(new FileOutputStream(recordFile))){//每次记录一个线程的下载位置,但是取出来又需要进行转换,太麻烦了。//我们直接使用序列化来进行操作,哈哈!long[] curlen = new long[4];int index = 0;for (FileCopyThread copyThread : copyThreads) {if (copyThread.isAlive()) {aliveThreadNum++;}curlen[index++] = copyThread.getCurlen();System.out.println(index+" curlen: "+copyThread.getCurlen());}//创建 Record 对象,并序列化。oos.writeObject(new Record(curlen));}//当所有的线程都死亡时,关闭计时器,删除记录文件。(所有线程死亡的话,就是文件已经复制完成了!)if (aliveThreadNum == 0) {timer.cancel();recordFile.delete();}System.out.println("线程数量: "+aliveThreadNum);}}

说明:

if (aliveThreadNum == 0) {timer.cancel();recordFile.delete();}

如果线程都已经结束了,就表示程序已经正常执行结束了。这个时候就删除记录文件。这里这个记录文件是一个标志(flag),如果存在记录文件就表示程序没有正常结束,再次启动时,会进行断点复制

注意:这里没有考虑复制过程中的 IO 异常,如果线程抛出 IO 异常,那么线程的状态也是结束了。但是考虑,本地文件复制出现 IO 异常的情况还是比较少的,就没有考虑,如果是网络下载的话,这个程序的功能可能就需要进行改进了。

记录信息类

每次需要依次写入各个线程的信息,但是读取出来还需要进行转换,还是感觉过于麻烦了,这里直接利用Java的序列化机制了。 有时候,直接操作对象是很方便的。 注意: 数组的下标表示的就是每个线程的位置。

package dragon.local;import java.io.Serializable;public class Record implements Serializable{private static final long serialVersionUID = 1L;private long[] curlen;public Record(long[] curlen) {this.curlen = curlen;} public long[] getCurlen() {return this.curlen;}}

复制线程类

package dragon.local;import java.io.BufferedInputStream;import java.io.File;import java.io.FileInputStream;import java.io.IOException;import java.io.RandoMaccessFile;public class FileCopyThread extends Thread {private int index;private long position;private long size;private File targetFile;private File outputFile;private long curlen;      //当前下载的长度public FileCopyThread(int index, long position, long size, File targetFile, File outputFile) {this.index = index;this.position = position;this.size = size;this.targetFile = targetFile;this.outputFile = outputFile;this.curlen = 0L;}@Overridepublic void run() {try (BufferedInputStream bis = new BufferedInputStream(new FileInputStream(targetFile));RandomAccessFile raf = new RandomAccessFile(outputFile, "rw")){bis.skip(position);  //跳过不需要读取的字节数,注意只能先后跳raf.seek(position);  //跳到需要写入的位置,没有这句话,会出错,但是很难改。int hasRead = 0;byte[] b = new byte[1024];while(curlen < size && (hasRead = bis.read(b)) != -1) {raf.write(b, 0, hasRead);curlen += (long)hasRead;//强制停止程序。//if (curlen > 17_000_000) {//System.exit(0);//}}System.out.println(index+" "+position+" "+curlen+" "+size);} catch (IOException e) {e.printStackTrace();}}public long getCurlen() {   //获取当前的进度,用于记录,以便必要时恢复读取进度。return position+this.curlen;}}

这段代码是为了测试断点复制的。如果你想要进行测试,可以将 if 判断中的条件按照你要复制的文件大小进行相应的调整。如果要进行测试,可以先将这段代码的注释取消再执行程序(然后程序退出,这时候文件没有复制完成。),然后再将这段代码注释再次执行程序,文件将会复制成功。

//强制停止程序。//if (curlen > 17_000_000) {//System.exit(0);//}

复制工具类

package dragon.local;import java.io.File;import java.io.FileInputStream;import java.io.FileNotFoundException;import java.io.IOException;import java.io.ObjectInputStream;import java.io.RandomAccessFile;import java.util.ArrayList;import java.util.List;import java.util.Timer;public class FileCopyUtil {//设置一个常量,复制线程的数量private static final int THREAD_NUM = 4;private FileCopyUtil() {}public static void transferFile(String targetPath, String outputPath) throws IOException, ClassNotFoundException {File targetFile = new File(targetPath);File outputFilePath = new File(outputPath);if (!targetFile.exists() || targetFile.isDirectory()) {   //目标文件不存在,或者是一个文件夹,则抛出异常throw new FileNotFoundException("目标文件不存在:"+targetPath);}if (!outputFilePath.exists()) {     //如果输出文件夹不存在,将会尝试创建,创建失败,则抛出异常。if(!outputFilePath.mkdir()) {throw new FileNotFoundException("无法创建输出文件:"+outputPath);}}long len = targetFile.length();File outputFile = new File(outputFilePath, "copy"+targetFile.getName());createOutputFile(outputFile, len);    //创建输出文件,设置好大小。//创建计时器 Timer 对象Timer timer = new Timer();long[] position = new long[4];//每一个线程需要复制文件的起点long size = len / FileCopyUtil.THREAD_NUM + 1;     //保存复制线程的集合List<FileCopyThread> copyThreads = new ArrayList<>();Record record = getRecord(outputPath);for (int i = 0; i < FileCopyUtil.THREAD_NUM; i++) {//如果已经有了 记录文件,就从使用记录数据,否则就是新的下载。position[i] = record == null ? i*size : record.getCurlen()[i];FileCopyThread copyThread = new FileCopyThread(i, position[i], size, targetFile, outputFile);copyThread.start();     //启动复制线程copyThreads.add(copyThread);   //将复制线程添加到集合中。}timer.schedule(new RecordTask(timer, copyThreads, outputPath), 0L, 100L);  //立即启动计时器,每隔10秒记录一次位置。System.out.println("开始了!");}//创建输出文件,设置好大小。private static void createOutputFile(File file, long length) throws IOException {try (   RandomAccessFile raf = new RandomAccessFile(file, "rw")){raf.setLength(length);}}//获取以及下载的位置private static Record getRecord(String outputPath) throws FileNotFoundException, IOException, ClassNotFoundException {File recordFile = new File(outputPath, RecordTask.filename);if (recordFile.exists()) {try (ObjectInputStream ois = new ObjectInputStream(new FileInputStream(recordFile))){return (Record) ois.readObject();}}return null;}}

说明: 根据复制的目录中,是否存在记录文件来判断是否启动断点复制。

private static Record getRecord(String outputPath) throws FileNotFoundException, IOException, ClassNotFoundException {File recordFile = new File(outputPath, RecordTask.filename);if (recordFile.exists()) {try (ObjectInputStream ois = new ObjectInputStream(new FileInputStream(recordFile))){return (Record) ois.readObject();}}return null;}

启动断点复制原来其实很简单,就是和复制一样,只不过起始复制位置变成了记录的位置了。

//如果已经有了 记录文件,就从使用记录数据,否则就是新的下载。position[i] = record == null ? i*size : record.getCurlen()[i];

关于“Java多线程断点复制的方法是什么”这篇文章的内容就介绍到这里,感谢各位的阅读!相信大家对“Java多线程断点复制的方法是什么”知识都有一定的了解,大家如果还想学习更多知识,欢迎关注编程网精选频道。

--结束END--

本文标题: Java多线程断点复制的方法是什么

本文链接: https://www.lsjlt.com/news/356792.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • Java多线程断点复制的方法是什么
    这篇文章主要介绍了Java多线程断点复制的方法是什么的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇Java多线程断点复制的方法是什么文章都会有所收获,下面我们一起来看看吧。细节介绍我这里是使用一个Timer类(...
    99+
    2023-07-06
  • 浅谈一下Java多线程断点复制
    目录细节介绍代码部分定时任务类记录信息类复制线程类复制工具类总结上次写了一个利用 RandomAccessFile 和 多线程实现的多线程复制,但是没有增加断点复制的功能。这里的断点...
    99+
    2023-05-15
    Java多线程 Java断点 Java断点复制
  • JAVA多线程之中断机制及处理中断的方法
    目录一,介绍二,中断及如何响应中断?一,介绍 这篇文章主要记录使用 interrupt() 方法中断线程,以及如何对InterruptedException进行处理。感觉对Inter...
    99+
    2023-02-13
    java多线程中断机制 java多线程中断
  • java多线程机制是什么
    本篇内容主要讲解“java多线程机制是什么”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“java多线程机制是什么”吧!一、程序、进程、线程1.1 什么是程序程序(program):是为完成特定任...
    99+
    2023-07-02
  • java创建多线程的方法是什么
    在Java中,有两种常见的方法来创建多线程:1. 继承Thread类:创建一个继承自Thread类的子类,重写run()方法,并在r...
    99+
    2023-08-16
    java
  • java多线程的实现方法是什么
    在Java中实现多线程有两种方法: 继承Thread类:定义一个类继承Thread类,并重写run()方法,在run()方法中编写...
    99+
    2024-03-04
    java
  • Java多线程的优缺点是什么
    Java多线程的优点包括:1. 提高程序的并发处理能力:多线程可以同时执行多个任务,提高程序的处理能力和运行效率。2. 提高系统资源...
    99+
    2023-09-15
    Java
  • java线程中断interrupt和LockSupport的方法是什么
    本文小编为大家详细介绍“java线程中断interrupt和LockSupport的方法是什么”,内容详细,步骤清晰,细节处理妥当,希望这篇“java线程中断interrupt和LockSupport的方法是什么”文章能帮助大家解决疑惑,下...
    99+
    2023-07-05
  • java多线程守护线程的实现方法是什么
    本篇内容介绍了“java多线程守护线程的实现方法是什么”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!lass StopThread...
    99+
    2023-06-04
  • java强制结束线程的方法是什么
    在Java中,强制结束线程的方法有以下几种:1. 使用volatile变量:可以设置一个volatile类型的boolean变量,当...
    99+
    2023-08-24
    java
  • Java中线程中断机制的原理是什么
    本篇文章为大家展示了Java中线程中断机制的原理是什么,内容简明扼要并且容易理解,绝对能使你眼前一亮,通过这篇文章的详细介绍希望你能有所收获。Thread.interrupt真的能中断线程吗在平时的开发过程中,相信都会使用到多线程,在使用多...
    99+
    2023-06-17
  • java多线程异步处理的方法是什么
    Java多线程异步处理的方法有几种: 使用Thread类或Runnable接口创建新的线程,然后调用start()方法启动线程,...
    99+
    2024-04-02
  • java多线程共享变量的方法是什么
    Java多线程共享变量的方法有以下几种:1. 使用共享对象:多个线程共享一个对象,并且该对象的属性被多个线程访问和修改。通过使用sy...
    99+
    2023-08-26
    java
  • java多线程删除数据的方法是什么
    Java多线程删除数据的方法有以下几种:1. 使用线程池:可以使用线程池来管理多个线程,每个线程负责删除一部分数据。线程池可以提高线...
    99+
    2023-08-18
    java
  • java多线程批量处理的方法是什么
    Java中实现多线程批量处理的方法有以下几种:1. 使用线程池:通过创建线程池来管理一组线程,可以提交多个任务给线程池,线程池会自动...
    99+
    2023-08-18
    java
  • java多线程并行处理的方法是什么
    Java中实现多线程并行处理的方法有以下几种:1. 继承Thread类:创建一个继承自Thread类的子类,重写run()方法,在r...
    99+
    2023-09-21
    java
  • java多线程并发处理的方法是什么
    Java多线程并发处理的方法有以下几种:1. 继承Thread类:创建一个继承自Thread类的子类,重写run方法来定义线程需要执...
    99+
    2023-08-24
    java
  • java多线程队列的使用方法是什么
    在Java中,可以使用BlockingQueue来实现多线程队列。BlockingQueue是一个线程安全的队列,它提供了put()...
    99+
    2023-10-24
    java
  • java多线程的核心知识点是什么
    这篇文章主要介绍“java多线程的核心知识点是什么”,在日常操作中,相信很多人在java多线程的核心知识点是什么问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”java多线程的核心知识点是什么”的疑惑有所帮助!...
    99+
    2023-06-20
  • java实现多线程的方式是什么
    今天小编给大家分享一下java实现多线程的方式是什么的相关知识点,内容详细,逻辑清晰,相信大部分人都还太了解这方面的知识,所以分享这篇文章给大家参考一下,希望大家阅读完这篇文章后有所收获,下面我们一起来了解一下吧。实现多线程的方式:1、继承...
    99+
    2023-07-04
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作