zoukankan      html  css  js  c++  java
  • Java---多线程断点下载

    在上一章中我们实现了多线程下载功能,这里我们添加断点下载功能,防止下载过程中程序意外退出。具体代码如下:

    package com.jwzhangjie;
    
    /**
     * 说明:
     * 每一个线程下载的位置计算方式:
     * 开始位置:
     * (线程id - 1)*每一块大小
     * 结束位置:
     * (线程id*每一块大小) - 1 
     *  ---注意有时候不一定能够整除,所以最后一个线程的结束位置应该是文件的末尾
     *  
     *  步骤:
     *  1.本地创建一个大小跟服务器文件相同的临时文件
     *  2.计算分配几个线程去下载服务器上的资源,知道每个线程下载文件的位置
     *  3.开启三个线程,每一个线程下载对应位置的文件
     *  4.如果所有的线程,都把自己的数据下载完毕后,服务器上的资源都被下载到本地了
     *  
     *  断点下载:
     *  1.使用文件记录每一个线程的下载长度
     *  2.每一个下载开始之前,读取文件,如果文件存在并且长度大于0,则取出长度
     *  3.将每一个线程的起始位置+已经下载的长度
     *  4.所有的线程下载完毕后,删除保存下载长度的文件
     */
    import java.io.File;
    import java.io.FileInputStream;
    import java.io.InputStream;
    import java.io.RandomAccessFile;
    import java.net.HttpURLConnection;
    import java.net.URL;
    
    public class Demo {
    	public static String path = "http://192.168.5.103:8080/examples/downloader.exe";//"http://softdownload.hao123.com/hao123-soft-online-bcs/soft/Y/2013-07-18_YoudaoDict_baidu.alading.exe";
    	public static int threadCount = 3;
    	public static int runningThread = 3;
    	public static void main(String[] args) throws Exception{
    		//1.连接服务器,获取一个文件,获取文件的长度,在本地创建一个跟服务器一样大小的临时文件
    		URL url = new URL(path);
    		HttpURLConnection conn = (HttpURLConnection)url.openConnection();
    		conn.setConnectTimeout(5000);
    		conn.setRequestMethod("GET");
    		int code = conn.getResponseCode();
    		if (code == 200) {
    			//服务器端返回的数据的长度,实际上就是文件的长度
    			int length = conn.getContentLength();
    			System.out.println("文件总长度:"+length);
    			//在客户端本地创建出来一个大小跟服务器端一样大小的临时文件
    			RandomAccessFile raf = new RandomAccessFile("setup.exe", "rwd");
    			//指定创建的这个文件的长度
    			raf.setLength(length);
    			raf.close();
    			//假设是3个线程去下载资源。
    			//平均每一个线程下载的文件大小.
    			int blockSize = length / threadCount;
    			for (int threadId = 1; threadId <= threadCount; threadId++) {
    				//第一个线程下载的开始位置
    				int startIndex = (threadId - 1) * blockSize;
    				int endIndex = threadId * blockSize - 1;
    				if (threadId == threadCount) {//最后一个线程下载的长度要稍微长一点
    					endIndex = length;
    				}
    				System.out.println("线程:"+threadId+"下载:---"+startIndex+"--->"+endIndex);
    				new DownLoadThread(path, threadId, startIndex, endIndex).start();
    			}
    		
    		}else {
    			System.out.printf("服务器错误!");
    		}
    	}
    	
    	/**
    	 * 下载文件的子线程  每一个线程下载对应位置的文件
    	 * @author jie
    	 *
    	 */
    	public static class DownLoadThread extends Thread{
    		private int threadId;
    		private int startIndex;
    		private int endIndex;
    		/**
    		 * @param path 下载文件在服务器上的路径
    		 * @param threadId 线程Id
    		 * @param startIndex 线程下载的开始位置
    		 * @param endIndex	线程下载的结束位置
    		 */
    		public DownLoadThread(String path, int threadId, int startIndex, int endIndex) {
    			super();
    			this.threadId = threadId;
    			this.startIndex = startIndex;
    			this.endIndex = endIndex;
    		}
    
    		@Override
    		public void run() {
    			try {
    				//检查是否存在记录下载长度的文件,如果存在读取这个文件
    				File tmp_file = new File(threadId+".txt");
    				if (tmp_file.exists() && tmp_file.length() > 0) {
    					FileInputStream fio = new FileInputStream(tmp_file);
    					byte[] temp = new byte[1024];
    					int len = fio.read(temp);
    					String downloadlen = new String(temp, 0, len);
    					int downloadInt = Integer.parseInt(downloadlen);
    					startIndex = downloadInt;//修改下载的真实的开始位置
    					System.out.println("线程:"+threadId+"真实的下载位置:"+startIndex+"--->"+endIndex);
    					fio.close();
    				}
    				
    				
    				URL url = new URL(path);
    				HttpURLConnection conn = (HttpURLConnection)url.openConnection();
    				conn.setConnectTimeout(5000);
    				conn.setRequestMethod("GET");
    				//重要:请求服务器下载部分文件 指定文件的位置
    				conn.setRequestProperty("Range", "bytes="+startIndex+"-"+endIndex);
    				//从服务器请求全部资源返回200 ok如果从服务器请求部分资源 返回 206 ok
    				int code = conn.getResponseCode();
    				System.out.println("code:"+code);
    				InputStream is = conn.getInputStream();//已经设置了请求的位置,返回的是当前位置对应的文件的输入流
    				RandomAccessFile raf = new RandomAccessFile("setup.exe", "rwd");
    				//随机写文件的时候从哪个位置开始写
    				raf.seek(startIndex);//定位文件
    			
    				int len = 0;
    				byte[] buffer = new byte[1024];
    				int total = 0;//已经下载的数据长度
    				while ((len = is.read(buffer)) != -1) {
    					RandomAccessFile file = new RandomAccessFile(threadId+".txt", "rwd");
    					raf.write(buffer, 0, len);
    					total += len;
    					file.write((""+(total+startIndex)).getBytes());
    					file.close();
    				}
    				is.close();
    				raf.close();
    				System.out.println("线程:"+threadId+"下载完毕");
    			} catch (Exception e) {
    				e.printStackTrace();
    			}finally{
    				runningThread--;
    				if (runningThread == 0) {//所有的线程执行完毕
    					for (int i = 1; i <= threadCount; i++) {
    						File file = new File(i+".txt");
    						file.delete();
    					}
    					System.out.println("文件全部下载完毕!");
    				}
    			}
    		}
    		
    	}
    }


    实验测试结果:

    第一次下载:

    文件总长度:5562040
    线程:1下载:---0--->1854012
    线程:2下载:---1854013--->3708025
    线程:3下载:---3708026--->5562040
    code:206
    code:206
    code:206
    


    第二次下载:

    文件总长度:5562040
    线程:1下载:---0--->1854012
    线程:2下载:---1854013--->3708025
    线程:3下载:---3708026--->5562040
    线程:1真实的下载位置:21504--->1854012
    线程:2真实的下载位置:1871421--->3708025
    线程:3真实的下载位置:3726458--->5562040
    code:206
    code:206
    code:206


    下载完毕:

    文件总长度:5562040
    线程:1下载:---0--->1854012
    线程:2下载:---1854013--->3708025
    线程:3下载:---3708026--->5562040
    线程:2真实的下载位置:3512893--->3708025
    线程:3真实的下载位置:5268602--->5562040
    线程:1真实的下载位置:1677312--->1854012
    code:206
    code:206
    code:206
    线程:1下载完毕
    线程:2下载完毕
    线程:3下载完毕
    文件全部下载完毕!
    


    效果图如下:

    下载的文件能够使用,说明下载成功。下载工具UI版明天更新。

  • 相关阅读:
    POJ-1182 食物链
    hdu 1879 继续畅通工程
    HDU 2604 Queuing
    hdu 1232 畅通工程
    POJ-1611 The Suspects
    Free DIY Tour
    Tr A
    不容易系列之(3)―― LELE的RPG难题
    W3C标准冒泡、捕获机制
    JavaScript 浏览器事件解读
  • 原文地址:https://www.cnblogs.com/pangblog/p/3241375.html
Copyright © 2011-2022 走看看