zoukankan      html  css  js  c++  java
  • 利用HTML5分片上传超大文件

    在网页中直接上传大文件一直是个比较头疼的问题,主要面临的问题一般包括两类:一是上传时间长中途一旦出错会导致前功尽弃;二是服务端配置复杂,要考虑接收超大表单和超时问题,如果是托管主机没准还改不了配置,默认只能接收小于4MB的附件。

    比较理想的方案是能够把大文件分片,一片一片的传到服务端,再由服务端合并。这么做的好处在于一旦上传失败只是损失一个分片而已,不用整个文件重传,而且每个分片的大小可以控制在4MB以内,服务端不用做任何设置就可适应。

    常用的解决方案是RIA,以flex为例,通常是利用FileReference.load方法加载文件得到ByteArray,然后分片构造表单(flash的高版本不允许直接访问文件)。不过这个load方法只能加载较小的文件,大约不超过300MB,因此适用性不是很强。

    好在现在有了HTML5,我们可以直接构造分片了,这是一个非常喜人的进步,只可惜目前适用面不广(IE啊IE,真是恨你恨得牙痒痒)。

    言归正传,来看一个DEMO吧,基于ASP.Net MVC3,只是示例,很多问题做了简化处理。

    主要是客户端,新特性都体现在这里:

    <%@ Page Language="C#" AutoEventWireup="true" CodeBehind="UploadTest2.aspx.cs" Inherits="Html5UploadTest.UploadTest2" %>
    
    <html lang="zh-CN">
    
    <head>
    
        <meta charset="utf-8">
    
        <title>HTML5大文件分片上传示例</title>
        <script src="Scripts/jquery-1.8.2.js"></script>
        <script>
    
            var page = {
    
                init: function () {
    
                    $("#upload").click($.proxy(this.upload, this));
    
                },
    
    
    
                upload: function () {
    
                    var file = $("#file")[0].files[0],  //文件对象
    
                        name = file.name,        //文件名
    
                        size = file.size,        //总大小
    
                        succeed = 0;
    
    
    
                    var shardSize = 2 * 1024 * 1024,    //以2MB为一个分片
    
                        shardCount = Math.ceil(size / shardSize);  //总片数
    
    
    
                    for (var i = 0; i < shardCount; ++i) {
    
                        //计算每一片的起始与结束位置
    
                        var start = i * shardSize,
    
                            end = Math.min(size, start + shardSize);
    
    
    
                        //构造一个表单,FormData是HTML5新增的
    
                        var form = new FormData();
    
                        form.append("data", file.slice(start, end));  //slice方法用于切出文件的一部分
    
                        form.append("name", name);
    
                        form.append("total", shardCount);  //总片数
    
                        form.append("index", i + 1);        //当前是第几片
    
    
    
                        //Ajax提交
    
                        $.ajax({
    
                            url: "Upload.ashx",
    
                            type: "POST",
    
                            data: form,
    
                            async: true,        //异步
    
                            processData: false,  //很重要,告诉jquery不要对form进行处理
    
                            contentType: false,  //很重要,指定为false才能形成正确的Content-Type
    
                            success: function () {
    
                                ++succeed;
    
                                $("#output").text(succeed + " / " + shardCount);
    
                            }
    
                        });
    
                    }
    
                }
    
            };
    
            $(function () {
    
                page.init();
    
            });
    
        </script>
    
    </head>
    
    <body>
    
        <input type="file" id="file" />
    
        <button id="upload">上传</button>
    
        <span id="output" style="font-size:12px">等待</span>
    
    </body>
    
    </html>
    View Code

    后台一般处理程序代码

    using System;
    using System.Collections.Generic;
    using System.IO;
    using System.Linq;
    using System.Web;
    
    namespace Html5UploadTest
    {
        /// <summary>
        /// Summary description for Upload
        /// </summary>
        public class Upload : IHttpHandler
        {
    
            public void ProcessRequest(HttpContext context)
            {
                context.Response.ContentType = "text/plain";
                //从Request中取参数,注意上传的文件在Requst.Files中
    
                string name = context.Request["name"];
    
                int total = Convert.ToInt32(context.Request["total"]);
    
                int index = Convert.ToInt32(context.Request["index"]);
    
                var data = context.Request.Files["data"];
    
    
    
                //保存一个分片到磁盘上
    
                string dir = context.Request.MapPath("~/temp");
    
                string file = Path.Combine(dir, name + "_" + index);
    
                data.SaveAs(file);
    
    
    
                //如果已经是最后一个分片,组合
    
                //当然你也可以用其它方法比如接收每个分片时直接写到最终文件的相应位置上,但要控制好并发防止文件锁冲突
    
                if (index == total)
                {
    
                    file = Path.Combine(dir, name);
    
                    var fs = new FileStream(file, FileMode.Create);
    
                    for (int i = 1; i <= total; ++i)
                    {
    
                        string part = Path.Combine(dir, name + "_" + i);
    
                        var bytes = System.IO.File.ReadAllBytes(part);
    
                        fs.Write(bytes, 0, bytes.Length);
    
                        bytes = null;
    
                        System.IO.File.Delete(part);
    
                    }
    
                    fs.Close();
    
                }
    
    
    
                //返回是否成功,此处做了简化处理
    
                //return Json(new { Error = 0 });
            }
    
            public bool IsReusable
            {
                get
                {
                    return false;
                }
            }
        }
    }
    View Code

    上面的DEMO很多问题是简化处理的,比如没做什么异常处理,客户端也没有判断服务端是否出错重试一类的,各位可以自己完善。

    在上面的基础上,我们可以做很多功能上的扩展,比如我们可以控制所有分片是顺序上传还是并发上传,以适用不同应用。再比如我们可以在整体文件上传前以及分片上传前都先计算一下相应的HASH,发个请求询问服务器文件是否已存在,如果存在就不要重复上传了,这样就实现了“极速上传”以及“断点续传”。

  • 相关阅读:
    Mysql查漏补缺
    RabbitMQ学习笔记
    memcache学习笔记
    Redis问题整理
    JedisCluster获取key所在的节点
    JavaSE编程题
    IDEA快捷键 日常整理
    Idea 常用快捷键列表
    【C++】 构造函数为什么不能声明为虚函数,析构函数可以
    【算法笔记】买卖股票问题--DP/贪心算法
  • 原文地址:https://www.cnblogs.com/caishuhua226/p/4692745.html
Copyright © 2011-2022 走看看