zoukankan      html  css  js  c++  java
  • 【转】上传进度----PHP大文件分割上传(分片上传)

    原文: http://www.xiaosongit.com/index/detail/id/650.html

    http://www.ncmem.com/webapp/up6/versions.aspx  这个也稍微研究看下,人家写的文件上传??

    http://www.xiaosongit.com/index/detail/id/826.html  分析一下,人家写的博客?运营??

    https://www.cnblogs.com/songsu/p/11794002.html apc来实现断点续传??

    ---------------------------------------------------

    问题:

    请问如何上传比较大的文件?

    服务端为什么不能直接上传大文件?跟php.ini 里面几个配置有很大的关系。

    upload_max_filesize

    post_max_size

    memory_limit

    max_execute_time

    当然不能简单粗暴的将这几个参数调大,否则服务器会出现内存资源吃光是早晚的的问题。

    解决思路

    好在HTML5开放了新的FILE API,也可以直接操作二进制对象,我们可以直接在浏览器端实现文件切割,

    按照以前的做法就得用Flash的方案,实现起来会麻烦很多。

    JS思路

    1.监听上传按钮的onchange事件

    2.获取文件的FILE对象

    3.把文件的FILE对象进行切割,并且附加到FORMDATA对象中

    4.把FORMDATA对象通过AJAX发送到服务器

    5.重复3、4步骤,直到文件发送完。

    PHP思路

    1.建立上传文件夹

    2.把文件从上传临时目录移动到上传文件夹

      //移动文件
        private function moveFile(){
            $this->touchDir();
            $filename $this->filepath.'/'$this->fileName.'__'.$this->blobNum;
            move_uploaded_file($this->tmpPath,$filename);
        }

    3.所有的文件块上传完成后,进行文件合成

    private function fileMerge(){
            if($this->blobNum == $this->totalBlobNum){
                $blob '';
                for($i=1; $i<= $this->totalBlobNum; $i++){
                    $blob .= file_get_contents($this->filepath.'/'$this->fileName.'__'.$i);
                }
                file_put_contents($this->filepath.'/'$this->fileName,$blob);
               $this->deleteFileBlob();
            }
        }

    4.删除文件夹

    //删除文件块
        private function deleteFileBlob(){
            for($i=1; $i<= $this->totalBlobNum; $i++){
                @unlink($this->filepath.'/'$this->fileName.'__'.$i);
            }
        }

    5.返回上传后的文件路径

    //API返回数据
        public function apiReturn(){
            if($this->blobNum == $this->totalBlobNum){
                    if(file_exists($this->filepath.'/'$this->fileName)){
                        $data['code'] = 2;
                        $data['msg'] = 'success';
                        $data['file_path'] = 'http://'.$_SERVER['HTTP_HOST'].dirname($_SERVER['DOCUMENT_URI']).str_replace('.','',$this->filepath).'/'$this->fileName;
                    }
            }else{
                    if(file_exists($this->filepath.'/'$this->fileName.'__'.$this->blobNum)){
                        $data['code'] = 1;
                        $data['msg'] = 'waiting for all';
                        $data['file_path'] = '';
                    }
            }
            header('Content-type: application/json');
            echo json_encode($data);
        }

    upload.html

    <!doctype html>
    <html>
    <head>
        <meta charset="UTF-8">
        <meta name="viewport"
              content="width=device-width, user-scalable=no, initial-scale=1.0, maximum-scale=1.0, minimum-scale=1.0">
        <meta http-equiv="X-UA-Compatible" content="ie=edge">
        <title>Document</title>
        <style>
            #progress{
                 300px;
                height: 20px;
                
                box-shadow:inset 0 1px 2px rgba(0,0,0,0.1);
                border-radius:4px;
                background-image:linear-gradient(to bottom,#f5f5f5,#f9f9f9);
            }
     
            #finish{
                #149bdf;
                background-image:linear-gradient(45deg,rgba(255,255,255,0.15) 25%,transparent 25%,transparent 50%,rgba(255,255,255,0.15) 50%,rgba(255,255,255,0.15) 75%,transparent 75%,transparent);
                background-size:40px 40px;
                height: 100%;
            }
            form{
                margin-top: 50px;
            }
        </style>
    </head>
    <body>
    <div id="progress">
        <div id="finish" style=" 0%;" progress="0"></div>
    </div>
    <form action="./upload.php">
        <input type="file" name="file" id="file">
        <input type="button" value="停止" id="stop">
    </form>
    <script>
        var fileForm = document.getElementById("file");
        var stopBtn = document.getElementById('stop');
        var upload = new Upload();
     
        fileForm.onchange = function(){
            upload.addFileAndSend(this);
        }
     
        stopBtn.onclick = function(){
            this.value = "停止中";
            upload.stop();
            this.value = "已停止";
        }
     
        function Upload(){
            var xhr = new XMLHttpRequest();
            var form_data = new FormData();
            // const LENGTH = 1024 * 1024;
            const LENGTH = 10 * 10;
            var start = 0;
            var end = start + LENGTH;
            var blob;
            var blob_num = 1;
            var is_stop = 0
            //对外方法,传入文件对象
            this.addFileAndSend = function(that){
                var file = that.files[0];
                blob = cutFile(file);
                sendFile(blob,file);
                blob_num  += 1;
            }
            //停止文件上传
            this.stop = function(){
                xhr.abort();
                is_stop = 1;
            }
            //切割文件
            function cutFile(file){
                var file_blob = file.slice(start,end);
                start = end;
                end = start + LENGTH;
                return file_blob;
            };
            //发送文件
            function sendFile(blob,file){
                var total_blob_num = Math.ceil(file.size / LENGTH);
                form_data.append('file',blob);
                form_data.append('blob_num',blob_num);
                form_data.append('total_blob_num',total_blob_num);
                form_data.append('file_name',file.name);
     
                xhr.open('POST','./upload.php',false);
                xhr.onreadystatechange  = function () {
                    var progress;
                    var progressObj = document.getElementById('finish');
                    if(total_blob_num == 1){
                        progress = '100%';
                    }else{
                        progress = Math.min(100,(blob_num/total_blob_num)* 100 ) +'%';
                    }
                    progressObj.style.width = progress;
                    var t = setTimeout(function(){
                        if(start < file.size && is_stop === 0){
                            blob = cutFile(file);
                            sendFile(blob,file);
                            blob_num  += 1;
                        }else{
                            setTimeout(t);
                        }
                    },1000);
                }
                xhr.send(form_data);
            }
        }
     
    </script>
    </body>
    </html>

    upload.php

    <?php
     
    class Upload{
        private $filepath './upload'//上传目录
        private $tmpPath;  //PHP文件临时目录
        private $blobNum//第几个文件块
        private $totalBlobNum//文件块总数
        private $fileName//文件名
     
        public function __construct($tmpPath,$blobNum,$totalBlobNum,$fileName){
            $this->tmpPath =  $tmpPath;
            $this->blobNum =  $blobNum;
            $this->totalBlobNum =  $totalBlobNum;
            $this->fileName =  $fileName;
             
            $this->moveFile();
            $this->fileMerge();
        }
         
        //判断是否是最后一块,如果是则进行文件合成并且删除文件块
        private function fileMerge(){
            if($this->blobNum == $this->totalBlobNum){
                $blob '';
                for($i=1; $i<= $this->totalBlobNum; $i++){
                    $blob .= file_get_contents($this->filepath.'/'$this->fileName.'__'.$i);
                }
                file_put_contents($this->filepath.'/'$this->fileName,$blob);
               $this->deleteFileBlob();
            }
        }
         
       //删除文件块
        private function deleteFileBlob(){
            for($i=1; $i<= $this->totalBlobNum; $i++){
                @unlink($this->filepath.'/'$this->fileName.'__'.$i);
            }
        }
         
        //移动文件
        private function moveFile(){
            $this->touchDir();
            $filename $this->filepath.'/'$this->fileName.'__'.$this->blobNum;
            move_uploaded_file($this->tmpPath,$filename);
        }
         
        //API返回数据
        public function apiReturn(){
            if($this->blobNum == $this->totalBlobNum){
                    if(file_exists($this->filepath.'/'$this->fileName)){
                        $data['code'] = 2;
                        $data['msg'] = 'success';
                        $data['file_path'] = 'http://'.$_SERVER['HTTP_HOST'].dirname($_SERVER['DOCUMENT_URI']).str_replace('.','',$this->filepath).'/'$this->fileName;
                    }
            }else{
                    if(file_exists($this->filepath.'/'$this->fileName.'__'.$this->blobNum)){
                        $data['code'] = 1;
                        $data['msg'] = 'waiting for all';
                        $data['file_path'] = '';
                    }
            }
            header('Content-type: application/json');
            echo json_encode($data);
        }
         
        //建立上传文件夹
        private function touchDir(){
            if(!file_exists($this->filepath)){
                return mkdir($this->filepath);
            }
        }
    }
     
    //实例化并获取系统变量传参
    $upload new Upload($_FILES['file']['tmp_name'],$_POST['blob_num'],$_POST['total_blob_num'],$_POST['file_name']);
    //调用方法,返回结果
    $upload->apiReturn();

    项目版本二:

    何为大文件切割上传?

    原理:利用HTML5的新特性,将文件内容切割成分段的二进制信息,然后每次向服务器上传一段,而服务器,只需要把我们每次上传的二进制信息整合存储到一个文件中,那么最后这个文件就是所上传的文件。

    由于php.ini默认的上传大小为2M,如果每批都上传2M,我测试的时候时间比较长,这里我将其限制大小该为20M,最大post数据为28M,便于测试。如果实际开发中不能修改其参数,则每批上传的数据不能超过最大限制。

    post_max_size = 28M 
    upload_max_filesize = 20M

    我的是在nginx里面上传所以还需要修改Nginx配置文件/etc/nginx/nginx.con

    //在http{} 里面加即可 

    client_max_body_size 50m   #客户端最大上传大小 50M

    JavaScript中的File对象

    在之前的文章中我们已经使用到了这个Api,File对象中保存了文件的大小、名称、类型等信息

    JavaScript中的Blob对象

    Blob对象是二进制对象,也是File对象的父类,Blob对象中有一个很重要的方法:slice() 方法,利用这个方法我们可以把文件内容切割成二进制信息。slice() 方法接受三个参数,起始偏移量,结束偏移量,还有可选的 mime 类型。如果 mime 类型,没有设置,那么新的 Blob 对象的 mime 类型和父级一样。

    <!DOCTYPE html> 
    <html
    <head
      <meta charset="utf-8"
      <meta http-equiv="X-UA-Compatible" content="IE=edge"
      <title>大文件切割上传</title
      <link rel="stylesheet" href=""
      <script
        function selfile(){ 
          const LENGTH = 1024 * 1024 * 10;//每次上传的大小 
          var file = document.getElementsByName('video')[0].files[0];//文件对象 
          var filename=document.getElementsByName('video')[0].files[0].name; 
          var totalSize = file.size;//文件总大小 
          var start = 0;//每次上传的开始字节 
          var end = start + LENGTH;//每次上传的结尾字节 
          var fd = null//创建表单数据对象 
          var blob = null;//二进制对象 
          var xhr = null;//xhr对象 
          while(start < totalSize){ 
            fd = new FormData();//每一次需要重新创建 
            xhr = new XMLHttpRequest();//需要每次创建并设置参数 
            xhr.open('POST','upload.php',false); 
            blob = file.slice(start,end);//根据长度截取每次需要上传的数据 
            fd.append('video',blob);//添加数据到fd对象中 
            fd.append('filename',filename); //获取文件的名称 
            xhr.send(fd);//将fd数据上传 
       
            //重新设置开始和结尾 
            start = end; 
            end = start + LENGTH; 
       
          
       
        
      </script
    </head
    <body
    <h1>大文件切割上传</h1
    <input type="file" name="video" onchange="selfile();" /> 
    </body
    </html>

    接收数据页面upload.php:

    <?php 
    /** 
     * 大文件切割上传,把每次上传的数据合并成一个文件 
     */
       
    $filename './uploads/'.$_POST['filename'];//确定上传的文件名 
    //第一次上传时没有文件,就创建文件,此后上传只需要把数据追加到此文件中 
    if(!file_exists($filename)){ 
     move_uploaded_file($_FILES['video']['tmp_name'],$filename); 
    }else
     file_put_contents($filename,file_get_contents($_FILES['video']['tmp_name']),FILE_APPEND); 
    ?>

    测试之前,先创建uploads文件夹

    如果是linux系统的话 切记给uploads给权限

    sudo chmod -R 777 uoloads/  //赋予uploads文件夹 777 权限  -R 递归子文件

  • 相关阅读:
    Thinkpad R400无线网络一个都不见了!
    如果使用安卓4.4的SD卡?
    如何使用安卓4.4的SD卡?
    在IAR使用FreeRTOS出现Error[Pa045]: function "XXX" has no prototype
    DSP5509的RTC实验-第3篇
    LWM2M简介-学习记录
    DSP5509的定时器实验-第2篇
    DSP5509的XF实验-第一篇
    华为LiteOS系统使用-任务调度函数-第一篇
    2017-12-24自选的股票之春秋航空
  • 原文地址:https://www.cnblogs.com/oxspirt/p/12776541.html
Copyright © 2011-2022 走看看