基于vue-simple-uploader封装文件分片上传、秒传及断点续传的全局上传插件

1. 前言

以前公司要在管理系统中作一个全局上传插件,即切换各个页面的时候,上传界面还在而且上传不会受到影响,这在vue这种spa框架面前并非什么难题。然然后端大佬说咱们要实现分片上传秒传以及断点续传的功能,听起来头都大了。html

好久以前我写了一篇webuploader的文章,结果使用起来发现问题不少,且官方团队再也不维护这个插件了, 通过多天调研及踩雷,最终决定基于vue-simple-uploader插件实现该功能,在项目中使用起来无痛且稳定。前端

若是你只是想实现基本的(非定制化的)上传功能,直接使用vue-simple-uploader,多读一下它的文档,不须要更多的二次封装。
若是你只是想实现全局上传插件,也能够参照一下个人实现。
若是你用到了分片上传、秒传及断点续传这些复杂的功能,恭喜你,这篇文章的重点就在于此。vue

本文源码在此:https://github.com/shady-xia/Blog/tree/master/vue-simple-uploaderjava

2. 关于vue-simple-uploader

vue-simple-uploader是基于 simple-uploader.js 封装的vue上传插件。它的优势包括且不限于如下几种:jquery

  • 支持文件、多文件、文件夹上传;支持拖拽文件、文件夹上传
  • 可暂停、继续上传
  • 错误处理
  • 支持“秒传”,经过文件判断服务端是否已存在从而实现“秒传”
  • 分块上传
  • 支持进度、预估剩余时间、出错自动重试、重传等操做

读这篇文章以前,建议先读一遍simple-uploader.js的文档,而后再读一下vue-simple-uploader的文档,了解一下各个参数的做用是什么,我在这里假定你们已经比较熟悉了。。
vue-simple-uploader文档ios

simple-uploader.js文档git

安装npm install vue-simple-uploader --save
使用:在main.js中:github

import uploader from 'vue-simple-uploader' Vue.use(uploader)

3. 基于vue-simple-uploader封装全局上传组件

引入vue-simple-uploader后,咱们开始封装全局的上传组件globalUploader.vue,代码比较长,就不整个放出来了,源码放到github上了,这里一步一步地讲解。

template部分以下,本人自定义了模板和样式,因此html部分比较长,css部分暂时不列出,你们能够根据本身的ui去更改,主要关注一下uploader这个组件的options参数及文件addedsuccessprogresserror几个事件:

<template> <div id="global-uploader"> <!-- 上传 --> <uploader ref="uploader" :options="options" :autoStart="false" @file-added="onFileAdded" @file-success="onFileSuccess" @file-progress="onFileProgress" @file-error="onFileError" class="uploader-app"> <uploader-unsupport></uploader-unsupport> <uploader-btn id="global-uploader-btn" :attrs="attrs" ref="uploadBtn">选择文件</uploader-btn> <uploader-list v-show="panelShow"> <div class="file-panel" slot-scope="props" :class="{'collapse': collapse}"> <div class="file-title"> <h2>文件列表</h2> <div class="operate"> <el-button @click="fileListShow" type="text" :title="collapse ? '展开':'折叠' "> <i class="iconfont" :class="collapse ? 'icon-fullscreen': 'icon-minus-round'"></i> </el-button> <el-button @click="close" type="text" title="关闭"> <i class="iconfont icon-close"></i> </el-button> </div> </div> <ul class="file-list"> <li v-for="file in props.fileList" :key="file.id"> <uploader-file :class="'file_' + file.id" ref="files" :file="file" :list="true"></uploader-file> </li> <div class="no-file" v-if="!props.fileList.length"><i class="nucfont inuc-empty-file"></i> 暂无待上传文件</div> </ul> </div> </uploader-list> </uploader> </div> </template> 

组件中的data部分

data() {
    return { options: { target: 'http://xxxxx/xx', // 目标上传 URL chunkSize: '2048000', //分块大小 fileParameterName: 'file', //上传文件时文件的参数名,默认file maxChunkRetries: 3, //最大自动失败重试上传次数 testChunks: true, //是否开启服务器分片校验 // 服务器分片校验函数,秒传及断点续传基础 checkChunkUploadedByResponse: function (chunk, message) { let objMessage = JSON.parse(message); if (objMessage.skipUpload) { return true; } return (objMessage.uploaded || []).indexOf(chunk.offset + 1) >= 0 }, headers: { // 在header中添加的验证,请根据实际业务来 Authorization: "Bearer " + Ticket.get().access_token }, }, attrs: { // 接受的文件类型,形如['.png', '.jpg', '.jpeg', '.gif', '.bmp'...] 这里我封装了一下 accept: ACCEPT_CONFIG.getAll() }, panelShow: false, //选择文件后,展现上传panel } },

全局引用:
app.vue中引用,即做为全局的组件一直存在,只不过在不使用的时候把上传界面隐藏了

<global-uploader></global-uploader>

4. 文件上传流程概览

1. 点击按钮,触发文件上传操做:

(若是你作的不是全局上传的功能,而是直接点击上传,忽略这一步。)

由于我作的是全局上传的插件,要先把上传的窗口隐藏起来,在点击某个上传按钮的时候,用Bus发送一个openUploader的事件,在globalUploader.vue中接收该事件,trigger咱们uploader-btn的click事件。

在某个页面中,点击上传按钮,同时把要给后台的参数带过来(若是有的话),这里组件之间传值我用的event bus,固然用vuex会更好:

Bus.$emit('openUploader', { superiorID: this.superiorID })

globalUploader.vue中接收该事件:

Bus.$on('openUploader', query => { this.params = query || {}; if (this.$refs.uploadBtn) { // 这样就打开了选择文件的操做窗口 $('#global-uploader-btn').click(); } });

2. 选择文件后,将上传的窗口展现出来,开始md5的计算工做

onFileAdded(file) {
    this.panelShow = true; // 计算MD5,下文会提到 this.computeMD5(file); },

这里有个前提,我在uploader中将autoStart设为了false,为何要这么作?

在选择文件以后,我要计算MD5,以此来实现断点续传及秒传的功能,因此选择文件后直接开始上传确定不行,要等MD5计算完毕以后,再开始文件上传的操做。

具体的MD5计算方法,会在下面讲,这里先简单引出。

上传过程当中,会不断触发file-progress上传进度的回调

// 文件进度的回调 onFileProgress(rootFile, file, chunk) { console.log(`上传中 ${file.name},chunk:${chunk.startByte / 1024 / 1024} ~ ${chunk.endByte / 1024 / 1024}`) },

3. 文件上传成功后
文件上传成功后,在“上传完成”的回调中,经过服务端返回的needMerge字段,来判断是否须要再发送合并分片的请求,
若是这个字段为true,则须要给后台发一个请求合并的ajax请求,不然直接上传成功。

注意:这里的needMerge是我和后台商议决定的字段名

onFileSuccess(rootFile, file, response, chunk) {
    let res = JSON.parse(response); // 服务器自定义的错误,这种错误是Uploader没法拦截的 if (!res.result) { this.$message({ message: res.message, type: 'error' }); return } // 若是服务端返回须要合并 if (res.needMerge) { api.mergeSimpleUpload({ tempName: res.tempName, fileName: file.name, ...this.params, }).then(data => { // 文件合并成功 Bus.$emit('fileSuccess', data); }).catch(e => {}); // 不须要合并 } else { Bus.$emit('fileSuccess', res); console.log('上传成功'); } }, onFileError(rootFile, file, response, chunk) { console.log(error) },

5. 文件分片

vue-simple-uploader自动将文件进行分片,在optionschunkSize中能够设置每一个分片的大小。

如图:对于大文件来讲,会发送多个请求,在设置testChunkstrue后(在插件中默认就是true),会发送与服务器进行分片校验的请求,下面的第一个get请求就是该请求;后面的每个post请求都是上传分片的请求

看一下发送给服务端的参数,其中chunkNumber表示当前是第几个分片,totalChunks表明全部的分片数,这两个参数都是都是插件根据你设置的chunkSize来计算的。

须要注意的就是在最后文件上传成功的事件中,经过后台返回的字段,来判断是否要再给后台发送一个文件合并的请求。

6. MD5的计算过程

断点续传及秒传的基础是要计算文件的MD5,这是文件的惟一标识,而后服务器根据MD5进行判断,是进行秒传仍是断点续传。

file-added事件以后,就计算MD5,咱们最终的目的是将计算出来的MD5加到参数里传给后台,而后继续文件上传的操做,详细的思路步骤是:

  1. 把uploader组件的autoStart设为false,即选择文件后不会自动开始上传
  2. 先经过 file.pause()暂停文件,而后经过H5的FileReader接口读取文件
  3. 将异步读取文件的结果进行MD5,这里我用的加密工具是spark-md5,你能够经过npm install spark-md5 --save来安装,也可使用其余MD5加密工具。
  4. file有个属性是uniqueIdentifier,表明文件惟一标示,咱们把计算出来的MD5赋值给这个属性 file.uniqueIdentifier = md5,这就实现了咱们最终的目的。
  5. 经过file.resume()开始/继续文件上传。
/** * 计算md5,实现断点续传及秒传 * @param file */ computeMD5(file) { let fileReader = new FileReader(); let time = new Date().getTime(); let md5 = ''; file.pause(); fileReader.readAsArrayBuffer(file.file); fileReader.onload = (e => { if (file.size != e.target.result.byteLength) { this.error('Browser reported success but could not read the file until the end.'); return } md5 = SparkMD5.ArrayBuffer.hash(e.target.result); // 添加额外的参数 this.uploader.opts.query = { ...this.params } console.log(`MD5计算完毕:${file.id} ${file.name} MD5:${md5} 用时:${new Date().getTime() - time} ms`); file.uniqueIdentifier = md5; file.resume(); }); fileReader.onerror = function () { this.error('FileReader onerror was triggered, maybe the browser aborted due to high memory usage.'); }; },

给file的uniqueIdentifier 属性赋值后,请求中的identifier便是咱们计算出来的MD5

7. 秒传及断点续传

在计算完MD5后,咱们就能谈断点续传及秒传的概念了。

服务器根据前端传过来的MD5去判断是否能够进行秒传或断点续传:

  • a. 服务器发现文件已经彻底上传成功,则直接返回秒传的标识。
  • b. 服务器发现文件上传过度片信息,则返回这些分片信息,告诉前端继续上传,即断点续传

7.1 对于前端来讲

在每次上传过程的最开始,vue-simple-uploader会发送一个get请求,来问服务器我哪些分片已经上传过了,

这个请求返回的结果也有几种可能:

  • a. 若是是秒传,在请求结果中会有相应的标识,好比我这里是skipUploadtrue,且返回了url,表明服务器告诉咱们这个文件已经有了,我直接把url给你,你不用再传了,这就是秒传

图a1:秒传状况下后台返回值

图a2:秒传gif

  • b. 若是后台返回了分片信息,这是断点续传。如图,返回的数据中有个uploaded的字段,表明这些分片是已经上传过的了,插件会自动跳过这些分片的上传。

图b1:断点续传状况下后台返回值

图b2:断点续传gif

  • c. 可能什么都不会返回,那这就是个全新的文件了,走完整的分片上传逻辑

7.2 前端作分片检验:checkChunkUploadedByResponse

前面讲的是概念,如今说一说前端在拿到这些返回值以后怎么处理。
插件本身是不会判断哪一个须要跳过的,在代码中由options中的checkChunkUploadedByResponse控制,它会根据 XHR 响应内容检测每一个块是否上传成功了,成功的分片直接跳过上传
你要在这个函数中进行处理,能够跳过的状况下返回true便可。

checkChunkUploadedByResponse: function (chunk, message) { let objMessage = JSON.parse(message); if (objMessage.skipUpload) { return true; } return (objMessage.uploaded || []).indexOf(chunk.offset + 1) >= 0 },

注:skipUpload 和 uploaded 是我和后台商议的字段,你要按照后台实际返回的字段名来。

8. 源码及后记

总共几个文件,app.vue,封装的全局上传组件globalUploader.vue,调用组件的demo.vue,源码放到github上了:https://github.com/shady-xia/Blog/tree/master/vue-simple-uploader

globalUploader源码中的ticketapi都是本身用的, 一个是accesstoken,一个是基于axios封装的请求库,请根据你的业务需求替代之。另外上传界面的展开和收起用到了jquery,通知用到了Element的组件,请忽略之。

本人水平有限,更多的是提供一个思路,供你们参考。

封装完这个插件后,再加上开发文件资源库,我发现已经基本实现了一个简易的百度网盘了,一个管理系统,功能搞的这么复杂,坑爹啊!

相关文章
相关标签/搜索