js:spark-md5分片计算文件的md5值

简介: js:spark-md5分片计算文件的md5值

SparkMD5 is a fast md5 implementation of the MD5 algorithm.

文档

CDN引入

<script src="https://cdn.bootcdn.net/ajax/libs/spark-md5/3.0.2/spark-md5.min.js"></script>

npm安装

npm install --save spark-md5

使用方式一:

var hexHash = SparkMD5.hash('Hi there')
console.log(hexHash)
// d9385462d3deff78c352ebb3f941ce12

使用方式二:

var spark = new SparkMD5()
spark.append('Hi')
spark.append(' ')
spark.append('there')
var hexHash = spark.end()
console.log(hexHash)
// d9385462d3deff78c352ebb3f941ce12

计算文件md5值

<script src="https://cdn.bootcdn.net/ajax/libs/spark-md5/3.0.2/spark-md5.min.js"></script>
<input
  type="file"
  id="file"
/>
<script>
  /**
   * 计算文件md5值
   */
  function getFileMd5(file) {
    return new Promise((resolve, reject) => {
      let fileReader = new FileReader()
      fileReader.onload = function (event) {
        let fileMd5 = SparkMD5.ArrayBuffer.hash(event.target.result)
        resolve(fileMd5)
      }
      fileReader.readAsArrayBuffer(file)
    })
  }
  document.getElementById('file').onchange = function (event) {
    let file = event.target.files[0]
    getFileMd5(file).then((md5) => {
      console.log(md5)
      // e311a516191b1643e3f63cb05163d11a
    })
  }
</script>

分片读取文件,并计算md5值

<script src="https://cdn.bootcdn.net/ajax/libs/spark-md5/3.0.2/spark-md5.min.js"></script>
<input
  type="file"
  id="file"
/>
<script>
  /**
   * 分片读取文件,计算最终md5值
   */
  function getFileMd5BySlice(file, chunkSize) {
    // 默认分片大小 2MB
    let defaultChunkSize = 1024 * 1024 * 2
    return new Promise((resolve, reject) => {
      chunkSize = chunkSize || defaultChunkSize
      let blobSlice =
          File.prototype.slice ||
          File.prototype.mozSlice ||
          File.prototype.webkitSlice,
        // 总分片数
        chunks = Math.ceil(file.size / chunkSize),
        currentChunk = 0,
        spark = new SparkMD5.ArrayBuffer(),
        fileReader = new FileReader()
      fileReader.onload = function (e) {
        console.log('read chunk nr', currentChunk + 1, 'of', chunks)
        spark.append(e.target.result) // Append array buffer
        currentChunk++
        if (currentChunk < chunks) {
          loadNext()
        } else {
          resolve(spark.end())
        }
      }
      fileReader.onerror = function (error) {
        reject(error)
      }
      function loadNext() {
        // 切片起始位置
        let start = currentChunk * chunkSize
        // 切片终止位置
        let end = start + chunkSize
        if (end >= file.size) {
          end = file.size
        }
        fileReader.readAsArrayBuffer(blobSlice.call(file, start, end))
      }
      loadNext()
    })
  }
  document.getElementById('file').addEventListener('change', function (e) {
    let startTime = new Date().getTime()
    let file = e.target.files[0]
    getFileMd5BySlice(file).then((res) => {
      console.log(res)
      // 52fde8264e2640cd5b95fdb123de0eba
      console.log(new Date().getTime() - startTime)
      // 4611 2M
      // 4167 10M
      // 4333 20M
      // 4070 50M
      // 4160 100M
    })
  })
</script>

参考

spark.md5.js获取文件的md5值

相关文章
|
18天前
|
JSON 前端开发 JavaScript
在JavaScript中,异步编程是一种处理非阻塞操作(如网络请求、文件读写等)的重要技术
【6月更文挑战第12天】JavaScript中的异步编程通过Promise和async/await处理非阻塞操作。Promise管理异步操作的三种状态,防止回调地狱,支持链式调用和并行处理。async/await是ES8引入的语法糖,使异步代码更像同步代码,提高可读性。两者结合使用能更高效地处理复杂异步场景。
23 3
|
16天前
|
前端开发 JavaScript 数据处理
前端新手指南:如何解决JavaScript导出CSV文件不完整的问题
【6月更文挑战第4天】在JavaScript中处理CSV文件时,需要特别注意一些特殊字符,例如逗号、双引号、换行符等。这些字符可能会影响CSV文件的解析,导致数据错乱。
54 0
|
6天前
|
JavaScript 前端开发 API
探讨JavaScript动态添加HTML文件的技术
探讨JavaScript动态添加HTML文件的技术
12 1
|
11天前
|
JavaScript 前端开发 开发者
介绍如何在WebStorm中调试JavaScript文件
介绍如何在WebStorm中调试JavaScript文件
12 1
|
18天前
|
分布式计算 监控 大数据
spark实战:实现分区内求最大值,分区间求和以及获取日志文件固定日期的请求路径
spark实战:实现分区内求最大值,分区间求和以及获取日志文件固定日期的请求路径
|
3天前
|
移动开发 JavaScript 前端开发
rem的适配方案,css文件和js文件的引入方式,特色小边框的制作,DS-Digital.ttf数字展示屏的使用方法:,自适应图片 background-size,jQuery爆bug,a和盒子居中,
rem的适配方案,css文件和js文件的引入方式,特色小边框的制作,DS-Digital.ttf数字展示屏的使用方法:,自适应图片 background-size,jQuery爆bug,a和盒子居中,
|
4天前
|
JavaScript 前端开发 小程序
老程序员分享:js中自然日的计算
老程序员分享:js中自然日的计算
|
4天前
|
算法 JavaScript 安全
一篇文章讲明白JavaScript_提交表单和MD5算法密码加密
一篇文章讲明白JavaScript_提交表单和MD5算法密码加密
|
4天前
|
算法 JavaScript 安全
一篇文章讲明白JavaScript_提交表单和MD5算法密码加密
一篇文章讲明白JavaScript_提交表单和MD5算法密码加密
|
5天前
|
分布式计算 Serverless 数据处理
Serverless Spark计算服务
Serverless Spark计算服务

热门文章

最新文章