如何在JavaScript中处理大量数据

开发 前端
在之前的文章中,我们讲了浏览器对于JavaScript代码执行的限制和基于计时器的伪线程机制。这里,我们再看看如何在JavaScript中处理大量数据。

51CTO推荐专题:JavaScript学习笔记 有问有答

在几年之前,开发人员不会去考虑在服务端之外处理大量的数据。现在这种观念已经改变了,很多Ajax程序需要在客户端和服务器端传输大量的数据。此外,更新DOM节点的处理在浏览器端来看也是一个很耗时的工作。而且,需要对这些信息进行分析处理的时候也很可能导致程序无响应,浏览器抛出错误。

将需要大量处理数据的过程分割成很多小段,然后通过JavaScript的计时器来分别执行,就可以防止浏览器假死。先看看怎么开始:

function ProcessArray(data,handler,callback){  
  • 1.

ProcessArray()方法支持三个参数:

◆data:需要处理的数据

◆handler:处理每条数据的函数

◆callback:回调函数

然后定义一些变量:

var maxtime = 100;  
var delay = 20;  
var queue = data.concat(); 
  • 1.
  • 2.
  • 3.

maxtime表示每个处理进程的最大毫秒数。delay表示每个程序块之间的毫秒数。queue是源数据的复制,虽然不是在所有情景下都必要,但是我们是通过传递引用修改的,所以最好还是备份一下。

然后就可以使用setTimeout()方法来处理了:

setTimeout(function(){  
     var endtime = new Date()  + maxtime;  
     do{  
          hanler(queue.shift());  
     }while(queue.length>0 && endtime > new Date()); 
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.

首先,先计算endtime,这是程序处理的最大时间。do.while 循环用来处理每一个小块的数据,直到循环全部完成或者超时。

为什么使用do..while循环呢?

JavaScript支持while和do…while循环。不同之处在于do..while循环回至少执行一次。如果使用while循环,那么当开发者设置一个很小或者很低的endtime值的时候,那么处理就根本不会执行了。

最后,我们再决定是否需要处理其他的数据,如果需要,那么就再调用一次:

 if (queue.length > 0) {  
    setTimeout(arguments.callee, delay);  
  }  
  else {  
    if (callback) callback();  
  }  
}, delay);  
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.

这样回调函数会在每一个数据都处理结束的时候执行。我们可以通过ProcessArray()来测试一小组数据:

// process an individual data item  
function Process(dataitem) {  
  console.log(dataitem);  
}  
// processing is complete  
function Done() {  
  console.log("Done");  
}  
// test data  
var data = [];  
for (var i = 0; i < 500; i++) data[i] = i;  
// process all items  
ProcessArray(data, Process, Done); 
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.

这个方法在任何浏览器中都可以执行,不过HTML 5提供了更好的办法,可参考专题:HTML 5 下一代Web开发标准详解

原文链接:http://rockux.com

【编辑推荐】

  1. 8个令人惊叹的JavaScript效果的网站
  2. 再谈JavaScript图片预加载技术
  3. 示例:JavaScript中的后续传递风格
  4. 如何编写高质量的JavaScript代码
责任编辑:陈贻新 来源: RockUX
相关推荐

2025-01-21 15:20:14

2016-11-07 21:37:46

javascript过滤器filter

2021-03-29 08:01:20

JavaScript数据结构

2021-03-18 10:45:02

JavaScript数组运算符

2021-03-11 23:43:20

JavaScript数组开发

2022-01-21 10:58:39

JavaScriptGolangPython

2024-10-22 15:10:49

2020-06-24 07:53:03

机器学习技术人工智能

2021-09-03 09:06:42

代码时间开发

2018-06-26 15:40:49

Tensorflow.MNIST图像数据

2021-02-26 15:10:00

前端React组件交互

2025-02-05 10:02:03

Locust测试异常处理

2020-11-24 10:10:48

人工智能

2018-10-11 09:40:53

前端JavaScript编程语言

2022-03-15 07:55:09

JavaScript线性仪表图开发

2022-04-27 08:55:01

Spring外部化配置

2018-11-21 12:27:21

JavaScript 货币值区域

2022-09-12 23:53:53

JavaScript条件判断开发

2015-07-06 09:59:56

JavaScript私有成员

2020-11-26 08:12:24

JavaScript对象数组
点赞
收藏

51CTO技术栈公众号