php计算两个日期之间的间隔,避免导出大量数据

简介: 在做系统业务功能的时候,有的时候业务人员会进行超大范围地导出excel表格,导致内存、CPU占用飙升。 这对于系统的平滑运行不太友好,应该进行导出任务排队、限制范围等操作来控制频率、资源使用率。

写在前面

在做系统业务功能的时候,有的时候业务人员会进行超大范围地导出excel表格,导致内存、CPU占用飙升。 这对于系统的平滑运行不太友好,应该进行导出任务排队、限制范围等操作来控制频率、资源使用率。


探索


导出任务排队


这里讲讲实现思路:


  • 前端请求服务端接口,告诉它要导出的日期范围、内容


  • 服务端记录,插入队列


  • 服务端监控脚本(可以用easyswoole等常驻型应用来完成),生成队列里的excel文件,把任务标注成已经成功、对应的文件名


  • 前端请求任务之后,间隔轮询后端,是否服务端导出完成,是的话则根据返回文件名下载文件


限制数据范围


这是比较重要的点,因为如果是不限制数据筛选范围,使用了排队导出的架构之后,也可能导致机器资源占用过高(而且有被攻击的风险!) 我们可以根据筛选的日期范围,比如不能间隔超过50天,来限制,那么就要判断两个日期差距的日期了。 这里附带一小段代码


$start = "2019-9-17 15:11:38";
$end   = "2019-9-01 15:11:45";
$diff = strtotime($start) - strtotime($end);
$diffHour = bcdiv($diff, 60 * 60, 2); // 差距的小时
$diffDay  = bcdiv($diffHour,24,2); // 差距的天数
if ($diffDay > 50){
    echo "范围过大,不可间隔50天";die;
}
echo "....";
目录
相关文章
|
2月前
|
JSON PHP 数据格式
|
5天前
|
前端开发 PHP 数据格式
【附带效果视频】php接口给前端返回流式数据,php使用event-stream进行数据推送,循环一次输出一次
【附带效果视频】php接口给前端返回流式数据,php使用event-stream进行数据推送,循环一次输出一次
9 0
|
10天前
|
存储 PHP
php处理带emoji表情的字符数据
php处理带emoji表情的字符数据
6 0
|
10天前
|
PHP
php+ajax传file文件数据
php+ajax传file文件数据
12 0
|
17天前
|
安全 前端开发 测试技术
安全开发-PHP应用&模版引用&Smarty渲染&MVC模型&数据联动&RCE安全&TP框架&路由访问&对象操作&内置过滤绕过&核心漏洞
安全开发-PHP应用&模版引用&Smarty渲染&MVC模型&数据联动&RCE安全&TP框架&路由访问&对象操作&内置过滤绕过&核心漏洞
|
2月前
|
存储 SQL 安全
在PHP中处理用户输入的数据
【5月更文挑战第22天】在PHP中处理用户输入的数据
32 6
|
22天前
|
算法 PHP 数据安全/隐私保护
PHP中的数据加密技术及应用
在Web开发中,数据安全始终是一个至关重要的问题。本文将介绍PHP中常用的数据加密技术,包括对称加密算法、非对称加密算法和哈希算法的原理和应用。通过深入了解这些加密技术,开发人员可以更好地保护用户数据和提高系统的安全性。
14 0
php案例:$_ENV的数据怎么样才能显示出来.$_ENV的简单运用
php案例:$_ENV的数据怎么样才能显示出来.$_ENV的简单运用
php案例:$_ENV的数据怎么样才能显示出来.$_ENV的简单运用