PHP配合JS导出Excel大量数据
一般使用PHP导出Excel表格都会用PHPExcel,但是当遇到要导出大量数据时,就会导致超时,内存溢出等问题。因此在项目中放弃使用这种方式,决定采用前段生成Excel的方式来解决问题。
步骤如下:
- 前端ajax先请求一次后端,获取总的数据个数,假设有1000条
- 然后前端分10次,每次100条ajax请求后台数据,
- 10次ajax都请求成功后(这里使用Promise.all()来处理多次异步请求),将数据合并在一个数组里
- 使用 SheetJS/js-xlsx 生成Excel文件并下载
这种方案额外的好处:
- 用户体验友好,前端可以用进度条来展示10次请求的百分比
- 后台不用额外提供导出Excel的接口,只需要使用查询数据的接口,因为一般查询数据的接口都会有:结果里包含总个数字段、分页查询功能,因此前端只需按上述逻辑调用数据查询接口合并数据即可
参照:https://github.com/hegoku/php-sheetJs-excel
PHP接口代码,这里数据随机生成,实际情况应该是调用数据库获取:
$data=[];
for ($i=1;$i<=100;$i++) { //随机生成数据
$tmp=[
'id'=>($_GET['page']-1)*100+$i,
'name'=>chr(mt_rand(33, 126)).chr(mt_rand(33, 59)).chr(mt_rand(33, 126)).chr(mt_rand(33, 126)) //生成随机名字
];
array_push($data, $tmp);
}
sleep(2); //模拟数据库耗时
echo json_encode([
'code'=>200,
'pagination'=>['count'=>1000],
'data'=>$data
]);
前端代码,这里用了Vue作为前端模板:
<!DOCTYPE html>
<html>
<head>
<meta charset="utf-8"/>
<link rel="stylesheet" href="css/bootstrap.min.css">
<script src="js/vue.min.js"></script>
<script src="js/vue-resource.min.js"></script>
<script src="js/jquery-2.0.3.min.js"></script>
<script src="js/bootstrap.min.js"></script>
<!-- SheetJS js-xlsx library -->
<script src="js/shim.min.js"></script>
<script src="js/xlsx.full.min.js"></script>
<!-- FileSaver.js is the library of choice for Chrome -->
<script src="js/Blob.js"></script>
<script src="js/FileSaver.js"></script>
<!-- FileSaver doesn't work in older IE and newer Safari; Downloadify is the flash fallback -->
<script src="js/swfobject.js"></script>
<script src="js/downloadify.min.js"></script>
</head>
<body>
<div id="app">
<button ref="export_btn" class="btn btn-primary" style="float:none;margin-left:0;" type="button" @click="exportExcel">
<span v-show="export_percentage==-1">下载报表</span>
<span v-show="export_percentage!=-1">导出中:{{export_percentage}}%</span>
</button>
<div v-show="export_percentage!=-1" class="progress" style="margin:10px;">
<div class="progress-bar progress-bar-striped active" role="progressbar" aria-valuemin="0" aria-valuemax="100" :style="{width:export_percentage+'%'}"></div>
</div>
</div>
</body>
<script>
var app=new Vue({
el: '#app',
data: function(){
return {
export_percentage:-1,
count:10000
}
},
methods: {
exportExcel: function(){
var self=this;
var request_times=Math.ceil(this.count/100); //计算分几次请求var funcs=[]; //Promise.all要用到的参数, 存放每次请求的Promise对象var complete_count=0; //成功请求次数this.export_percentage=0; //设置当前进度百分比为0for (var i=1; i<=request_times; i++) { // 循环请求次数,构造请求的Promise对象并插入funcs数组var func=newPromise(function(resolve, reject){ //定义Promise并处理请求逻辑var data=[];
self.$http.get(
'a.php',
{ params: {page:i} }
).then(function(response){
if (response.body.code==200) {
for(var i=0; i<response.body.data.length; i++){ //将后台返回中需要的字段取出var item=[];
item.push(response.body.data[i].id);
item.push(response.body.data[i].name);
data.push(item);
}
complete_count++; //成功请求次数+1
self.export_percentage=100*complete_count/request_times; //设置当前进度百分比
resolve(data);
} else {
reject();
}
});
});
funcs.push(func);
}
Promise.all(funcs).then(function(values){ //使用Promise.all调用funcs里面的函数,并合并数据,最后给js-xlsx生成Excelvar aoa=[
['ID', '名称'] //第一行标题
];
//将数据合并for (var i=0; i<values.length; i++) {
for (var j=0; j<values[i].length; j++) {
aoa.push(values[i][j]);
}
}
var ws = XLSX.utils.aoa_to_sheet(aoa);
var wb=XLSX.utils.book_new();
wb.SheetNames.push('sheet1');
wb.Sheets['sheet1'] = ws;
var wopts = { bookType:'xlsx', bookSST:false, type:'array' };
var wbout = XLSX.write(wb,wopts);
saveAs(new Blob([wbout],{type:"application/octet-stream"}), "data.xlsx");
self.export_percentage=-1;
});
}
}
});
</script>
</html>-->
使用ajax进行异步调用使用:
$.ajax({
type: 'GET',
url: "{:Url('redis_test/promise')}",
data: {'page':i} ,
async : false,
dataType: 'json',
contentType:"utf-8",
success: function (result) {
if (result.code==200) {
for(var i=0; i<result.data.length; i++){ //将后台返回中需要的字段取出
var item=[];
item.push(result.data[i].id);
item.push(result.data[i].name);
data.push(item);
}
complete_count++; //成功请求次数+1
export_percentage = 100*complete_count/request_times; //设置当前进度百分比 //alert(export_percentage);
document.getElementById('isshow').value = '1111';
resolve(data);
} else {
reject(export_percentage);
}
},
error: function (XMLHttpRequest, textStatus, errorThrown) {
// alert(XMLHttpRequest.status);
// alert(XMLHttpRequest.readyState);
// alert(textStatus);
}
});
PHP配合JS导出Excel大量数据的更多相关文章
- js导出excel
function inportEx() { $("#btnEx").text("导出中..."); var fugNumber = "";/ ...
- js导出Excel表格
js导出Excel表格 直接上代码: 红色部分:如果表格数据中有“1/1”这样的值,会在导出的Excel中转化为日期“1月1日”,所以才加上了红色那两句.如果返回值中没有这样的格式,红色部分可以不写. ...
- EasyUI 如何结合JS导出Excel文件
出处:http://blog.csdn.net/jumtre/article/details/41119991 EasyUI 如何结合JS导出Excel文件 分类: 技术 Javascript jQu ...
- 利用PHPExcel导出excel 以及利用js导出excel
导出excel的方法output_excel需要依赖PHPExcel 导出csv的方法csv_export不需要 <?php /** * @author ttt */ class ExcelCo ...
- Html Table用JS导出excel格式问题 导出EXCEL后单元格里的000412341234会变成412341234 7-14 会变成 2018-7-14(7月14) 自定义格式 web利用table表格生成excel格式问题 js导出excel增加表头、mso-number-format定义数据格式 数字输出格式转换 mso-number-format:"\@"
Html Table用JS导出excel格式问题 我在网上找的JS把HTML Tabel导出成EXCEL.但是如果Table里的数字内容为0开的的导成Excel后会自动删除0,我想以text的格式写入 ...
- JS导出excel设置下载的标题/与angular结合冲突
2017.8更新 此功能与angular结合使用时,最后一行 document.getElementById("dlink").click(); 与angular的ng-click ...
- [转]tableExport.js 导出excel 如果有负数或是空值 导出前面会自动加上单引号
原文地址:https://blog.csdn.net/private66/article/details/88718285 tableExport.js 导出excel 如果有负数或是空值 导出前 ...
- 浏览器端JS导出EXCEL
浏览器端JS导出EXCEL FileSaver.js 实现了在本身不支持 HTML5 W3C saveAs() FileSaver 接口的浏览器支持文件保存.FileSaver.js 在客户端保存文件 ...
- html js 导出excel表格
这个使用js 导出excel,可以集成其他语言,可以html,php,asp ,java 等,自己喜欢用那种语言就用哪种,使用非常方便.js是使用tableExport.js ,jquery-3.2. ...
随机推荐
- 流复制-pg_start_backup(带自定义表空间)
一.准备slave库 archive_mode = on ---开启归档模式 archive_command = 'test ! -f /mysqldata/pg/archive_active/%f ...
- 按图索骥,一些mysql知识点
有事没事多看看 基础知识考察 基础知识,尤其是一些理论知识,例如: MySQL有哪些索引类型,这是个半开放式命题: 从数据结构角度可分为B+树索引.哈希索引.以及不常用的FULLTEXT索引(现在My ...
- 201771010117马兴德 实验二 Java基本程序设计(1)
实验二 Java基本程序设计(1) 第一部分 理论知识的学习. 第三章Java基本程序设计结构 1 基本知识: (1)标识符:标识符由字母.下划线.美元符号和数字组成,且第一个符号不能为数字 ...
- wxss--外联样式与内联样式
外联样式 有样式表a.wxss和index.wxss如下: /**a.wxss**/ .container1{ border: 1px solid #000; } /**index.wxss**/ . ...
- Kattis - entertainmentbox
题目链接:https://vjudge.net/problem/Kattis-entertainmentbox 题目大意: 一种叫做不知道什么的盒子可以同时录 k 个节目,现给出 n 个节目的开始和结 ...
- Redis-Redis基本类型及使用Java操作
1 Redis简介 Redis(REmote Dictionary Server)是一个使用ANSI C编写的.开源的.支持网络的.基于内存的.可持久化的键值对存储系统.目前最流行的键值对存储 ...
- MySql 语言分类
(1)数据定义语言,即SQL DDL,用于定义SQL模式.基本表.视图.索引等结构.(2)数据操纵语言,即SQL DML.数据操纵分成数据查询和数据更新两类.(3)数据查询语言,即SQL DQL.(4 ...
- 2020由浅入深最强Java面试题
1.String,StringBuffer和StringBuilder有什么区别? String是字符串常量,不可变对象,每次对String修改都等同于生成了一个新的String象,然后将指针 ...
- 像宝石一样的Java原子类
十五年前,多处理器系统是高度专业化的系统,通常耗资数十万美元(其中大多数具有两到四个处理器). 如今,多处理器系统既便宜又丰富,几乎主流的微处理器都内置了对多处理器的支持,很多能够支持数十或数百个处理 ...
- CF1353D Constructing the Array(优先队列)
Question 给你一个长度为n的全为0的序列,让你从1-n填数,填的位置为找出最长的0序列,如序列长度为奇数,则为(l+r)/2,为偶数,则为(l+r-1)/2 Solution 运用优先队列,将 ...