ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

大数据量的报表如何快速分页呈现,有什么好的处理方法

2020-05-20 09:05:08  阅读:225  来源: 互联网

标签:异步 报表 呈现 取数 线程 数据量 分页


在说明这个问题的处理方法前,先了解下是什么原因导致的大数据量报表呈现慢的问题。

一般不外乎这两种原因:

1 . 数据查询业务,查询条件宽泛,导致数据库查询后的结果集数据条数达到几百上千万甚至过亿;

2 . 采用内存运算机制,即如此庞大的数据量要一次性在内存计算完成,后再进行呈现,用户体验特别不好,这个过程中很可能因为计算量大 出现内存溢出,无法继续计算。

针对这种情况,我们可以采用异步处理的方式,将取数和呈现分为两个线程异步处理,取数线程发出 SQL 后不断取出数据缓存到本地,由呈现线程从本地缓存中获取数据进行显示。这样,已经取出并缓存的数据就能快速呈现,不再有等待感;而取数线程所涉及的 SQL,在数据库中保持同一个事务,也不会有不一致的问题,前面提到的两个问题全部得以完美解决。

同时,借助二进制文件存储格式,报表还可以按行号随机访问记录,而不用每次通过遍历查找数据。也就是说,这种存储格式支持跳转到任意页访问,从而极大地改善了用户体验。不过,由于采用了异步机制,页面端显示的总页数和总记录数会随着取数过程不断变化。

目前润乾报表已经将这种处理机制产品化,只需要一个简单的设置就可以了。

详细设置可参考:

秒级展现的百万级大清单报表怎么做

标签:异步,报表,呈现,取数,线程,数据量,分页
来源: https://www.cnblogs.com/xmilu/p/12921455.html

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有