返回顶部
首页 > 资讯 > 精选 >如何解决报表关联计算中的性能问题
  • 486
分享到

如何解决报表关联计算中的性能问题

2023-06-02 14:06:29 486人浏览 泡泡鱼
摘要

报表开发过程中经常要在报表中完成数据关联计算,有时为了降低报表制作复杂度,会将关联关系放到可视的报表模板中完成;而有时则必须在报表中完成关联,如多数据源、异构数据源的情况。在报表中做关联往往导致报表效率不高,计算过慢,从而引发性能问题。为此

报表开发过程中经常要在报表中完成数据关联计算,有时为了降低报表制作复杂度,会将关联关系放到可视的报表模板中完成;而有时则必须在报表中完成关联,如多数据源、异构数据源的情况。在报表中做关联往往导致报表效率不高,计算过慢,从而引发性能问题。为此,润乾报表提供了高性能数据关联方式(需要结合集算器实现),可以显著提升报表的计算效率。这里就通过一个常见的多源关联分片报表实例来说明润乾报表的实现过程:

报表说明

根据销售情况等信息按照时间、地区、销售人员、产品等维度汇总销售额,报表样式如下:

如何解决报表关联计算中的性能问题

以下为实现过程。

编写计算脚本

首先使用集算器编写脚本,完成数据关联,并为报表返回关联后的结果集。

A
1=connect(“demo”)
2=A1.query(“SELECT 客户. 地区, 客户. 城市, 订单明细. 数量, 订单明细. 折扣, 订单明细. 单价, 订单. 雇员 ID, 订单. 订购日期, 订单明细. 产品 ID FROM 订单明细, 订单, 客户 WHERE 客户. 客户 ID = 订单. 客户 ID AND 订单. 订单 ID = 订单明细. 订单 ID and 订单. 订购日期 is not null”)
3=A1.query(“SELECT 类别. 类别 ID, 类别. 类别名称 FROM 类别”)
4=A1.query(“SELECT* from 雇员”)
5=A1.query(“SELECT 产品. 类别 ID, 产品. 产品 ID FROM 产品”)
6>A5.switch(类别 ID,A3: 类别 ID)
7>A2.switch(雇员 ID,A4: 雇员 ID)
8>A2.switch(产品 ID,A5: 产品 ID)
9=A2.new(year( 订购日期): 年,month(订购日期): 月, 地区, 城市, 单价 * 数量: 金额, 雇员 ID. 职务: 职务, 雇员 ID. 雇员 ID: 雇员 ID, 雇员 ID. 姓氏 + 雇员 ID. 名字: 姓名, 产品 ID. 类别 ID. 类别 ID: 类别 ID, 产品 ID. 类别 ID. 类别名称: 类别名称 )
10return A9

A1:连接数据源;

A2-A5:执行 sql,分别取订单、产品等库表数据;

A6-A8:使用 switch 将多表数据完成关联,关联结果存入 A2 格中;

A9:根据已关联结果创建新序表,结果集通过 A10 返回报表。

编制报表

在润乾报表设计器中新建报表模板后,数据集选择“集算器”,在数据集编辑窗口指定上述编辑好的 dfx 文件,完成数据集创建。

编辑报表模板表达式:

如何解决报表关联计算中的性能问题

不同于报表模板中的低效关联,集算报表是事先在集算脚本中完成关联,报表模板只需从结果集取数,从而获得更高的性能。

为了对照,我们再按照传统的报表中实现关联的方式做一下:

报表中实现关联

数据集

ds1: SELECT 客户. 地区, 客户. 城市, 订单明细. 数量, 订单明细. 折扣, 订单明细. 单价, 订单. 雇员 ID, 订单. 订购日期, 订单明细. 产品 ID FROM 订单明细, 订单, 客户 WHERE 客户. 客户 ID = 订单. 客户 ID  AND  订单. 订单 ID = 订单明细. 订单 ID and 订单. 订购日期 is not null

ds2: SELECT 类别. 类别 ID, 类别. 类别名称 FROM 类别

ds3: SELECT * from 雇员

ds4: SELECT 产品. 类别 ID, 产品. 产品 ID FROM 产品

报表模板

如何解决报表关联计算中的性能问题

对比效果

本例的源表数据为 40 多万条,基于同样的取数 sql,两种关联方式的运行时间如下表所示:

如何解决报表关联计算中的性能问题

可以看到,润乾报表在处理关联计算类报表时有明显的优势。这是因为在报表中实现关联只能使用遍历算法,针对单条主记录去寻找关联的子记录,因此效率不高;而集算器采用了更高效的 hash 关联方案,事先将所有子记录按对应码 hash 到主记录上(代码中的 switch 函数就利用了 hash 关联技术),因而能获得一倍以上的性能提升(如果只算关联能快出 5-10 倍)。

此外,集算器也非常适合处理异构数据源的数据关联,如常见的跨库计算、文件和数据库混合计算等情况。

下附运行日志测试机配置。

【附 1】运行日志

报表中关联

[2018-09-15 11:32:59] : [INFO]  - 开始运算报表,首先取数……

[2018-09-15 11:32:59] : [DEBUG]  - 下面开始打出 sql

[2018-09-15 11:32:59] : [DEBUG]  - ds1=SELECT 客户. 地区, 客户. 城市, 订单明细. 数量, 订单明细. 折扣, 订单明细. 单价, 订单. 雇员 ID, 订单. 订购日期, 订单明细. 产品 ID FROM 订单明细, 订单, 客户 WHERE 客户. 客户 ID = 订单. 客户 ID  AND  订单. 订单 ID = 订单明细. 订单 ID and 订单. 订购日期 is not null

[2018-09-15 11:33:35] : [DEBUG]  - 下面开始打出 sql

[2018-09-15 11:33:35] : [DEBUG]  - ds2=SELECT 类别. 类别 ID, 类别. 类别名称 FROM 类别

[2018-09-15 11:33:35] : [DEBUG]  - 下面开始打出 sql

[2018-09-15 11:33:35] : [DEBUG]  - ds3=SELECT * from 雇员

[2018-09-15 11:33:35] : [DEBUG]  - 下面开始打出 sql

[2018-09-15 11:33:35] : [DEBUG]  - ds4=SELECT 产品. 类别 ID, 产品. 产品 ID FROM 产品

[2018-09-15 11:33:35] : [INFO]  - 取数结束, 开始运算

[2018-09-15 11:34:58] : [INFO]  - 计算结束:

dfx 中关联

[2018-09-15 11:56:33] : [INFO]  - 开始运算报表,首先取数……

[2018-09-15 11:57:11] : [INFO]  - 取数结束, 开始运算

[2018-09-15 11:57:26] : [INFO]  - 计算结束:

【附 2】测试机配置

测试机型:Dell Inspiron 3420

CPU:Intel Core i5-3210M @2.50GHz *4

RAM:4G

HDD:西数 WDC(500G 5400 转 / 分)

操作系统:Win7(X64) SP1

JDK:1.6

数据库oracle11g R2

润乾报表版本:2018

--结束END--

本文标题: 如何解决报表关联计算中的性能问题

本文链接: https://lsjlt.com/news/230208.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • 如何解决报表关联计算中的性能问题
    报表开发过程中经常要在报表中完成数据关联计算,有时为了降低报表制作复杂度,会将关联关系放到可视的报表模板中完成;而有时则必须在报表中完成关联,如多数据源、异构数据源的情况。在报表中做关联往往导致报表效率不高,计算过慢,从而引发性能问题。为此...
    99+
    2023-06-02
  • 如何解决mysql性能问题
    这篇文章主要为大家展示了“如何解决mysql性能问题”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“如何解决mysql性能问题”这篇文章吧。 最近项目使用mys...
    99+
    2024-04-02
  • JavaScript如何解决浮点计算的问题
    小编给大家分享一下JavaScript如何解决浮点计算的问题,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!浮点计算的问题0.1&...
    99+
    2024-04-02
  • 解决pytorch中的kl divergence计算问题
    偶然从pytorch讨论论坛中看到的一个问题,KL divergence different results from tf,kl divergence 在TensorFlow中和p...
    99+
    2024-04-02
  • Android开发中如何解决计算器的sin、cos及tan值计算问题
    小编给大家分享一下Android开发中如何解决计算器的sin、cos及tan值计算问题,希望大家阅读完这篇文章之后都有所收获,下面让我们一起去探讨吧!具体如下:接到一个需求 :要求计算器sin90=1,拿到知道很疑问 难道不等于一么?测试了...
    99+
    2023-05-30
    android
  • 如何解决js数字计算误差的问题
    这篇文章主要为大家展示了“如何解决js数字计算误差的问题”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“如何解决js数字计算误差的问题”这篇文章吧。实例如下://...
    99+
    2024-04-02
  • RiSearch PHP 如何解决中文分词与索引的关联问题
    引言:RiSearch是一款功能强大的PHP全文搜索引擎,能够高效地处理中文分词和索引问题。本文将介绍如何使用RiSearch解决中文分词与索引的关联问题,并提供具体的代码示例。一、中文分词中文分词是将连续的中文文本切分成一个个有意义的词语...
    99+
    2023-10-21
    PHP 索引 中文分词
  • 如何解决计算机中磁盘被写保护的问题
    这篇文章主要介绍了如何解决计算机中磁盘被写保护的问题,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。方法一 修改注册表1 在开始菜单栏的搜索框输入“regedit”,打开注册表...
    99+
    2023-06-13
  • MySQL中如何解决慢查询和性能问题
    解决MySQL中慢查询和性能问题的方法有很多,以下是一些常见的解决方案: 使用合适的索引:索引能够加快数据的检索速度,提高查询性...
    99+
    2024-03-06
    MySQL
  • 如何在Oracle中查找和解决性能问题
    在Oracle中查找和解决性能问题通常涉及以下步骤: 识别性能问题:首先要确定哪些查询或操作导致了性能问题。可以通过监视系统性能...
    99+
    2024-04-09
    Oracle
  • ​如何解决OpenStack云的互联问题
    如何解决OpenStack云的互联问题,很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。摘要:用Neutron API建立Open...
    99+
    2024-04-02
  • Python中的浮点数计算精度问题是如何解决的?
    Python中的浮点数计算精度问题是如何解决的?在计算机科学中,浮点数计算精度问题是常见的挑战之一。由于计算机内部使用有限的比特位来表示浮点数,所以对于某些小数的表示和运算时,可能会出现精度损失的情况。Python作为一门强大的编程语言,提...
    99+
    2023-10-22
    解决 浮点数 精度
  • mysql关联两张表时的编码问题及解决办法
    Mysql关联两张表时,产生错误提示Illegal mix of collations 1、先用工具把数据库、两张表的编码方式改变 2、这步很重要,需要改变字段的编码方式。 ALTER TABLE `表...
    99+
    2024-04-02
  • 如何解决VBS中字符串连接的性能问题
    这篇文章将为大家详细讲解有关如何解决VBS中字符串连接的性能问题,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。当然,对于少量的字符串连接,效率并没有对程序造成多大影响,现在让我们考虑一个极端的问题:将1到...
    99+
    2023-06-08
  • 如何解决WEB性能测试中的验证码问题
    如何解决WEB性能测试中的验证码问题,针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。现在越来越多的网站为了安全性或是防止Spam的侵害,采用了验证码的校验技术。简单地说,验证...
    99+
    2023-06-04
  • Mybatis无主键的关联数据去重问题如何解决
    本文小编为大家详细介绍“Mybatis无主键的关联数据去重问题如何解决”,内容详细,步骤清晰,细节处理妥当,希望这篇“Mybatis无主键的关联数据去重问题如何解决”文章能帮助大家解决疑惑,下面跟着小编的思路慢慢深入,一起来学习新知识吧。先...
    99+
    2023-07-05
  • 如何解决css3中calc在less编译时被计算的问题
    这篇文章将为大家详细讲解有关如何解决css3中calc在less编译时被计算的问题,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。对于前端er来说,Less或Sass已经是...
    99+
    2024-04-02
  • 如何解决golang中关闭chan的问题
    学习Golang要努力,但是不要急!今天的这篇文章《如何解决golang中关闭chan的问题》将会介绍到等等知识点,如果你想深入学习Golang,可以关注我!我会持续更新相关文章的,希望对大家都能有...
    99+
    2024-04-04
  • 如何解决php无法计算浮点数问题
    这篇文章主要介绍如何解决php无法计算浮点数问题,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!php无法计算浮点数是因为计算机底层二进制无法精确表示浮点数,其解决办法就是使用精准计算的类库或函数库,如使用php中的B...
    99+
    2023-06-25
  • pandas计算相关系数corr返回空的问题解决
    目录解决方法问题复现解决方法 查看dataframe的数据类型,转为数值类型即可: dataframe = dataframe.astype("float") 或者逐列转换: for...
    99+
    2023-01-17
    pandas corr返回空 pandas corr返回
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作