yhdata_2aA4rwOK白银一
2022-5-18 13:22:53 发布在问答
【数据处理】 制作报告页面新建计算列影响报表整体刷新速度
一些涉及到率的指标,需要在制作报告页面新建计算列,但是加上这种计算列后,查看报告的时候需要刷新将近20秒,这也太慢了,不加计算列只需要3秒左右,有什么方法优化下吗?(数据已经入了集市,1400万条数据)
1522
9
精彩评论9
永洪tech-shenfs青铜一
发表于 2022-5-18 13:25:24 显示全部楼层
计算列怎么写的,麻烦截图看下呢
回复

使用道具 2#

yhdata_2aA4rwOK白银一
发表于 2022-5-18 13:30:04 显示全部楼层
永洪tech-shenfs 发表于 2022-5-18 13:25
计算列怎么写的,麻烦截图看下呢

这样写的
回复

使用道具 3#

yhdata_2aA4rwOK白银一
发表于 2022-5-18 13:30:40 显示全部楼层

if (sum(col['满期保费'])==0|| isNull(sum(col['满期保费']))) then 0
else (ifNull(sum(col['期末未决赔款']),0)-ifNull(sum(col['期初未决赔款']),0)+ifNull(sum(col['已决赔款']),0))/sum(col['满期保费'])
end
回复

使用道具 4#

永洪tech-shenfs青铜一
发表于 2022-5-18 14:03:42 显示全部楼层
yhdata_2aA4rwOK 发表于 2022-5-18 13:30
if (sum(col['满期保费'])==0|| isNull(sum(col['满期保费']))) then 0
else (ifNull(sum(col['期末未决 ...

1400万数据入集市后,计算列sum()这种都是交给内存处理的,确实会影响速度呢。
回复

使用道具 5#

yhdata_2aA4rwOK白银一
发表于 2022-5-18 14:09:45 显示全部楼层
永洪tech-shenfs 发表于 2022-5-18 14:03
1400万数据入集市后,计算列sum()这种都是交给内存处理的,确实会影响速度呢。 ...

那应该怎样优化下,加内存可以吗
回复

使用道具 6#

永洪tech-shenfs青铜一
发表于 2022-5-18 14:23:02 显示全部楼层
你查看报告打开后,在日志中搜索下类似的字段,看下内存占用情况,如果内存够用,那加内存也无法优化。
内存.png
回复

使用道具 7#

永洪tech-shenfs青铜一
发表于 2022-5-18 14:36:24 显示全部楼层
yhdata_2aA4rwOK 发表于 2022-5-18 14:09
那应该怎样优化下,加内存可以吗

还有种方法您可以参考下,您可以在数据集那边建这个计算列后,再入集市,制作报告的时候直接使用,这样速度会提升
回复

使用道具 8#

yhdata_2aA4rwOK白银一
发表于 2022-5-18 15:42:22 显示全部楼层
永洪tech-shenfs 发表于 2022-5-18 14:23
你查看报告打开后,在日志中搜索下类似的字段,看下内存占用情况,如果内存够用,那加内存也无法优化。
...

这种情况需要加内存吗?
截图.png
回复

使用道具 9#

永洪tech-shenfs青铜一
发表于 2022-5-18 15:49:01 显示全部楼层
yhdata_2aA4rwOK 发表于 2022-5-18 15:42
这种情况需要加内存吗?

看着不用,free jvm mem 还有 9207M,您可以尝试我上面说的优化方法是否可行
回复

使用道具 10#

高级模式
您需要登录后才可以回帖 登录 | 免费注册

  • 官方微信

    欢迎关注永洪服务号!收费为0,价值无限

    扫码关注
  • 新浪微博

    让每位用户轻松挖掘数据价值!

    访问新浪微博
  • 智能客服
1500W

用户等你来哦

Copyright   ©2012-2025  北京永洪商智科技有限公司  (京ICP备12050607) 京公网安备110110802011451号 |《永洪社区协议》
返回顶部