找文章 / 找答案
精选问答 更多内容

[数据处理] 制作报告页面新建计算列影响报表整体刷新速度

yhdata_2aA4rwOK青铜二 显示全部楼层 发表于 2022-5-18 13:22:53 |阅读模式 打印 上一主题 下一主题
一些涉及到率的指标,需要在制作报告页面新建计算列,但是加上这种计算列后,查看报告的时候需要刷新将近20秒,这也太慢了,不加计算列只需要3秒左右,有什么方法优化下吗?(数据已经入了集市,1400万条数据)
回复

使用道具 举报

精彩评论9

永洪tech-shenfs青铜一 显示全部楼层 发表于 2022-5-18 13:25:24
计算列怎么写的,麻烦截图看下呢
回复

使用道具 举报

yhdata_2aA4rwOK青铜二 显示全部楼层 发表于 2022-5-18 13:30:04
永洪tech-shenfs 发表于 2022-5-18 13:25
计算列怎么写的,麻烦截图看下呢

这样写的
回复

使用道具 举报

yhdata_2aA4rwOK青铜二 显示全部楼层 发表于 2022-5-18 13:30:40

if (sum(col['满期保费'])==0|| isNull(sum(col['满期保费']))) then 0
else (ifNull(sum(col['期末未决赔款']),0)-ifNull(sum(col['期初未决赔款']),0)+ifNull(sum(col['已决赔款']),0))/sum(col['满期保费'])
end
回复

使用道具 举报

永洪tech-shenfs青铜一 显示全部楼层 发表于 2022-5-18 14:03:42
yhdata_2aA4rwOK 发表于 2022-5-18 13:30
if (sum(col['满期保费'])==0|| isNull(sum(col['满期保费']))) then 0
else (ifNull(sum(col['期末未决 ...

1400万数据入集市后,计算列sum()这种都是交给内存处理的,确实会影响速度呢。
回复

使用道具 举报

yhdata_2aA4rwOK青铜二 显示全部楼层 发表于 2022-5-18 14:09:45
永洪tech-shenfs 发表于 2022-5-18 14:03
1400万数据入集市后,计算列sum()这种都是交给内存处理的,确实会影响速度呢。 ...

那应该怎样优化下,加内存可以吗
回复

使用道具 举报

永洪tech-shenfs青铜一 显示全部楼层 发表于 2022-5-18 14:23:02
你查看报告打开后,在日志中搜索下类似的字段,看下内存占用情况,如果内存够用,那加内存也无法优化。
内存.png
回复

使用道具 举报

永洪tech-shenfs青铜一 显示全部楼层 发表于 2022-5-18 14:36:24
yhdata_2aA4rwOK 发表于 2022-5-18 14:09
那应该怎样优化下,加内存可以吗

还有种方法您可以参考下,您可以在数据集那边建这个计算列后,再入集市,制作报告的时候直接使用,这样速度会提升
回复

使用道具 举报

yhdata_2aA4rwOK青铜二 显示全部楼层 发表于 2022-5-18 15:42:22
永洪tech-shenfs 发表于 2022-5-18 14:23
你查看报告打开后,在日志中搜索下类似的字段,看下内存占用情况,如果内存够用,那加内存也无法优化。
...

这种情况需要加内存吗?
截图.png
回复

使用道具 举报

永洪tech-shenfs青铜一 显示全部楼层 发表于 2022-5-18 15:49:01
yhdata_2aA4rwOK 发表于 2022-5-18 15:42
这种情况需要加内存吗?

看着不用,free jvm mem 还有 9207M,您可以尝试我上面说的优化方法是否可行
回复

使用道具 举报

高级模式
您需要登录后才可以回帖 登录 | 免费注册

  • 官方微信

    欢迎关注永洪服务号!收费为0,价值无限

    扫码关注
  • 新浪微博

    让每位用户轻松挖掘数据价值!

    访问新浪微博
  • 智能客服
50W

会员等你来哦

Copyright   ©2012-2024  北京永洪商智科技有限公司  (京ICP备12050607) 京公网安备110110802011451号 |《永洪社区协议》
返回顶部