汤七七七七七青铜四
2022-10-26 10:38:13 发布在问答
【数据处理】 调度任务报错异常
今日自动运行调度任务报错异常,数据集数据量条数12万左右,列数不到20列,但报如下错误,请问如何处理可以保证数据集调度任务正常运行。
Snipaste_2022-10-26_10-36-12.png

最佳答案

humming 青铜三

2022-10-26 10:38:14

是的,这个报错是数据库报的,可以咨询下你们的DBA
查看完整内容
3456
9
精彩评论9
humming青铜三
发表于 2022-10-26 10:38:14 显示全部楼层
汤七七七七七 发表于 2022-10-27 09:27
那就是复杂sql计算和字段数值类型长度会影响调度任务的正常执行的意思是么? ...

是的,这个报错是数据库报的,可以咨询下你们的DBA
回复

使用道具 2#

yhdata_yzm
发表于 2022-10-26 13:20:39 显示全部楼层
对应时间点的日志传一下
回复

使用道具 3#

汤七七七七七青铜四
发表于 2022-10-26 16:24:45 显示全部楼层
yhdata_yzm 发表于 2022-10-26 13:20
对应时间点的日志传一下

调整了数据量之后可以了
回复

使用道具 4#

yhdata_ruby铂金一
发表于 2022-10-26 16:36:38 显示全部楼层
汤七七七七七 发表于 2022-10-26 16:24
调整了数据量之后可以了

好的
回复

使用道具 5#

汤七七七七七青铜四
发表于 2022-10-26 17:59:35 显示全部楼层

但是吧,这个主要的原因是由于数据量么?毕竟别的任务数据量更大也不会报错啊
回复

使用道具 6#

humming青铜三
发表于 2022-10-26 18:00:38 显示全部楼层
汤七七七七七 发表于 2022-10-26 17:59
但是吧,这个主要的原因是由于数据量么?毕竟别的任务数据量更大也不会报错啊 ...

是列很多还是列的内容很多,看报错是你的抽数的数据库爆出来的
回复

使用道具 7#

汤七七七七七青铜四
发表于 2022-10-26 18:03:16 显示全部楼层
humming 发表于 2022-10-26 18:00
是列很多还是列的内容很多,看报错是你的抽数的数据库爆出来的

具体多少列多少行,我提问理由有说的。同一个数据库别的都没有这种情况的。
回复

使用道具 8#

humming青铜三
发表于 2022-10-26 19:33:18 显示全部楼层
汤七七七七七 发表于 2022-10-26 18:03
具体多少列多少行,我提问理由有说的。同一个数据库别的都没有这种情况的。 ...

报错是内存超过了, 列里面有大内容的列(比如json或者长String)。 另外就是查询的是表还是复杂的sql计算?
回复

使用道具 9#

汤七七七七七青铜四
发表于 2022-10-27 09:27:34 显示全部楼层
humming 发表于 2022-10-26 19:33
报错是内存超过了, 列里面有大内容的列(比如json或者长String)。 另外就是查询的是表还是复杂的sql计 ...

那就是复杂sql计算和字段数值类型长度会影响调度任务的正常执行的意思是么?
回复

使用道具 10#

高级模式
您需要登录后才可以回帖 登录 | 免费注册

  • 官方微信

    欢迎关注永洪服务号!收费为0,价值无限

    扫码关注
  • 新浪微博

    让每位用户轻松挖掘数据价值!

    访问新浪微博
  • 智能客服
1500W

用户等你来哦

Copyright   ©2012-2025  北京永洪商智科技有限公司  (京ICP备12050607) 京公网安备110110802011451号 |《永洪社区协议》
返回顶部