小混子白银四
2022-8-19 11:22:28 发布在问答
【数据处理】 填报补录 删除hive数据库补录表中数据 太慢
永洪版本 9.2   使用填报补录   删除hive数据库中的补录表中的数据时  很慢  20条数据用了20s左右  ???? 是我操作有问题吗??? 平时可能会有2万条
我的需求其实是 用excel导入 然后覆盖掉 数据库中的补录表的数据  好像没有办法直接实现(不是覆盖永洪缓存的数据) 所以我就先删除再插入   结果好慢
7339
21
精彩评论21
yhdata_yzm
发表于 2022-8-19 11:45:22 显示全部楼层
你用update不行么
回复

使用道具 2#

小混子白银四
发表于 2022-8-19 13:35:34 显示全部楼层

不行啊  我是想实现数据集覆盖 业务上可能上次导入的数据  导多了  之类的  那我可定全部覆盖  每次都一万多条  update的话  有些数据我是不想要的呀 那怎么办呢
回复

使用道具 3#

小混子白银四
发表于 2022-8-19 13:36:35 显示全部楼层

那是永洪连数据库删就是慢吗 ???只是delete 不能直接truncate??
回复

使用道具 4#

yhdata_bear
发表于 2022-8-19 15:39:13 显示全部楼层
是的
回复

使用道具 5#

小混子白银四
发表于 2022-8-19 15:40:17 显示全部楼层

所以  ???
回复

使用道具 6#

小混子白银四
发表于 2022-8-19 15:40:48 显示全部楼层

就是这么慢 ??然后暂时没有办法解决吗
回复

使用道具 7#

yhdata_yzm
发表于 2022-8-19 15:47:47 显示全部楼层
yh_1DmeiYYN 发表于 2022-8-19 13:36
那是永洪连数据库删就是慢吗 ???只是delete 不能直接truncate??

只能增删改,不支持truncate
回复

使用道具 8#

小混子白银四
发表于 2022-8-19 16:02:25 显示全部楼层
yhdata_yzm 发表于 2022-8-19 15:47
只能增删改,不支持truncate

这个删 你们试过吗  为什么我这么慢  20条数据 5个字段吧也就  用了20秒??
是我操作错了???
回复

使用道具 9#

小混子白银四
发表于 2022-8-19 16:16:54 显示全部楼层
yhdata_yzm 发表于 2022-8-19 15:47
只能增删改,不支持truncate

既然都连上我数据库中的表了 有没有可能让我执行个sql语句啥的  提交填报数据到数据库前truncate 一下表呢
回复

使用道具 10#

123  
高级模式
您需要登录后才可以回帖 登录 | 免费注册

  • 官方微信

    欢迎关注永洪服务号!收费为0,价值无限

    扫码关注
  • 新浪微博

    让每位用户轻松挖掘数据价值!

    访问新浪微博
  • 智能客服
1500W

用户等你来哦

Copyright   ©2012-2025  北京永洪商智科技有限公司  (京ICP备12050607) 京公网安备110110802011451号 |《永洪社区协议》
返回顶部