遇见错误青铜一
2025-2-27 14:44:59 发布在问答
数据计算的效率问题
方案一:每天增量导入前一天的数据到数据集市,然后设定调度任务 从增量导入的结果里面读取一年的数据做数据同步处理;
方案二:每天调度任务  数据同步一年的数据
这两种方案哪一个效率比较高?


最佳答案

永洪vip
yhdata_lyaa 关注Ta

2025-02-27 14:45:00

方案一吧,每天增量处理可以避免一次性处理大量数据,减少对系统资源的消耗,如果数据量较小且对实时性要求不高,方案二也可以考虑。 https://www.yonghongtech.com/help/Z-Suite/11.0/ch/index.html?extracttypediff.html&zoom_highlightsub=%E5%A2%9E%E9%87%8F%E5%AF%BC%E5%85%A5
查看完整内容
223
2
精彩评论2
yhdata_lyaa
发表于 2025-2-27 14:45:00 显示全部楼层
方案一吧,每天增量处理可以避免一次性处理大量数据,减少对系统资源的消耗,如果数据量较小且对实时性要求不高,方案二也可以考虑。
https://www.yonghongtech.com/hel ... F%E5%AF%BC%E5%85%A5
回复

使用道具 2#

遇见错误青铜一 回复yhdata_lyaa
发表于 2025-03-21 15:14:33
增量导入之后,再做数据同步 经常会把服务器搞挂了
回复

高级模式
您需要登录后才可以回帖 登录 | 免费注册

  • 官方微信

    欢迎关注永洪服务号!收费为0,价值无限

    扫码关注
  • 新浪微博

    让每位用户轻松挖掘数据价值!

    访问新浪微博
  • 智能客服
100W

用户等你来哦

Copyright   ©2012-2025  北京永洪商智科技有限公司  (京ICP备12050607) 京公网安备110110802011451号 |《永洪社区协议》
返回顶部