[数据处理] v9.4版本自服务数据集ETL使用

金融搬砖匠铂金一 显示全部楼层 发表于 2023-6-5 11:29:13 |阅读模式 打印 上一主题 下一主题
1
未解决
如题,想把自服务数据集当做ETL工具使用。
目前的设想是 自服务数据集做好数据加工后,想把结果导入到数据库表中。
问题是:
1. 没有找到配置调度任务  数据导入前的 删除语句配置界面。
2. 没有找到自服务数据集相关参数默认配置的说明。
回复

使用道具 举报

精彩评论5

yhdata_ruby皇冠三 显示全部楼层 发表于 2023-6-5 13:16:44
1、“数据导入前的 删除语句配置界面"是指什么需求
2、需要参数配置实现什么样的效果
回复

使用道具 举报

金融搬砖匠铂金一 显示全部楼层 发表于 2023-6-5 14:19:27
比如,导入数据前执行删除,delete from xx table  where  data_dt =参数日期;
然后再执行导入。
自服务数据集在引入某个数据集的时候,这个数据集也调用了日期前一个自然日的参数。
sql数据集引入:select * from xx table where data_dt =参数日期 ;
回复

使用道具 举报

yhdata_ruby皇冠三 显示全部楼层 发表于 2023-6-5 14:27:51
删除这个不支持,只能在自服务数据集处理好数据再去导入
回复

使用道具 举报

金融搬砖匠铂金一 显示全部楼层 发表于 2023-6-5 14:33:38
yhdata_ruby 发表于 2023-6-5 14:27
删除这个不支持,只能在自服务数据集处理好数据再去导入

请问利用你们的自服务数据集怎么做数据预处理呢,类似于delete where
data = 参数前一天日期  
回复

使用道具 举报

yhdata_ruby皇冠三 显示全部楼层 发表于 2023-6-5 14:38:15
yhdata_PhmYoBq4 发表于 2023-6-5 14:33
请问利用你们的自服务数据集怎么做数据预处理呢,类似于delete where
data = 参数前一天日期  
...


设置调度任务的时候这里有过滤,可以在这里设置过滤条件时间是大于参数的前一天


回复

使用道具 举报

高级模式
您需要登录后才可以回帖 登录 | 免费注册

  • 官方微信

    欢迎关注永洪服务号!收费为0,价值无限

    扫码关注
  • 新浪微博

    让每位用户轻松挖掘数据价值!

    访问新浪微博
  • 智能客服
50W

会员等你来哦

Copyright   ©2012-2024  北京永洪商智科技有限公司  (京ICP备12050607) 京公网安备110110802011451号 |联系社区管理员|《永洪社区协议》
返回顶部