永洪社区

标题: 数据集数据清理 [打印本页]

作者: yhdata_p7Ux7AKH 时间: 2022-6-8 17:58
标题: 数据集数据清理
我的数据集是每日增量同步，但是时间长了以后，数据集会特别大，怎么才能设置成只存一年的，自动清理数据集中超过一年的数据。

作者: yhdata_lyaa 时间: 2022-6-8 18:35
是什么数据集，直接删除数据库数据吗

作者: yhdata_Jenny 时间: 2022-6-8 18:43
您这边使用的是数据集市数据集吗？可以考虑使用数据集市数据集，在调度任务中对增量导入的任务进行加入标签，后面可以针对集市数据集进行过滤设置。

作者: yhdata_p7Ux7AKH 时间: 2022-6-10 11:12

yhdata_Jenny 发表于 2022-6-8 18:43
您这边使用的是数据集市数据集吗？可以考虑使用数据集市数据集，在调度任务中对增量导入的任务进行加入标签 ...

现在不是过滤的问题，是因为数据集随着时间，数据会越来越大，服务器硬盘空间会越来越大。需求是只存去年跟今年的数据。之前的都不要了。

作者: yhdata_p7Ux7AKH 时间: 2022-6-10 11:13

lyaa 发表于 2022-6-8 18:35
是什么数据集，直接删除数据库数据吗

是永洪bi的自服务数据集。抽取过来的数据。

作者: Fiona 时间: 2022-6-10 11:40
http://plugins.yonghongtech.com/plugin/5
此插件可以删除历史云文件

欢迎光临永洪社区 (https://club.yonghongtech.com/)