请问跑数分片列和分割的区别 - 永洪社区

上传

点击文件名下载附件

https://www.yonghongtech.com/rea ... dataextraction.html
这个网址，分割讲得很明白了。
分片列没弄清楚。

作者: yhdata_lyaa 时间: 2024-6-13 10:23
两个数据集增量导入集市时，分片入集市功能，使两个大表之间也可以执行Map Side Join，提高Join的计算执行效率。
使用分片列进行Map Side Join ，必须符合以下几点要求：

•使用分片列功能需要先将组合数据集中的子数据集入集市：通过新建调度任务-增量导入集市的方式，勾选分片列属性，选择join时的联接列来进行分片。

•参与Join的两个子数据集需要保证联接条件中选择的联接列都经过分片，且在入集市时勾选的分片列都要做为联接条件。

作者: yhdata_yzm 时间: 2024-6-13 10:28
简单点分割就是把整体分去若干份，然后取数
分片就是按照你的选择的列通过计算按照选择通过计算把数据分割，若果你的查询条件包含选择的分片列，那么查询的时候就会直接定位到那个分片

作者: yhdata_M9VvI2IT 时间: 2024-6-21 10:37

yhdata_yzm 发表于 2024-6-13 10:28
简单点分割就是把整体分去若干份，然后取数
分片就是按照你的选择的列通过计算按照选择通过计算把数据分割 ...

请问这两个分别是什么场景下使用呢

作者: yhdata_yzm 时间: 2024-6-21 10:47

yhdata_M9VvI2IT 发表于 2024-6-21 10:37
请问这两个分别是什么场景下使用呢

不分场景，前者的取数速度可能更快。后者报告查询的时候更有优势

欢迎光临永洪社区 (http://club.yonghongtech.com/)