永洪社区

标题: Doris，MaxCompute等数据库sql中有order by后，只能读取100万数据 [打印本页]

作者: wendy 时间: 2022-10-8 10:26
标题: Doris，MaxCompute等数据库sql中有order by后，只能读取100万数据
针对SQL中有order by的场景，MaxCompute和Doris这种类型的数据，需要强制添加limit。
因此产品中增加了一个配置vendor.limit.rows={17:1000000,51:1000000} 17是MaxCompute，51是Doris。
默认是100万，如果有需要，可以配置属性适当增加这个值。

作者: speedy 时间: 2022-10-8 10:26
针对SQL中有order by的场景，MaxCompute和Doris这种类型的数据，需要强制添加limit。
因此产品中增加了一个配置vendor.limit.rows={17:1000000,51:1000000} 17是MaxCompute，51是Doris。
默认是100万，如果有需要，可以配置属性适当增加这个值。

作者: haipeng_kang 时间: 2023-6-20 14:46
请问这个配置在永洪哪里配置

作者: haipeng_kang 时间: 2023-6-20 14:46

speedy 发表于 2022-10-8 10:26
针对SQL中有order by的场景，MaxCompute和Doris这种类型的数据，需要强制添加limit。
因此产品中增加了一个 ...

请问这个配置在永洪哪里配置

作者: yonghong_cai 时间: 2023-6-20 15:14
没有用过这个功能，下次试下

作者: yhdata_lcFGp3PV 时间: 2023-7-11 10:32
https://help.aliyun.com/zh/maxco ... ng-bi-to-maxcompute
---鸣谢阿里云的海鹏大佬

使用说明
Yonghong Desktop抽取MaxCompute数据集时，最高行数限制为100W行，如果需要解除该限制，您可以采取下述方法：

在bi.properties文件（本地文件路径：${Yonghong Desktop}\YonghongBI\Yonghong\bihome）中添加参数vendor.limit.rows={17:1000000} 。

17：代表MaxCompute。

1000000：表示抽取数据集时的最高限制行数，您可以根据需要将其修改为合适的数值，避免给系统带来压力。

修改bi.properties文件后需重启Yonghong Desktop使其生效。

欢迎光临永洪社区 (https://club.yonghongtech.com/)