永洪社区

标题: clickhouse表和线下表连接造成的卡顿问题 [打印本页]

作者: yhdata_sCXoxkOi    时间: 2023-12-8 16:19
标题: clickhouse表和线下表连接造成的卡顿问题
在永洪上搭建实时看板的时候,需要从一张clickhouse表取实时数据,然后和一张花名册链接起来,遇到的问题是:

1、单独使用这张clickhouse表写的sql,看板的速度和反应是很快的

2、一旦这张表和线下表链接,速度就会明显变慢,线下表只有300多行数据


尝试过用一张人员数据表和clickhouse链接,速度也会变慢,不知道大家有没有优化解决方案,卡顿不仅体现在看板展示方面,在搭建看板以及预览过程当中,二者的反应速度也是天壤之别,一个可以说是迅速,一个就像老奶奶过马路




作者: yhdata_lyaa    时间: 2023-12-8 16:34
线下表是什么表
作者: yhdata_sCXoxkOi    时间: 2023-12-8 16:35
yhdata_lyaa 发表于 2023-12-8 16:34
线下表是什么表

就是上传excel表,然后两张表连接
作者: yhdata_yzm    时间: 2023-12-8 16:49
拿一下日志
作者: yhdata_sCXoxkOi    时间: 2023-12-8 19:06
yhdata_yzm 发表于 2023-12-8 16:49
拿一下日志

定位到问题了
CK表和我上传的表在连接时,这个过程是在永洪进行的,负载较大,导致降低运行速度
目前的解决方案是将上传的表直接传到一张临时ck表中,然后两张CK表处理后组合成数据集被永洪调用。跳过永洪处理数据集这个过程,从而提升速度
作者: yhdata_yzm    时间: 2023-12-11 10:13
yhdata_sCXoxkOi 发表于 2023-12-8 19:06
定位到问题了
CK表和我上传的表在连接时,这个过程是在永洪进行的,负载较大,导致降低运行速度
目前的解 ...

可以,6666




欢迎光临 永洪社区 (http://club.yonghongtech.com/) Powered by Discuz! X3.4