永洪社区

标题: 多种不同类型数据源处理 [打印本页]

作者: yhdata_voAoxlNe 时间: 2022-5-25 17:09
标题: 多种不同类型数据源处理
本帖最后由 yhdata_voAoxlNe 于 2022-5-25 17:09 编辑

我有两个不同种类的数据源的两个不同的表分别为数据源1.表A    数据源2.表B

数据源1.表A
字段：金额    城市    等等

数据源2.表B

字段：数量    城市    等等

两个数据源不能直接join

需求：1、在报表中实现按城市求出相应的单价城市汇总金额/城市汇总数量
   2、不想同步数据，查询时传输的是汇总后的数据，明细数据太多

数据源的情况：
1、源的数据量都很庞大，2、3千万甚至更多。
2、但是通过城市汇总后数据量大为减少

作者: speedy 时间: 2022-5-25 17:17
您用自服务数据集，两个表分别先对城市进行金额和数量的分组汇总，之后再把连个分组汇总的节点join起来。

作者: yhdata_voAoxlNe 时间: 2022-5-25 17:25
我这个不一定只通过城市汇总：比如还有其它维度要汇总，根据页面选择时动态生成。
，但不希望同步明细数据。只希望查询时按需要取数合并后展示

作者: speedy 时间: 2022-5-25 17:35
您可以把需要分组的维度分到分组列，把度量放到汇总列。之后再进行join

作者: yhdata_voAoxlNe 时间: 2022-5-27 11:54
本帖最后由 yhdata_voAoxlNe 于 2022-5-27 11:57 编辑

我目前有KYLIN和ES两个数据源。两张不同的表，维度不相同（有相同的维度），我想把这两张表合并处理。维度相同的拼在一起。
希望在查询时，动态的根据选择的维度，动态在两个数据源中先汇总后，再报表中拼接后展示处理

就是说，先向两个数据源发汇总SQL，再获取数据后拼接

作者: Il.Mare 时间: 2022-5-27 13:29

yhdata_voAoxlNe 发表于 2022-5-27 11:54
我目前有KYLIN和ES两个数据源。两张不同的表，维度不相同（有相同的维度），我想把这两张表合并处理。维 ...

您试下组合数据集呢

欢迎光临永洪社区 (http://club.yonghongtech.com/)