cube.js预聚合对于大数据量处理的问题
2021-05-28 16:01
标签:资料 格式 包含 分析 功能 分区 hub 而且 源码 cube.js 的预聚合是一个很不错的功能,但是目前是有一些问题的,比如我们包含了大量的数据(几十完,上百万) 目前方案都不太好,stream 的driver 是有限的(mysql支持),而且目前cube.js 数据预聚合处理需要download查询数据,然后 https://github.com/cube-js/cube.js/pull/2740 cube.js预聚合对于大数据量处理的问题 标签:资料 格式 包含 分析 功能 分区 hub 而且 源码 原文地址:https://www.cnblogs.com/rongfengliang/p/14770481.html目前官方相关的解决方法
一些说明
再写入外部或者源数据的,也是有问题的,rollup 比较推荐同时可以结合基于时间的分区,会很很多。后期会通过源码分析下cube.js
预聚合的实现机制参考资料
文章标题:cube.js预聚合对于大数据量处理的问题
文章链接:http://soscw.com/index.php/essay/88721.html