[已解决] PQ能读取xls文件里数据模型的数据么?

  [复制链接]
查看133880 | 回复132 | 2020-8-5 09:10:16 | 显示全部楼层 |阅读模式
由于某些下载的数据是按单个商品SKU不同浏览端各一份文件记录的,文件数量=商品数*2浏览端*天数。如果直接在总表度加载,所有数据报表一起加载,过程可能有点漫长。所以想将最棘手的这部分数据,事先汇总到一个中间汇总表A。之后再在总表B直接读取中间表A。这样,可能过程繁琐,不过在总表B加载的体验应该好点。
  刚试了下,在总表B中,好像无法读取中间表A在数据模型里面的数据。只能在中间表A选择加载到表格,然后再到总表B读取。这样到了后期,中间表A的表格就会越来越大了,刚看了下:3个月的数据都128708行了...
  大家有没其他好的方法?
回复

使用道具 举报

eaglewdj | 2020-8-5 09:16:16 | 显示全部楼层
图片就一份文件的数据,后期我还要增加日期、商品sku、浏览端列数据,要不根本分辨不出来哪跟哪的~

9718011651151.png
回复

使用道具 举报

kkk-top | 2020-8-5 09:21:16 | 显示全部楼层
看来先汇总到一个表也不行。三个月128708行完全读取加载到表,用时太久了。得按月度汇总,后面再汇总月度的。
回复

使用道具 举报

缘尽天空 | 2020-8-5 09:28:17 | 显示全部楼层
看来先汇总到一个表也不行。三个月128708行完全读取加载到表,用时太久了。得按月度汇总,后面再汇总月度的 ...


用数据库存放数据,用PQ取效率不高多了?
回复

使用道具 举报

solop | 2020-8-5 09:30:17 | 显示全部楼层
如果先将每个表先处理后 再加载 将加载个分表的步骤做成一个自定义函数 需要时候就调用
回复

使用道具 举报

longhorn | 2020-8-5 09:35:17 | 显示全部楼层
用数据库存放数据,用PQ取效率不高多了?


能详细说说么?
回复

使用道具 举报

ligosh_wf | 2020-8-5 09:40:17 | 显示全部楼层
看我的签名
回复

使用道具 举报

花落无声 | 2020-8-5 09:45:18 | 显示全部楼层
用数据库存放数据,用PQ取效率不高多了?


这是个好办法不过 得花时间 去 学啊
回复

使用道具 举报

chshaowei | 2021-5-2 21:33:32 来自手机 | 显示全部楼层
珍爱生命,果断回帖。
回复

使用道具 举报

Sanie | 2021-8-17 22:34:58 | 显示全部楼层
谢谢网站确实不错,超值
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则