对比两个大数据的表格时，PP运行速度非常慢，怎么破解，...

显示全部楼层 · 2021-2-19 00:25:51

各位大神好：
我需要比对两个表的数据差异，表一和表二结构是一样呢，内容绝大部分相同，只有个别不同，我需要进行对比这两个表找出差异部分的内容。
  我初步做了一个表格模型，由于表一和表二数量比较多有2万行*58列的数据内容，我先用PQ进行数据清洗，删除不需要的列，清洗过之后是2万行*20列的内容，清洗过之后直接进入PP内部模型。同时通过表一客户和表二客户号汇总去重构建唯一客户号的表三，也同时导入模型。
最后在模型中，用表三为主表，建立索引关系，从表一取一个数值，然后再从表二取一个数值，最后两个相减得到差异如此取数值了十几项都是很简单的操作，十几项全部对应并相减之后，再生成数据透视表。但是由于每天都要更新数据，更新一次都需要300多秒，运行特别卡，有时候会直接卡死，想寻找有没有高效一点的核对方法。
  用的公式都很简单都是related 对应值过来然后两个数值相减 so-上日结存= RELATED(v6so[上日结存])  s-上日结存 RELATED(v6s[上日结存]) 上日结存差额=ABS([so-上日结存]-[s-上日结存])
  跪求大神给指点指点，比对两个表的差异，有没有什么更高校的方法！跪求指点下，简单说下大概的比对思路，非常感谢。

关系表

lwfeng · 2021-2-19 00:32:51

数据导入（PQ）过程大概多久
从导入结束到透视表加载出来需要多久 excel 是32位还是64位

长发麦琪 · 2021-2-19 00:36:51

数据导入（PQ）过程大概多久
从导入结束到透视表加载出来需要多久 excel 是32位还是64位

电脑配置绝对可以，i7 64位，安装的事office2016专业版的，因为我是用VB从外部把数据抓取到表格模板中，然后点击全部刷新，此时会先对抓取过了的表格进行PQ清洗，删除不必要的数据，然后导入pp模型中进行运算，最后通过透视表刷新过来应对的数据。整个全部刷新的过程在260-500秒左右不等的时间，有时候excel还会卡死。