检查大表中是否存在许多 FK 值的最快方法是什么？

如何解决检查大表中是否存在许多 FK 值的最快方法是什么？

我有 2 张桌子，大约是这样：

Parent_table: Parent_id bigint,Loc geometry
Child_table: Child_id bigint,parent_id bigint,record_date timestamp,value double precision,category character varying(10)

我需要针对不同条件（位置、日期范围、值范围、类别）查询子表的子集。作为其中的一部分，我从父表中筛选出位置，然后想要获取所有匹配的记录

最明显的方法是：

with limited_parents as
(
 select parent_id from parent_table where [location condition]
)
select [ columns ] from child_table where parent_id in 
         (select parent_id from limited_parents)
and [ other conditions for record_date,value,category ]

Child_table 有 >2 亿条记录，按年份划分。它有一个 parent_key 的索引，其他列都按这个顺序包含在一个索引中。

Parent_table 有 100 万个子记录（每个父级的子记录数量分布广泛，从几百到几百万+）。任何查询范围内（因此包含在该子选择中）的父项集可能从 1 到数百不等。

数据库当前是 Postgres 10。

查询在几年/分区的范围内性能良好，但随着范围内日期数量的增加而显着变慢。

我可以自由调整索引和更改查询。有没有更有效的方式来做这个查询？ （将两个表展平，并将位置放在子表上并在那里进行地理交集，使整个过程慢了几个数量级）

解决方法

您的查询以复杂且低效的方式编写。特别是，CTE 是旧 PostgreSQL 版本中的优化器栅栏。

试试这个：

SELECT [ columns ] FROM child_table AS c
WHERE EXISTS (SELECT 1 FROM parent_table AS p
              WHERE [location condition on p]
                AND p.parent_id = c.parent_id)
  AND [ other conditions for record_date,value,category ]

在大表的外键列上创建索引以加速嵌套循环连接。将 work_mem 设置为高以加快散列连接。 PostgreSQL 将自动选择最佳解决方案。