如何复制巨大的postgres表？

#1 楼

通常，复制表的最快方法是：

CREATE TABLE table2 AS SELECT * FROM table1;

并行INSERT可能更快，但只有在磁盘子系统非常快的情况下（当数据在许多驱动器上交错时） ）。否则，它将变慢。

修改完table2后，可以使用以下新名称：

BEGIN;
DROP TABLE table1;
ALTER TABLE table2 RENAME TO table1;
COMMIT;

DROP TABLE该命令需要一个排他锁，这会以您可能希望的方式影响并发阅读器：




DROP将等待其他事务对表的所有未决读取完成。
与此同时，任何尝试读取该表的新事务都会将其置于等待状态，然后失败，因为原始table1不再存在。该错误看起来像是“无法打开与OID oid的关系”

为避免第二个问题，您可以将table1重命名为old_table1而不是将其删除，然后仅在事务之外将其删除，这些读者完成后。因此，上面的序列将变为：

BEGIN;
ALTER TABLE table1 RENAME TO old_table1;
ALTER TABLE table2 RENAME TO table1;
COMMIT;
...
DROP TABLE old_table1;

#2 楼

您可以使用开放源代码重复数据删除器-使用JDBC：https://github.com/bmiller1009/deduper