PostgreSQL 11.6.1中COPY遇到错误跳过继续，如何解决|极客教程

PostgreSQL 11.6.1中COPY遇到错误跳过继续，如何解决

在使用 PostgreSQL 数据库时，经常会遇到需要导入导出数据的场景。在进行大量数据的导入时，我们通常会使用 COPY 命令，它可以高效地将数据批量地加载到数据库中。然而，在进行数据导入的过程中，有时候会遇到数据错误导致的失败，此时我们希望能够跳过错误继续导入，这就需要对 COPY 命令进行相应的处理。

COPY命令简介

COPY 是 PostgreSQL 提供的一个用于将数据从文件直接导入到数据库表中的命令。其语法如下：

COPY table_name FROM file_name [options];

其中 table_name 是目标表名，file_name 是包含数据的文件名。COPY 命令提供了一些选项，例如可以指定文件的分隔符、字符集等。

COPY命令出现错误如何处理

默认情况下，如果在使用 COPY 命令导入数据时出现错误，整个操作将会中断，导致已经成功加载的数据丢失。为了避免这种情况，我们可以通过设置ON_ERROR选项来控制出现错误时的行为。

1. 设置为 `ON_ERROR_IGNORE`

当 COPY 命令遇到错误时，我们可以将 ON_ERROR 选项设置为 IGNORE，这样在出现错误时会跳过该行继续导入。

COPY table_name FROM 'data.txt' WITH (FORMAT csv, DELIMITER ',', HEADER, NULL 'NULL') ON_ERROR 'IGNORE';

假设 data.txt 中的数据如下（包含一行错误数据）：

1,John,Doe
2,Jane,Smith
3,,Johnson

运行上述 COPY 命令后，会成功导入前两行数据，跳过第三行错误数据，导入结果如下：

# SELECT * FROM table_name;
 id | first_name | last_name
----+------------+------------
  1 | John       | Doe
  2 | Jane       | Smith
(2 rows)

2. 设置为 `ON_ERROR_CONTINUE`

除了 IGNORE 外，还可以将 ON_ERROR 选项设置为 CONTINUE，这样在遇到错误时会输出警告，但会继续导入。

COPY table_name FROM 'data.txt' WITH (FORMAT csv, DELIMITER ',', HEADER, NULL 'NULL') ON_ERROR 'CONTINUE';

继续使用上述示例中的数据文件 data.txt，运行上述 COPY 命令后，会输出警告信息并成功导入前两行数据，警告信息如下：

COPY: line 3, null value in column "last_name" violates not-null constraint

导入结果如下：

# SELECT * FROM table_name;
 id | first_name | last_name
----+------------+------------
  1 | John       | Doe
  2 | Jane       | Smith
(2 rows)

总结

通过设置 COPY 命令的 ON_ERROR 选项为 IGNORE 或 CONTINUE，可以在导入数据时遇到错误时跳过或继续导入，而不是中断整个操作。在实际应用中，根据具体情况选择合适的处理方式，保证数据导入的顺利进行。

PostgreSQL 11.6.1中COPY遇到错误跳过继续，如何解决