问从缺少数据值的CSV进行PostgreSQL拷贝

EN

为了便于导入，我建议将数值列转换为文本列。原因是空字符串不是有效的数值。将数值列更改为文本列，导入CSV文件，将空值更新为null或0，然后将列更改回整数。

你的陈述是可疑的：

COPY data FROM 'data.dat' USING DELIMITERS ',' CSV;

DELIMITERS在7.3之前的版本中使用。为了不破坏旧代码，它仍然被支持，但是不要再使用它了。正确的关键字是DELIMITER。而且您根本不需要指定,，因为它是FORMAT CSV的默认设置。

另外，我引用manual here

文件名

输入或输出文件的绝对路径名。Windows用户可能需要使用E''字符串和路径名中使用的所有反斜杠。

大胆强调我的观点。在UNIX上用'/path/to/data.dat'替换'data.dat'，在Windows上用E'C:\\path\\to\\data.dat'替换。

对于7.3+版本，请使用：

COPY data FROM '/path/to/data.dat' CSV

对于9.0+版本，请使用：

COPY data FROM '/path/to/data.dat' (FORMAT CSV)

如果仍然出现此错误：

错误:类型numeric: CONTEXT: COPY data的输入语法无效，第13行，列interval_2400：

那么，很明显，源文件与表data的结构不匹配。看一下源文件，转到第13行，看看列interval_2400的值是什么。很有可能，它不是数字。特别是，在数值类型的列中不允许使用empty string ('')。

您可以修改源文件，也可以调整表定义

ALTER TABLE data ALTER COLUMN interval_2400 TYPE text;

或者任何更合适的类型。从名字来看可能是interval。(但text几乎接受所有输入值。)

或者，更好的方法是，创建一个修改过的临时文件，对其执行COPY操作，修复有问题的值，然后插入到目标表中，从文本转换。请参见：

• How to ignore errors with psql \copy meta-command
• How to update selected rows with values from a CSV file in Postgres?

这是PostgreSQL错误- csv解析器忽略最后一个空项并抛出错误- "PG::BadCopyFileFormat: ERROR: missing data for column“。

我用了一个愚蠢的黑客：

如果最后一项为空，只需在字符串末尾添加一个分隔符：

1,2,3
1,2,,

这将添加行中缺少的最后一项以导入数据。