openGauss学习笔记-164 openGauss 数据库运维-备份与恢复-导入数据-使用COPY FROM STDIN导入数据-处理错误表

发布时间:2023年12月18日

openGauss学习笔记-164 openGauss 数据库运维-备份与恢复-导入数据-使用COPY FROM STDIN导入数据-处理错误表

164.1 操作场景

当数据导入发生错误时,请根据本文指引信息进行处理。

164.2 查询错误信息

数据导入过程中发生的错误,一般分为数据格式错误和非数据格式错误。

  • 数据格式错误

    在创建外表时,通过设置参数“LOG INTO error_table_name”,将数据导入过程中出现的数据格式错误信息写入指定的错误信息表error_table_name中。您可以通过以下SQL,查询详细错误信息。

    openGauss=# SELECT * FROM error_table_name;
    

    错误信息表结构如表1所示。

    表 1 错误信息表

    列名称类型描述
    nodeidinteger报错节点编号。
    begintimetimestamp with time zone出现数据格式错误的时间。
    filenamecharacter varying出现数据格式错误的数据源文件名。
    rownumnumeric在数据源文件中,出现数据格式错误的行号。
    rawrecordtext在数据源文件中,出现数据格式错误的原始记录。
    detailtext详细错误信息。
  • 非数据格式错误

    对于非数据格式错误,一旦发生将导致整个数据导入失败。您可以根据执行数据导入过程中,界面提示的错误信息,帮助定位问题,处理错误表。

164.3 处理数据导入错误

根据获取的错误信息,请对照下表,处理数据导入错误。

表 2 处理数据导入错误

错误信息原因解决办法
missing data for column “r_reason_desc”数据源文件中的列数比外表定义的列数少。对于TEXT格式的数据源文件,由于转义字符(\)导致delimiter(分隔符)错位或者quote(引号字符)错位造成的错误。**示例:**目标表存在3列字段,导入的数据如下所示。由于存在转义字符“\”,分隔符“|”被转义为第二个字段的字段值,导致第三个字段值缺失。`BEBelgium|1`
extra data after last expected column数据源文件中的列数比外表定义的列数多。在数据源文件中,删除多余的字段值。在创建外表时,将参数“ignore_extra_data”设置为“on”。即在导入过程中,若数据源文件比外表定义的列数多,则忽略行尾多出来的列。
invalid input syntax for type numeric: “a”数据类型错误。在数据源文件中,修改输入字段的数据类型。根据此错误信息,请将输入的数据类型修改为numeric。
null value in column “staff_id” violates not-null constraint非空约束。在数据源文件中,增加非空字段信息。根据此错误信息,请增加“staff_id”列的值。
duplicate key value violates unique constraint “reg_id_pk”唯一约束。删除数据源文件中重复的行。通过设置关键字“DISTINCT”,从SELECT结果集中删除重复的行,保证导入的每一行都是唯一的。openGauss=# INSERT INTO reasons SELECT DISTINCT * FROM foreign_tpcds_reasons;
value too long for type character varying(16)字段值长度超过限制。在数据源文件中,修改字段值长度。根据此错误信息,字段值长度限制为VARCHAR2(16)。

👍 点赞,你的认可是我创作的动力!

?? 收藏,你的青睐是我努力的方向!

?? 评论,你的意见是我进步的财富!

图片

文章来源:https://blog.csdn.net/shuchaoyang/article/details/135068982
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。