开发者社区 问答 正文

sqoop在导入数据到mysql中,如何不重复导入数据,如果存在数据问题,sqoop如何处理?

sqoop在导入数据到mysql中,如何不重复导入数据,如果存在数据问题,sqoop如何处理?

展开
收起
芯在这 2021-12-05 17:12:23 808 分享 版权
1 条回答
写回答
取消 提交回答
  • FAILED java.util.NoSuchElementException

    此错误的原因为sqoop解析文件的字段与MySql数据库的表的字段对应不上造成的。因此需要在执行的时候给sqoop增加参数,告诉sqoop文件的分隔符,使它能够正确的解析文件字段。

    hive默认的字段分隔符为'\001'

    2021-12-05 17:12:36
    赞同 展开评论