开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

请问odps建oss外表中org.apache.hadoop.hive.serde2.OpenCSV

请问odps建oss外表中org.apache.hadoop.hive.serde2.OpenCSVSerde 如何设定null format ,或者有参数的链接吗?我想看看SERDEPROPERTIES 中能设置哪些参数

展开
收起
爱喝咖啡嘿 2022-12-26 18:17:06 359 0
1 条回答
写回答
取消 提交回答
  • 在使用 org.apache.hadoop.hive.serde2.OpenCSVSerde 这个 SerDe 时,你可以在创建 OSS 外表的时候,通过 SERDEPROPERTIES 参数来设置相关的参数。具体的,你可以使用以下参数:

    separatorChar: 设置分隔符(默认为 ',') quoteChar: 设置引号(默认为 '"') escapeChar: 设置转义符(默认为 '') nullFormat: 设置 NULL 值的表示(默认为空字符串) 例如,你可以这样创建 OSS 外表:

    CREATE EXTERNAL TABLE my_table( col1 string, col2 string ) ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.OpenCSVSerde' WITH SERDEPROPERTIES ( 'separatorChar' = '|', 'quoteChar' = ''', 'escapeChar' = '\', 'nullFormat' = 'null' ) STORED AS TEXTFILE LOCATION 'oss://my-bucket/data/'; 这样,你就可以在 OSS 外表中使用 org.apache.hadoop.hive.serde2.OpenCSVSerde 这个 SerDe 并设置相关参数了。

    希望这能帮到你!

    2022-12-31 08:03:11
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

热门讨论

热门文章

相关电子书

更多
Hive Bucketing in Apache Spark 立即下载
spark替代HIVE实现ETL作业 立即下载
2019大数据技术公开课第五季—Hive迁移到MaxCompute最佳实践 立即下载

相关镜像