开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

有个日周期的任务从kafaka将一整天的数据转到odps表里,请问为啥这个任务一跑就是跑到第二天?

有个日周期的任务从kafaka将一整天的数据转到odps表里,但是这个任务一跑就是跑到第二天。 详情日志里面大量INFO KafkaReader$Task - this.consumer.poll got null | empty ConsumerRecords<Object, Object> and stopWhenPollEmpty is false, will retry poll. 能帮忙看下啥问题导致的吗?

展开
收起
滴滴滴~ 2023-03-22 09:31:46 170 0
1 条回答
写回答
取消 提交回答
  • poll got null 这个参数配置一下true。 此答案整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-03-22 10:38:49
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关电子书

更多
生态与兼容MaxCompute大数据生态集成和开发工具 立即下载
MaxCompute 2.0—从ODPS到MaxCompute 立即下载
云端大规模视频分析:MaxCompute在视觉计算中的应用 立即下载