AI 助理
备案控制台
开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

实时同步任务出现脏数据导致任务失败，但是查看日志，并没有详细记录，如何查找？

实时同步任务出现脏数据导致任务失败，但是查看日志，并没有详细记录，如何查找？

展开
收起
雪哥哥 2022-11-27 12:00:06 247 0
1 条回答
写回答
取消 提交回答
  • 毛毛虫雨

    日志里可以搜索一下"脏数据"三个字 应该会打印具体的脏数据记录（此答案整理自DataWorks交流群(答疑@机器人)）

    2022-11-27 12:40:43
    赞同 展开评论 打赏
问答分类：
大数据开发治理平台 DataWorks 日志服务
问答标签：
日志服务任务 日志服务脏数据 日志服务实时同步 任务脏数据日志服务
问答地址：
开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 问答

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

相关问答
DataWorks
RocksDB在云存储环境下，如何通过log I/O任务并行打散来优化性能？
5
1
0
DataWorks这个日志嘛，任务一直卡在这，看日志是任务读取的等待时间有点长，但不知具体原因？
27
1
0
DataWorks任务是执行成功的，怎么看日志有没有脏数据呢？
39
12
0
在Flink CDC中重启任务时报了这个错，有一个表的binlog日志不存在，如何还能让任务正常跑？
60
1
0
DataWorks查询5.23的一次同步任务的日志时显示这个，是不支持以前的日志吗？
37
1
0
flink的jar包任务，如果要配置日志级别修改为debug，这个是在哪里改呢？
68
1
0
Flink配置作业日志输出rollingBytes大小限制是多少
25
1
0
在Flink CDC中oraclecdc的日志一直这样输出，卡主没有数据进来，如何解决？
21
0
0
flink cdc3.*现在能支持19c online redo log 连续挖掘嘛？
21
0
0
把flink日志发送到kafka怎么实现啊？
716
3
0
大数据与机器学习

大数据开发治理DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎，为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

我要提问

热门讨论

热门文章

  • 数据来源：com.alibaba.fastjson.JSONException: syntax er
    4869
  • dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？
    1923
  • Dataphin和 Dataworks 有啥区别呢？
    1467
  • DataWorks中sql查询数字变成了科学计数 怎么转为普通数字？
    546
  • 请教一下DataWorks，doris和starRocks 选型，选哪个？
    1031
  • DataWorks中${bdp.system.bizdate}什么意思？
    1172
  • DataWorks中odps SQL 参数 如何获取前一天的yyyymm？
    672
  • DataWorks failed: ODPS-0130071:[0,0] Semantic ana？
    885
  • DataWorks我该如何访问A项目安装了项目的package资源？
    1609
  • DataWorks如何查询odps的 表总数、字段总数？
    118
    • 展开全部
  • 2万字揭秘阿里巴巴数据治理平台DataWorks建设实践
    27373
  • DataWorks售前咨询
    6893
  • DataWorks操作报错合集之配置项目连通oss数据源 , 报The request signature we calculated does not match the signature you provided.如何解决
    299
  • 数据中台的智能进化—阿里巴巴十二年数据平台发展历程
    8799
  • DataWorks数据集成离线增量同步配置讲解
    3907
  • 【全新系列】DataWorks百问百答
    28290
  • 大数据&AI的16种可能，2020阿里云客户最佳实践合集下载
    72522
  • DataWorks操作报错合集之错误提示“ODPS-0130161: Parse exception - invalid token 'WITH', expect 'SEMICOLON'”，该怎么办
    253
  • DataWorks数据服务介绍及最佳实践 | 《一站式大数据开发治理DataWorks使用宝典》
    2975
  • DataWorks常见问题之输入提示有GROUP_CONCAT方法报错如何解决
    301
    • 展开全部

    相关课程

    更多
  • 基于MongoDB构建实时日志分析平台
    33
    2
    去学习
  • 日志服务SLS实现云产品可观测
    450
    13
    去学习
  • 日志服务 SLS 可观测数据分析平台介绍
    200
    1
    去学习
  • 大数据知识图谱系列—基于ELK+Flink日志全观测最佳实践
    220
    1
    去学习
  • 场景实践-基于阿里云Quick BI 对MOOC网站日志分析
    96
    7
    去学习

    • 相关文章

  • Python中的装饰器：简化代码，提高可读性
  • 我的字段被FastJson给干掉了?!
  • 日志管理服务
  • 日志管理服务
  • 前端代码规范 - 日志打印规范

    • 相关电子书

    更多
    • PostgresChina2018_赖思超_PostgreSQL10_hash索引的WAL日志修改版final 立即下载
    Kubernetes下日志实时采集、存储与计算实践 立即下载
    日志数据采集与分析对接 立即下载

    相关实验场景

    更多
  • 通过日志服务实现云资源OSS的安全审计
    588
    1.0小时
    去实验
  • 如何将OSS数据导入至SLS中进行分析
    2764
    2.0小时
    去实验
  • 日志服务之使用Nginx模式采集日志
    28474
    2.0小时
    去实验
  • 日志服务之告警接入与管理
    2394
    1.0小时
    去实验
  • 日志服务之数据清洗与入湖
    4392
    2.0小时
    去实验
  • 揭秘如何通过日志服务实现个人敏感信息保护
    2569
    1.0小时
    去实验