DataWorks 报改错 请问能有解决方法吗?java.lang.exception: %E5%8D%95%E6%9D%A1%E8%AE%B0%E5%BD%95%E8%B6%85%E8%BF%87%E5%A4%A7%E5%B0%8F%E9%99%90%E5%88%B6%EF%BC%8C%E5%BD%93%E5%89%8D%E9%99%90%E5%88%B6%E4%B8%BA:8,388,608 at com.alibaba.datax.core.transport.exchanger.BufferedRecordExchanger.sendToWriter(BufferedRecordExchanger.java:119) [datax-core-0.0.1-SNAPSHOT.jar:na] at com.alibaba.datax.plugin.unstructuredstorage.reader.UnstructuredStorageReaderUtil.transportOneRecord(UnstructuredStorageReaderUtil.java:612) [plugin-unstructured-storage-util-0.0.1-SNAPSHOT.jar:na] at com.alibaba.datax.plugin.unstructuredstorage.reader.UnstructuredStorageReaderUtil.doReadFromStream(UnstructuredStorageReaderUtil.java:337) [plugin-unstructured-storage-util-0.0.1-SNAPSHOT.jar:na] at com.alibaba.datax.plugin.unstructuredstorage.reader.UnstructuredStorageReaderUtil.readFromInputStream(UnstructuredStorageReaderUtil.java:228) [plugin-unstructured-storage-util-0.0.1-SNAPSHOT.jar:na] at com.alibaba.datax.plugin.unstructuredstorage.reader.UnstructuredStorageReaderUtil.readFromStream(UnstructuredStorageReaderUtil.java:207) [plugin-unstructured-storage-util-0.0.1-SNAPSHOT.jar:na] at com.alibaba.datax.plugin.reader.ossreader.OssReader$Task.startRead(OssReader.java:399) [ossreader-0.0.1-SNAPSHOT.jar:na] at com.alibaba.datax.core.taskgroup.runner.ReaderRunner.run(ReaderRunner.java:98) [datax-core-0.0.1-SNAPSHOT.jar:na] at java.lang.Thread.run(Thread.java:834) [na:1.8.0_112]
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
和errorLimit同级加一下这个参数 调整到16m试下 转脚本
"core": {
"transport": {
"channel": {
"capacity": 1024,
"byteCapacity": 8388608
}
}
}byteCapacity调整到16m其他的参数可以不动,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。