开发者社区> 问答> 正文

DataWorks据集成任务odps到es离线出错- Broken pipe (Write f...

已解决

DataWorks据集成任务odps到es离线出错- Broken pipe (Write failed)

展开
收起
提个问题 2024-06-03 15:23:05 37 0
1 条回答
写回答
取消 提交回答
  • 开发者社区问答官方账号
    官方回答
    采纳回答
    问题描述:数据集成任务odps到es离线出错- Broken pipe (Write failed)2并发可以同步成功但是速度很慢4并发就会出错。
    解释说明:Caused by: java.net.SocketException: Broken pipe (Write failed)两个并发达不到用户的需求,由于batchSize过大导致。
    解决方案:"batchSize":4024, 调小 并发调大内存再调大一些

    2024-06-03 15:23:06
    赞同 1 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载