用flink1.13版本写入ES8.5.3版本,数据只能写入一部分,之后报错，为什么？
用flink1.13版本写入ES8.5.3版本,数据只能写入一部分,之后报错Failed Elasticsearch item request: Unable to parse response body for Response{requestLine=POST /_bulk?timeout=1m HTTP/1.1, host=http://10.206.67.212:9200, response=HTTP/1.1 200 OK}; 这是什么原因
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
-
-
随心分享，欢迎友善交流讨论：）
这个问题可能是由于ES的限制引起的。ES有一个默认的请求体大小限制，如果一次请求体大小超过该限制，则会抛出类似的异常。根据你提供的信息，问题的原因可能是请求体过大，导致ES无法正确解析请求体，从而导致写入错误。
为了解决这个问题，可以尝试以下几种方法：
增加ES的请求体大小限制。可以在ES的配置文件中调整该值。具体操作可以参考ES的官方文档。
减小flink写入ES时的批处理大小。可以将写入ES的批处理大小调小一些，这样可以减小请求体大小，从而避免ES的限制。
对数据进行分批处理。可以将数据分成多个批次处理，每个批次的数据量比较小，这样可以避免一次请求体过大的问题。
需要注意的是，如果数据量较大，可能需要同时采用多种方法来解决该问题。
2023-03-16 17:05:09赞同 展开评论
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。
