在 Flink 通信层的序列化中，何时进行真正的序列化 / 反序列化操作？
在 Flink 通信层的序列化中，何时进行真正的序列化 / 反序列化操作？
展开
收起
1
条回答
写回答
写回答
-
Task 是直接受 TaskManager 管理和调度的，而 Task 又会调用 StreamTask，而 StreamTask 中真正封装了算子的处理逻辑。 在 run() 方法中 1. 首先将反序列化后的数据封装成 StreamRecord 交给算子处理； 2. 然后将处理结果通过 Collector 发动给下游 ( 在构建 Collector 时已经确定了 SerializtionDelegate)，并通过 RecordWriter 写入器将序列化后的结果写入 DataOutput； 3. 最后序列化的操作交给 SerializerDelegate 处理，实际还是通过 TypeSerializer 的 serialize() 方法完成。
2021-01-06 11:32:22赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。
热门讨论
热门文章
有个关于scan.startup.mode的配置问题想问下
1033
FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
3837
Flink如何配置Task Manager？
899
请问如何用flink sql客户端用yarn application模式提交任务呢？
1730
Flink 集群重启后，所有的Jobs任务全都没有了。如果快速恢复所有的任务
1449
Flink sql将数组炸开，实现hive的explode函数的效果，还有什么其他好的方式？
1754
请问下有实现达梦数据库的 Flink CDC么?
1161
Flink这个未授权访问漏洞有什么解决方案吗？
1537
Flink获取消费kafka的时候始终获取不到topic列表是啥原因啊？
627
flink实时写HDFS时遇到Slow ReadProcessor read fields took
1014
展开全部
Apache Flink 漫谈系列(09) - JOIN 算子
11667
日均万亿条数据如何处理？爱奇艺实时计算平台这样做
2999
资料合集｜Flink Forward Asia 2024 上海站
5232
探索Flink动态CEP：杭州银行的实战案例
258
Paimon 1.0: Unified Lake Format for Data + AI
233
实时计算引擎 Flink：从入门到深入理解
2240
Apache Flink 2.0：Streaming into the Future
440
Flink CDC 3.0 正式发布，详细解读新一代实时数据集成框架
105806
实时计算 Flash – 兼容 Flink 的新一代向量化流计算引擎
1286
Flink 2.0 存算分离状态存储 — ForSt DB
213
展开全部
相关课程
更多
相关文章
相关电子书
更多
