向量化 Python UDF 的执行过程是怎样的？
向量化 Python UDF 的执行过程是怎样的？
展开
收起
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
1
条回答
写回答
-
如图示，向量化 Python UDF 的执行过程。首先在 Java 端，Java 在攒完多条数据之后会转换成 Arrow 格式，然后发送给 Python 进程。Python 进程在收到数据之后，将其转换成 Pandas 的数据结构，然后调用用户自定义的向量化Python UDF。同时向量化 Python UDF 的执行结果会再转化成 Arrow 格式的数据，再发送给 Java 进程。
资料来源：《Apache Flink 必知必会》，下载链接：https://developer.aliyun.com/topic/download?id=1189
2021-11-17 19:22:36赞同 展开评论
问答分类：
问答地址：
开发者社区
>
大数据与机器学习
>
实时计算 Flink
>
问答
相关问答
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。
收录在圈子:
+ 订阅
实时计算 Flink 版（Alibaba Cloud Realtime Compute for Apache Flink，Powered by Ververica）是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统，由 Apache Flink 创始团队官方出品，拥有全球统一商业化品牌，完全兼容开源 Flink API，提供丰富的企业级增值功能。
相关文章
热门讨论
热门文章
展开全部
还有其他疑问?
咨询AI助理