开发者社区> 问答> 正文

Apache Flink库中的DataSet API是什么呢?

Apache Flink库中的DataSet API是什么呢?

展开
收起
游客vqgchj4kfdzsu 2021-12-07 21:12:50 400 0
1 条回答
写回答
取消 提交回答
  • DataSet API 是 Flink 用于批处理应用程序的核心 API。DataSet API 所提供的基础算子包括map、reduce、(outer) join、co-group、iterate等。所有算子都有相应的算法和数据结构支持,对内存中的序列化数据进行操作。如果数据大小超过预留内存,则过量数据将存储到磁盘。Flink 的 DataSet API 的数据处理算法借鉴了传统数据库算法的实现,例如混合散列连接(hybrid hash-join)和外部归并排序(external merge-sort)。

    2021-12-07 22:23:13
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
CUDA MATH API 立即下载
API PLAYBOOK 立即下载
传统企业的“+互联网”-API服务在京东方的实践 立即下载

相关镜像