开发者社区> 问答> 正文

DataFrame布隆过滤器的作用是什么?

DataFrame布隆过滤器的作用是什么?

展开
收起
游客mm5dulkpivqdo 2021-12-08 18:18:24 345 0
1 条回答
写回答
取消 提交回答
  • 给定某个Collection和它的某个列计算的sequence1,对另外一个sequence2进行布隆过滤时,sequence1不存在于sequence2中的数据一定会被过滤掉, 但可能无法完全过滤。所以这种过滤方式是一种近似的过滤方法。这样的好处是对Collection进行快速过滤一些无用数据。这在一边数据量远大过另一边数据量(大部分数据并不会参与join运算)时的大规模join场景很有用。

    2021-12-08 18:18:52
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
PyODPS架构以及DataFrame实现原理 立即下载
低代码开发师(初级)实战教程 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载