开发者社区 问答 正文

DataFrame布隆过滤器的作用是什么?

DataFrame布隆过滤器的作用是什么?

展开
收起
游客mm5dulkpivqdo 2021-12-08 18:18:24 380 分享 版权
1 条回答
写回答
取消 提交回答
  • 给定某个Collection和它的某个列计算的sequence1,对另外一个sequence2进行布隆过滤时,sequence1不存在于sequence2中的数据一定会被过滤掉, 但可能无法完全过滤。所以这种过滤方式是一种近似的过滤方法。这样的好处是对Collection进行快速过滤一些无用数据。这在一边数据量远大过另一边数据量(大部分数据并不会参与join运算)时的大规模join场景很有用。

    2021-12-08 18:18:52
    赞同 展开评论
问答地址: