开发者社区> 问答> 正文

海量 key 去重的方法是什么?

海量 key 去重的方法是什么?

展开
收起
游客qzzytmszf3zhq 2021-12-07 20:02:25 272 0
1 条回答
写回答
取消 提交回答
  • 使用类似于 scala 的 set 数据结构或者 redis 的 set 显然是不行的, 因为可能有上亿个 Key,内存放不下。所以可以考虑使用布隆过滤器(Bloom Filter) 来去重

    2021-12-07 20:02:36
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
RowKey与索引设计:技巧与案例分析 立即下载
低代码开发师(初级)实战教程 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载