开发者社区> 问答> 正文

存储数十亿条记录以进行进一步分析

我有近十亿行,其中包括两个字段field1 field2field1可以具有一个以上的值〜3.5亿行field1,每个来自field1的行可以具有1到500个值(作为field2),我希望将它们存储起来以进行进一步的分析,基本上我想来自field1的字段2上有重复的值,我不知道这样的方法是更快和perfermant IO sql或其他方式

感谢帮助 !

展开
收起
保持可爱mmm 2019-11-18 10:02:57 301 0
0 条回答
写回答
取消 提交回答
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
面向索引、模型、检索联合优化的下一代推荐技术 立即下载
分析型数据库标准发展与行业观察 立即下载
交易风控数据的海量存储与多种离线计算处理 立即下载