AI 助理
备案控制台
开发者社区 问答 正文

我现在有两万条数据，要通过id查找对应数据，是遍历一遍放到dict里面查找快，还是放到pandas的DataFrame里面查找快？

我现在有两万条数据，要通过id查找对应数据，是遍历一遍放到dict里面查找快，还是放到pandas的DataFrame里面查找快？

展开
收起
一码平川MACHEL 2019-06-13 10:44:25 3482 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 一码平川MACHEL

    刚才测试了一下，2w条数据查找8w次 list转成hash再查询比pandas快200倍。。
    pandas是这样写的
    data_df[data_df['borough_id'] == i.get("_id")]['avg_price'].tolist()
    hash就是用
    boroughDict.get(i.get("_id"))

    2019-07-17 23:37:08
    赞同 1 展开评论
问答分类：
Python
问答标签：
Pandas dataframe 数据Pandas Pandas遍历 遍历Pandas dataframe
问答地址：
开发者社区 > 开发与运维 > 问答
相关问答
怎么将pandas dataframe数据写入odps数据表？
126
0
0
大数据计算MaxCompute中dataframe怎么转成pandas的dataframe？
111
1
0
DataWorks怎么把PyODPS DataFrame转换成pandas的df格式？
220
1
0
按照dataworks官方建议的导入数据格式，怎么转换为pandas的dataframe格式？
94
1
0
请问MaxCompute从collection类中如何像pandas一样进行遍历呢？
146
1
0
用ODPS中的DataFrame的语法是不是和pandas里的基本一致？或者二者速度哪个快一点啊？
360
1
0
Pandas为什么能高效率的分析数据呢？
1194
1
0
pandas中有什么用于选择和重新选择数据的方法呀?
394
1
0
pandas数据分组中分组信息并不在数据中应该用什么代码表示呢？
534
1
0
pandas数据分组中group key如何变成任意的数组呢？
542
1
0