mysql 1亿数据以上处理的问题-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

mysql 1亿数据以上处理的问题

2016-02-08 18:27:52 2781 1
用户昵称
+关注

现在数据量太大 估计达到2亿数据 但是我该怎么处理最好！！用etl？
因为这些数据我得汇总操作起来太不方便了！
求帮助

关系型数据库 MySQL
mysql数据处理 批处理MySQL数据库 mysql处理数据 sql数据处理问题 mysql处理海量数据
开发者社区 > 数据库 > 问答

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

取消 提交回答
全部回答(1)
  • 德哥
    2019-07-17 18:39:54

    你需要处理什么？ 数据导出？还是数据运算。
    如果是导出，方法比较多。
    如果是运算，建议考虑一下MPP产品。

    0 0
相关问答

1

回答

列的数据被截断了吗？?mysql

2020-05-17 21:45:42 542浏览量 回答数 1

1

回答

帮我关闭我的MySQL数据管理

2019-03-20 22:57:51 515浏览量 回答数 1

1

回答

rds mysql数据库

2018-10-19 15:22:42 347浏览量 回答数 1

1

回答

需要mysql数据库

2018-04-21 17:03:34 510浏览量 回答数 1

4

回答

关于RDS mysql数据库版本

2016-07-18 09:40:43 4526浏览量 回答数 4

1

回答

mysql 关于一对多，更新数据的问题

2016-06-29 12:47:59 1696浏览量 回答数 1

2

回答

mysql数据库并发碰到的问题

2016-02-13 16:50:53 2314浏览量 回答数 2

1

回答

MySQL数据库分表

2016-02-10 14:28:10 2628浏览量 回答数 1

1

回答

MYSQL大数据用分表还是用分区好？

2016-02-06 18:18:27 3141浏览量 回答数 1

2

回答

MySQL数据库的优化

2012-06-24 20:49:56 11972浏览量 回答数 2
+关注
落地花开啦
喜欢技术，喜欢努力的人
0
文章
7824
问答
问答排行榜
最热
最新
1 通过阿里云代备案系统进行个人快速备案 2667240
2 【大咖问答】对话PostgreSQL 中国社区发起人之一，阿里云数据库高级专家 德哥 1341206
3 据说在家办公的程序员是这样写代码的？ 1308610
4 《阿里云服务器从入门到精通》—论坛精华帖汇总 1055178
5 阿里云开放端口权限 668203
6 《阿里云服务器从入门到精通》—论坛精华帖汇总（2013.8.21更新） 590378
7 如何升级配置 527698
8 【精品问答】python技术1000问(1) 493879
9 Flink Forward Asia 2021 有奖问答 486099
10 Linux Bash严重漏洞修复紧急通知（已全部给出最终修复方案） 443984
11 OceanBase 使用动画（持续更新） 346918
12 阿里云LNAMP(Linux + Nginx + Apache + MySQL + PHP)环境一键安装脚本 314407
13 OSS存储服务-客户端工具 308859
14 企业邮箱发送邮件时，若出现投递失败产生退信，内容提示包含如下： the mta server of * reply:550 failed to meet SPF requirements 或者 the mta server of 163.com — 163mx01.mxmail.netease.com(220.181.14.141) reply:550 MI:SPF mx14,QMCowECpA0qTiftVaeB3Cg—.872S2 1442548128 http://mail.163.com/help 287173
15 Win Server 2003-2016 加密勒索事件必打补丁合集 286351
16 FLASH播放器，在IE浏览器下显示请确定您的域名已完成备案和CNAME绑定 269446
17 安全组详解，新手必看教程 267397
18 【史上最详细】阿里云ECS安装wordpress教程 261985
19 惊喜翻倍：免费ECS+免费环境配置~！(ECS免费体验6个月活动3月31日结束) 240213
20 阿里云手机和阿云浏览器连接问题专帖 231196
1 物联网平台，如何识别不同的设备呢？ 通过什么标识来识别不同设备？ 128
2 PolarDB-X 中从普通表改成ttl的时候会锁表吗？ 125
3 请问shake数据库中mongoshake同步过程中，src_mongo挂了，同步服务不会退出吗？ 121
4 shake数据库中 启动报这个错，请问是哪里配置有问题吗？ 125
5 ES分组聚合后再聚合的语句该怎么写呢？ 117
6 es聚合查询不准确和精度丢失问题要怎么解决啊？ 117
7 Elasticsearch中用系统默认用户elastic登陆kibana为什么只有这么点权限呢？ 114
8 Elasticsearch中docs.deleted 这个里面的数据怎么彻底删掉呢？ 118
9 请问Elasticsearch中null的字段有时候显示，有时候不显示，这是什么原因呢？ 113
10 es版本7.10，节点状态显示正常，红色诊断集群状态频繁变更，经检查24内无频繁变更，如何排查呢？ 115
11 请问Elasticsearch出现下面的报错怎么办呢？ 113
12 请问es需求是对数据分组后进行分页，如何获取桶的总数呢？ 115
13 ahas中配置告警规则报错是什么原因呢？ 119
14 请问grafana现在是有9了吗？ 117
15 张家口区应用日志什么时间上线呀？ 116
16 arms 应用监控可以把数据日志拿出来吗？ 115
17 ARMS Profiling功能对服务的性能影响怎么样？有原理介绍的资料吗？ 115
18 请问ahas中fc怎么配置走内网模式呢？ 121
19 请问AHAS可以跟函数计算FC联合使用吗？如何配置内网呢？ 121
20 请问ahas故障演练：节点cpu网络丢包场景，一直失败，是什么原因呢？ 122
推荐问答
读《低代码开发师（初级）实战教程》，赢小米鼠标Lite
相关文章
Springboot 导入导出Excel ，一对多关系，复合表格、合并单元格数据 怎么清晰地理解、表达 IaaS 、 PaaS 、 SaaS ？ 大数据平台运维总结 在 Istio 服务网格内连接外部 MySQL 数据库 一文搞懂传统单节点网站的 Serverless 上云
相关电子书
更多
低代码开发师（初级）实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载
冬季实战营第三期：MySQL数据库进阶实战
立即下载