OTS表格存储适用于爬虫采集大数据的存储查询吗?又如何购买OTS表格存储?-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

OTS表格存储适用于爬虫采集大数据的存储查询吗?又如何购买OTS表格存储?

2018-12-10 10:11:51 3660 1

您好,我目前在用分布式爬虫爬取海量数据,数据约100亿条,目前是sql server做存储,数据量太大了,sql server优化实在很累,不经常优化,查询数据时很慢,我想问一下表格存储适用存储并且查询海量数据吗? 我爬取的数据就以下6个字段:
网站关键词,网站标题,网站描述,网址URL, 采集时间,采集IP

对数据只做3个操作:增加数据,删除数据,和查询数据,不涉及到修改数据的, 做了个网站,每天有3000-5000 人通过网站连接该数据库,做查询数据的操作。每3个月定期删除一次以往的数据。分布式爬虫又会不停的采集新的数据写入数据库。
请问我这种场景适合用OTS表格存储吗?主要是考虑到成本,不想用阿里云的sql server,实在太贵了。
OTS表格存储,100亿条数据,我知道存储肯定没有问题,主要是担心查询速度如何?

另外问一下,我这种情况又如何购买OTS表格存储?看到,有写实例,读实例,还有存储实例? 看的都晕啊。还有容量型,高性能型?是不是只要买存储实例就可以了?存储实例,应该包括了读,写吧? 还是说,要买写实例和读实例就够了?

取消 提交回答
全部回答(1)
相关问答

1

回答

为什么说本地弹性块存储是针对大数据场景的产品而设计的?

2022-03-31 21:54:06 142浏览量 回答数 1

2

回答

云数据库RDS版付费类型是“按量付费”,如何查看用了多少量,以及收费标准。

2019-02-27 09:49:46 697浏览量 回答数 2

2

回答

正在对Linux服务器进行性能监控和调优,请问如何查看系统已经fork了多少次?

2021-11-02 16:38:42 217浏览量 回答数 2

1

回答

如何查看MaxCompute每个分区存储的数据大小?

2020-05-27 12:56:49 2013浏览量 回答数 1

1

回答

对象存储 OSS使用RAM和STS服务

2018-01-17 23:33:57 922浏览量 回答数 1

5

回答

请问大家用OSS作为大文件存储如何?

2014-10-10 18:55:38 8687浏览量 回答数 5

1

回答

网页新建一个表单,怎么写数据提交到哪边的代码?

2016-06-17 15:14:36 1704浏览量 回答数 1

1

回答

如何使用java代码查询MaxCompute 上的表中存储的数据。

2017-08-08 11:46:40 2720浏览量 回答数 1

0

回答

Maxcompute在阿里妈妈营销解决方案应用的存储优化体现在哪些方面?

2021-12-08 19:12:48 238浏览量 回答数 0

4

回答

福州有阿里云的节点吗?我是被骗了吗?福建大的idc公司买的服务器啊!

2014-07-10 16:48:11 8936浏览量 回答数 4
0
文章
1
问答
问答排行榜
最热
最新
相关电子书
更多
低代码开发师(初级)实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载
冬季实战营第三期:MySQL数据库进阶实战
立即下载