经过了漫长的公测及等待,阿里云开放数据处理服务(ODPS)计划于2014年7月1日正式商业化售卖,这是阿里云产品大家族中的第一款海量计算产品。有了ODPS后,大家再也不用为数据规模增长带来的数据存储困难、运算时间延长等问题而烦恼了,ODPS可以根据用户的数据规模自动调整集群的存储和计算能力,使您能够专心于数据分析和挖掘,最大化发挥数据的价值。阿里金融、淘宝指数、数据魔方等阿里巴巴关键数据业务的离线处理作业都运行在ODPS上。
欢迎大家下载使用手册来了解和使用ODPS。
同时,欲了解详细的产品计费模型、定价和欠费策略请移步下文:
(一)计费规则
ODPS以项目(Project)为单位,对存储、计算和数据下载三个方面分别计费。
存储计费
存储到ODPS的数据,包括表(Table)和资源(Resource)等,会按照其数据容量的大小进行计费,计费周期是一个小时,具体计费公式为:
每小时存储费用 = 存储容量 * 存储价格
价格如下:
计费项 | 价格 |
存储价格(元/GB/小时) | 0.0008元 |
说明:
1. 由于ODPS会对用户数据进行压缩存储,计费依据的容量大小是压缩后的数据,因此多数情况下与上传数据之前用户自己统计的数据文件大小不同,压缩比一般在2~5倍左右;
2. 账单出账时间通常在当前计费周期结束后一小时内,最长不超过三个小时。例如10:00-11:00的账单一般会在12:00以前生成,具体以系统出账时间为准, 账单生成后会自动从您的账户余额中扣除费用以结算账单。
计算计费
目前ODPS仅开放了SQL计算任务,SQL计算任务的计费公式为:
一次SQL计算费用 = 计算输入数据量 * SQL复杂度 * SQL价格
价格如下:
计费项 | 价格 |
SQL价格(元/GB) | 0.3元 |
说明:
1. 计算输入数据量:指一个SQL语句实际扫描的数据量,大部分的SQL语句有分区过滤和列裁剪,所以一般情况下这个值会远小于源表数据大小:
a) 列裁剪:例如用户提交的SQL是select f1,f2,f3 from t1; 只计算t1表中f1,f2,f3三列的数据量,其他列不会参与计费。
b) 分区过滤:例如SQL语句中含有where ds>”20130101”,ds是分区列,则计费的数据量只会包括实际读取的分区,不会包括其他分区的数据。
2. SQL复杂度:先统计SQL语句中的关键字,再折算为SQL复杂度,具体如下:
a) SQL关键字个数 = Join个数 + Group By个数 + Order By个数 + Distinct个数 + 窗口函数个数 + analyze个数 + max( insert into个数-1, 1)
b)
例如,用户输入的SQL语句是:
INSERT INTO TABLE out1 SELECT * FROM shop a JOIN sale_detail b ON a.shop_name = b.shop_name;
则其SQL关键字个数是2,而SQL复杂度是1。
例如,用户输入的SQL语句是:
SELECT DISTINCT total1 FROM
(SELECT id1, COUNT(f1) AS total1 FROM in1 GROUP BY id1)
ORDER BY total1 DESC LIMIT 100;
则其SQL关键字个数是4,而SQL复杂度是1.5。
3. 账单出账时间在计算任务结束后一小时内,最长不超过三个小时。在计算任务成功结束后,系统会统计该计算任务读取的数据量和SQL复杂度, 账单生成后会自动从您的账户余额中扣除费用以结算账单。没有成功的计算任务不扣费。
4. 与存储类似,SQL计算也以压缩后的数据大小计费。
下载计费
用户从外网通过ODPS Tunnel下载数据,按照下载的数据大小进行计费。计费公式为:
外网下载费用 = 下载数据量 * 下载价格
其中,具体价格如下:
计费项 | 价格 |
外网下载价格(元/GB) | 0.8元 |
说明:
1. 下载数据量:指一次下载请求的HTTP body的大小。承载数据的HTTP body使用protobuffer编码,因此一般比数据原始容量要小,但是比压缩后存储在ODPS上的数据量要大。
2. 内网下载不计费,比如将下载数据到ECS的磁盘上。
3. 上传数据,无论从内网还是外网进入ODPS,均不计费。
(二)欠费预警/停机策略
- 系统根据ODPS服务最近24小时的账单应付金额平均值来判断用户账户余额是否足以支付其ODPS服务下3个账单的费用,如果不足以支付将给予短信/邮件提醒;
- 如果用户开启了余额预警,当账户余额小于用户设定的预警值时将给予用户短信/邮件提醒。
- 如果用户账号下可用余额小于上个计费周期的账单金额,则ODPS将处于欠费状态。在欠费后24小时内进行充值,您的服务将不会受到停服影响;欠费状态超过24小时,阿里云会暂停您的ODPS服务,用户需补缴所有欠费账单后方可继续使用。在欠费后24小时内会以短信/邮件的方式提醒用户尽快续费,
- ODPS服务被暂停后,所有ODPS项目保留14天后将被释放,其中的数据会丢失并且不可恢复;用户在14天内充值补足欠费后,服务会自动开启,可以继续使用;欠费超过14天,将视为用户主动放弃所有ODPS项目;在项目释放前的1天进行短信/邮件提醒。
后续,我们还将陆续推出新的产品并不断的完善现有产品,加强产品的稳定性和易用性,欢迎大家访问http://www.aliyun.com/product/odps了解更多ODPS产品相关的内容。
阿里云产品团队
2014年6月26日