下一代企业级云上数据分析服务:Data Lake Analytics
0. Data Warehouse VS Data Lake
0.1 传统数仓
数据来源于各类云数据存储、NoSQL和关系型数据库等系统,比如OSS、Table Store、NAS、 云HBase、RDS、PolarDB等;
数据以实时、分钟、小时、天等级别进行ETL抽取与同步到数仓系统中;
在数仓中进行实时、定时调度、汇总计算分析。
新老DataHub迁移手册
原Odps版内测DataHub,于2016年11月21日起已经处于维护状态,新版DataHub届时已经开启公测,公测至今已有一年时间,我们决定开始逐步下线老DataHub服务,老版部分用户需要迁移至新版DataHub。
【最佳实践】OSS开源工具ossutil-上传性能调优
经常碰到内部同学或者外部客户问ossutil关于并发上传性能的问题。本文简单描述下ossutil并发上传原理并举例说明。
用户可从这里获取ossutil。
官网:https://help.aliyun.com/document_detail/50452.html代码:https://github.com/aliyun/ossutil
参数
--recursive
上传文件到oss时,如果file_url为目录,则必须指定--recursive选项,否则无需指定--recursive选项。
使用阿里云OSS需要在阿里云备案吗?
阿里云OSS对象存储是一种安全、低成本、高可靠的云存储服务,那么使用阿里云OSS需要在阿里云备案吗?已经在其他服务商备案过还需要转备案到阿里云吗?新手站长网分享:
使用阿里云OSS需要在阿里云备案吗?
中国大陆地域绑定的域名必须在工信部备案,其他地域的域名绑定不需要在工信部备案,参考官方文档:OSS对象存储使用限制 - 阿里云
1、使用阿里云OSS,需在工信部备案;
2、如果用户已经通过其他服务商备案成功,备案可不用接入阿里云。
RDS for MySQL 空间问题的原因和解决
RDS for MySQL 空间问题的原因和解决
1. 原因
2. 解决
2.1 Binlog 文件
2.2 数据文件
2.3 临时文件
2.4 系统文件
RDS for MySQL 实例日常使用中随着实例的使用,会出现空间使用告警甚至超过实例限额被锁定的情况。