快速搭建 Serverless 实时按需图像处理服务
示例讲述了如何快速地利用 FC 函数计算以及 OSS 对象存储服务搭建一个按需转换图像的在线图像处理服务。达到的效果为:
当前端根据用户设备的 media 信息来请求特定尺寸图像副本时,若对象存储中未存在,则通过函数动态生成相关图像存储到对象存储中并返回。
海量、低成本历史日志分析实践
日志作为一种特殊的数据,对处理历史数据、诊断问题以及了解系统活动等有着非常重要的作用。对数据分析人员、开发人员或者运维人员而言,日志都是其工作过程中必不可缺的数据来源。
通常情况下,为节约成本,我们会将日志设定一定的保存时间,只分析该时间段内的日志,此类日志称之为“热”日志。
下一代企业级云上数据分析服务:Data Lake Analytics
0. Data Warehouse VS Data Lake
0.1 传统数仓
数据来源于各类云数据存储、NoSQL和关系型数据库等系统,比如OSS、Table Store、NAS、 云HBase、RDS、PolarDB等;
数据以实时、分钟、小时、天等级别进行ETL抽取与同步到数仓系统中;
在数仓中进行实时、定时调度、汇总计算分析。