10.11杭州Clouder lab 十分钟搭建共享应用 2:如何通过日志服务实现用户的日志收集与分析
场景描述 共享电动车企业使用函数服务搭建服务端。在函数服务中开启日志,把程序日志写到日志服务,同时在函数代码中使用SDK把运营日志写入到日志服务,使用日志服务进行日志分析。 在日志服务中,用户可以: 开发查看日志调试程序,确保程序的逻辑符合逻辑。
#云栖大会门票限时赠送# 10.11云栖大会Clouder Lab “十分钟搭建共享应用”,手把手教你Serverless架构下的应用实现
10.11日下午杭州云栖大会 阿里云大学Clouder Lab专场,通过现场动手实验课的形式,教您如何利用阿里云函数计算、表格存储以及日志服务来搭建无服务器框架,实现“共享电单车”的主要应用场景。
Android 在线视频播放总结
协议选择 当前流媒体播放中常用到的协议有rtmp,rtsp和http等。各个协议适用于不同的场景。各有优点。具体的区别可参见: http://blog.csdn.net/aflyeaglenku/article/details/53929028 http://www.jianshu.com/p/5b0fa403b3ce rtsp和rtmp协议需要搭建专门的流媒体服务器。
自建ELK vs 日志服务(SLS)全方位对比
提到日志实时分析,很多人都会想到很火的ELK Stack(Elastic/Logstash/Kibana)来搭建。ELK方案开源,在社区中有大量的内容和使用案例。阿里云日志服务产品在新版中增强查询分析功能(LogSearch/Analytics),支持对日志数据实时索引与查询分析,并且对查询性能和计算数据量做了大量优化。
OSS社区工具与插件全新升级
为了方便用户更高效的使用OSS,我们推出了第一批社区插件与工具。该批插件是开源社区广泛应用的平台、框架或工具。如果您有新的需求请在评论中回复,OSS会根据您的需求持续支持更多插件和工具。
Logtail技术分享(一) : Polling + Inotify 组合下的日志保序采集方案
logtail是阿里云一款进行日志实时采集的Agent,当前几十万台部署logtail的设备运行在各种不同环境上(集团、蚂蚁、阿里云,还有用户部署在公网、IOT设备),每天采集数PB的数据,支撑上千种应用的日志采集。
日志服务(原SLS)性能优化:一个SQL一秒分析一亿日志
日志服务(原SLS)提供LogSearch/Analytics在一秒内能:实时检索到该日志,并且提供5个组合条件查询10亿级数据,5个维度聚合SQL分析1亿条数据能力
AliCloud Duplicity
alicloud-duplicity是基于duplicity的开源数据备份工具,支持增量备份、数据加密,完全兼容duplicity。本文介绍了alicloud-duplicity的使用场景、安装方法、常用命令等。
OSS WordPress插件(Aliyun OSS For WordPress)
WordPress是一个注重美学、易用性和网络标准的个人信息发布平台,广泛应用于网络信息发布平台的搭建,特别是个性化的博客。本文介绍了OSS的WordPress插件Aliyun OSS For WordPress。
OSS访问域名使用规则
OSS域名构成规则 针对OSS的网络请求,除了GetService这个API以外,其他所有请求的域名都是带有指定Bucket信息的三级域名组成的。 访问域名规则:BucketName.Endpoint。
靠ta取胜?阿里云强势崛起冲击世界前三!
阿里云云存储在中国的数字商业领域已经发挥了重要作用。此外,已经在欧洲、美洲、大洋洲及亚洲9个国家和区域拥有云存储服务能力的阿里云仍未止步,志在将眼光投向更广泛的海外市场,扩大阿里云在全球范围内的影响力。
Gartner存储魔力象限前四,阿里云如何成为“领头羊”?
阿里云目前的存储产品系列展示了阿里云的潜力,并且已经成为全球超大规模云服务提供商的有力竞争者。相信在未来,作为云计算行业翘楚的阿里云在全球范围内能提供更为广泛的服务,它将用更为精湛的技术令全世界为之叹服!
日志系列--账单日志的统计分析
简介 成交账单是电商公司的核心数据,是一系列营销和推广活动最终的转化成果。这些数据包含了很多有价值的信息:从这些数据出发,可以描绘出用户画像,为下一步的营销提供方向。账单数据还能提供货物的受欢迎程度,为下一步备货提供准备。
日志系列--前端访问日志的统计分析
简介 很多个人站长在搭建网站时使用nginx作为服务器,为了了解网站的访问情况,一般有两种手段: 使用CNZZ之类的方式,在前端页面插入js,用户访问的时候触发js,记录访问请求。 分析nginx的access log,从日志中挖掘有用信息。
日志系列--行车轨迹日志的统计分析
简介 出租车公司记录了每一次载客交易发生的信息细节,包括上下客时间、经纬度、路程距离、支付方式、支付金额、缴税额等信息。详细的数据,为出租车公司的运营提供了极大的帮助,例如,了解哪些时间段比较热门,对应增加运行车次;哪些地区需求比较广泛,调度更多车辆前往。
正确使用OSS Lifecycle机制节约数据存储费用
OSS提供标准、低频访问、归档三种存储类型,全面覆盖从热到冷的各种数据存储场景。用户可以对一个Bucket中有需要的Object设置Lifecycle规则,实现一个Object从Standard -> 低频 -> 归档 -> 过期删除的生命周期管理。
表格存储(TableStore)新功能Stream应用场景介绍
上面一篇我们介绍了表格存储新功能Stream, 下面我们展开说一些场景,看看有了Stream后,哪些我们常见的应用场景可以更高效的设计和实现。 直播用户行为分析和存储 场景描述 现在视频直播非常火热,假如我们使用TableStore记录用户的每一次进入房间和离开房间,房间内的操作记录等,并希望根据用户的最近的观看记录,更新直播推荐列表。
表格存储(TableStore)新功能Stream初探
阿里云自研PB级nosql数据库TableStore近期发布了新功能Stream,也就是增量通道,可以让用户实时的获取数据库中的增删改操作。很多使用TableStore的用户会定期把数据导入各类计算平台做数据的离线分析,以前的做法是使用DATAX或者使用TableStore的SDK定期拉取数据。
时间序列数据的存储和计算 - 开源时序数据库解析(三)
InfluxDB在DB-Engines的时序数据库类别里排名第一,实至名归,从它的功能丰富性、易用性以及底层实现来看,都有很多的亮点,值得大篇幅来分析。
日志系列--计量日志处理方案
使用云服务最大好处是按量付费,无需预留资源,因此各云产品都有计量计费需求。这里我们介绍一种基于[日志服务](http://www.aliyun.com/product/sls/)计量计费方案,该方案每天处理千亿级计量日志,被众多云产品使用:
日志系列--程序日志处理挑战与方案
程序日志(AppLog)有什么特点? * 内容最全:程序日志是由程序员给出,在重要的地点、变量数值以及异常都会有记录,可以说线上90%以上Bug都是依靠程序日志输出定位到 * 格式比较随意:代码往往经过不同人开发,每个程序员都有自己爱好的格式,一般非常难进行统一,并且引入的一些第三方库的
OSS Web直传方案在iOS中上传视频时需要注意的一个小坑
OSS Web直传方案通过将OSS和简单易用的前端上传组件Plupload结合,为前端上传文件场景提供了一个广泛支持的解决方案。 和大家分享一个Plupload在iOS环境下一个小的兼容性问题的,希望能对遇到同样问题的同学有所帮助
云上非编大杀器 — 阿里云NAS Plus
NAS Plus是阿里云文件存储NAS推出的针对广电非编、渲染等场景的高性能NAS存储产品,具备高吞吐、低延迟、高安全等特性,同时提供了丰富的高级API以满足非编场景对存储的需求。
时间序列数据的存储和计算 - 开源时序数据库解析(二)
KairosDB KairosDB最初是从OpenTSDB 1.x版本fork出来的一个分支,目的是在OpenTSDB的代码基础上进行二次开发来满足新的功能需求。其改造之一就是支持可插拔式的存储引擎,例如支持H2可以方便本地开发和测试,而不是像OpenTSDB一样与HBase强耦合。
时间序列数据的存储和计算 - 开源时序数据库解析(一)
开源时序数据库 如图是17年6月在db-engines上时序数据库的排名,我会挑选开源的、分布式的时序数据库做详细的解析。前十的排名中,RRD是一个老牌的单机存储引擎,Graphite底层是Whisper,可以认为是一个优化的更强大的RRD数据库。
时间序列数据的存储和计算 - 概述
什么是时间序列数据 什么是时间序列(Time Series,以下简称时序)数据?从定义上来说,就是一串按时间维度索引的数据。用描述性的语言来解释什么是时序数据,简单的说,就是这类数据描述了某个被测量的主体在一个时间范围内的每个时间点上的测量值。
用Windows IIS和阿里云NAS提供Web和FTP服务
本文介绍如何结合阿里云NAS的SMB协议支持和ECS Windows虚拟机,使用Windows内置的互联网信息服务(IIS)来提供Web和FTP服务。
阿里云文件存储产品说明
背景介绍 云端存储最早的发展是在对象存储、块存储、分布式数据库等方面,在基于NFS和SMB协议的共享文件存储方面则发展缓慢。原因主要在于传统基于Posix的文件系统协议设计的过于复杂,引用计数、锁、数据冗余等要求在分布式环境中挑战较多,不利于大规模集群的scale-out。
云存储
阿里云存储基于飞天盘古2.0分布式存储系统,产品多种多样,充分满足用户数据存储和迁移上云需求。