|
监控 大数据 云计算
|

【知云】第九期:如何实现直播平台数据化精准运营?日志服务+大数据双剑合璧

现在精细化运营越来越重要,但对直播平台而言,后期的运营策略往往缺乏数据支撑。那么如何实现数据化精准运营呢?本文中云计算布道师游圣将为大家分享基于日志服务和大数据平台的阿里云数据化运营解决之道。

3955 0
来自: 日志服务SLS  版块
|
监控 Serverless API
|

形形色色Trace系统(1):AWS X-Ray

AWS 在2016 Re:Invent上推出了X-Ray,对如今微服务编程,以及ServerLess Architecture非常有前瞻性。另外近期一个比较大新闻是:Google Stack Driver开始支持Zipkin(Twitter 开源的Tracing系统)。

6141 0
|
Web App开发 存储 SQL
|

自定义LOG投递OSS数据Partition,优化你的计算

数据划分Partition OSS数据存储具有高可靠、低成本等优点,是海量数据存储的最佳选择之一,尤其适用于半结构化的日志存储,并可以结合E-MapReduce(使用Hive、Impala等计算引擎)通过schema-on-read方式加载数据做查询分析。

4582 0
|
存储 大数据 文件存储
|

【产品动态】云存储1月月刊

云存储服务产品12月份产品更新及发布

2649 0
|
JSON Java 开发工具
|

上传回调错误及排除

总结了SDK/API上传回调的示例、回调服务器的实现示例,说明了上传回调的调试方法,列举了上传回调的常见问题及排除方法。

16686 0
|
存储 消息中间件 开发工具
|

【产品动态】云存储12月月刊

云存储服务产品11月份产品更新及发布

3164 0
|
存储 消息中间件 对象存储
|

如何使用OSS RTMP功能直播/鉴黄?

音视频直播平台如何实现数据存储?视频监管及风控需求如何满足?直播视频/图片内容如何自动审核?视频监控行业如何降低视频数据存储成本?OSS近期推出了RTMP收流功能。用户可以直接用RTMP协议将音视频数据上传到OSS,并且可以在推流的同时实时截图、鉴黄。

20114 0
|
存储 SQL 数据库
|

如何搭建亿级社交信息分享平台?

由于移动互联网的兴起,人与人之间的交流、信息分享能够以电子信号的速度传递在各个终端设备之间,像朋友圈、微博、Twitter等社交平台的出现,大大方便和丰富了人们的日常生活。通过本文,我们来看看如何搭建一个高并发、低延时、能够承受亿级活跃用户的社交信息分享平台。

8058 0
|
SQL 存储 NoSQL
|

从SQL到NoSQL—如何使用表格存储

NoSQL 是一个用于描述高扩展高性能的非关系数据库的术语。 NoSQL 数据库提供的 schemafree 数据模型能够让应用无需预先定义表结构,适应业务的多元化发展,而对超大数据规模和高并发的支持让 NoSQL 数据库得到了广泛的应用。

16199 1
|
存储 编解码 对象存储
|

【行业存储方案】数娱行业存储解决方案

从图片分享到短视频再到音视频直播,面对越来越高的多媒体数据的存储要求,以及超高量并发的请求场景以及多样化的数据处理需要,互联网数娱行业应该如何选择合适的存储架构,在当下的直播和“网红经济”的热点中夺占先机。2016年10月杭州云栖大会,阿里云存储重磅发布数娱存储解决方案,存储行业解决方案频道页同期上

4731 0
|
存储 SQL 监控
|

【产品动态】云存储11月月刊

恩... 以后半年的的存储线产品更新信息准备进厂云栖社区了....... 求关注求赞求评论......最重要的是——希望大家用好阿里云存储产品啦啦啦~~~

3703 0
|
监控 Windows
|

日志服务发布Windows Logtail,完整支持两大平台

日志服务支持客户端、网页、Syslog、SDK/API等方式接入数据,参考。 Linux平台上的Logtail客户端拥有优秀的性能和良好的接入体验,在解决跨平台兼容问题后,我们推出Windows Logtail,在功能体验、性能表现上对齐Linux平台版本。

7069 0
|
存储 开发工具
|

表格存储的宽行流式读功能

3888 0
|
Java 开发工具 对象存储
|

OSS Java SDK夯住(Hang)问题排查

分析了调用OSS Java SDK程序夯住(Hang)的可能情况及原因。

13372 0
|
Linux 开发工具 对象存储
|

Linux下使用Aliyun OSS C SDK

详细说明了Linux下如何编译运行基于OSS C SDK的C/C++程序,附件中提供了基于Makefile的示例工程。

13586 0
|
存储 安全 容灾
|

揭秘 | 阿里云为什么能入选Gartner魔力象限

日前,研究机构Gartner公布了2015年全球公共云存储服务魔力象限。 阿里云入围全球TOP5厂商之列,成为首家入选的中国云服务商。

5745 0
|
对象存储
|

OSS跨域资源共享(CORS)错误及排除

CORS程序的错误及排除方法

47894 1
|
NoSQL 开发工具
|

Table Store(原OTS) 如何支持大cell写入

TableStore设计目标是快速读写简单的表数据,所以对单列大小限制在2M Byte(一次写入超大cell会引起系统波动),对大部分用户来说,这个值都是足够的,但是仍然有一些用户碰到了如下问题:用户自身绝大部分cell都能保证低于2M,按时有极个别的Cell高达20M,此时如果专门为这些大cell

3332 1
|
NoSQL DataX 开发工具
|

TableStore: 使用Datax将实例A的数据迁移到实例B中

现在我们需要将数据从一个老的实例A迁移到实例B上面,做一下备份,我们打算使用Datax作为我们的数据传输工具,其中用到了otsreader和otswriter。

7594 136
|
弹性计算
|

使用Logtail收集各网络日志数据

日志服务提供各种内网、私网、公网等[访问点](https://help.aliyun.com/document_detail/29008.html),可以非常便捷地将混合网络中的数据进行接入

17396 0
|
监控
|

日志服务(原SLS)新功能发布(15)--控制台支持查看协同消费组(ConsumerGroup)消费进度

日志服务中分区(Shard)是每个日志库下基本读写单元,每个分区能承载一定量的服务能力,随着日志数据不断增加,需要通过分裂增加Shard数量,对于多个Shard如果直接通过PullLogs接口拖取数据的话,需要处理负载均衡和故障恢复等各种问题

3779 0
|
消息中间件 数据采集 存储
|

Uber市场部门日志实时处理-解读

Kafka 2016 Summit上Uber工程师Danny Yuan分享了一个Streaming Processing PPT,如何解决Uber里Operation Team所需要的需求。看了整个视频觉得介绍很细致,这对于大部分LBS (Location Based Service)有很好的借鉴意

8310 0
|
开发工具
|

日志处理实战:一个外卖网站解决方案(持续更新中)

“我要点外卖“是一个平台型电商网站,用户、餐厅、配送员等。用户可以在网页、App、微信、支付宝等进行下单点菜;商家拿到订单后开始加工,并自动通知周围的快递员;快递员将外卖送到用户手中。我们希望通过该网站的案例,教会大家如何通过日志进行商业运营与决策。

10074 0
|
移动开发 Java C#
|

OSS PostObject错误及排查

详细阐述了OSS PostObject的消息格式,列举了常见的问题及解法、说明了常见的需求及实现。

50550 2
|
消息中间件 分布式计算 Kafka
|

《Kafka Stream》调研:一种轻量级流计算模式

流计算,已经有Storm、Spark,Samza,包括最近新起的Flink,Kafka为什么再自己做一套流计算呢?Kafka Stream 与这些框架比有什么优势?Samza、Consumer Group已经包装了Kafka轻量级的消费功能,难道不够吗? 花了一些时间阅读[docs](http

26277 0
|
开发工具 对象存储 C++
|

Windows下编译使用Aliyun OSS C SDK

本文以VS2008、VS2010、VS2012、VS2013、VS2015为例说明编译OSS C SDK、运行示例程序的方法及常见问题。

13592 0
|
Java 开发工具 对象存储
|

Aliyun OSS Java SDK超时时间设置

Aliyun OSS Java SDK超时时间设置

17370 0
|
数据库
|

如何用消息系统避免分布式事务?

前阵子从支付宝转账1万块钱到余额宝,这是日常生活的一件普通小事,但作为互联网研发人员的职业病,我就思考支付宝扣除1万之后,如果系统挂掉怎么办,这时余额宝账户并没有增加1万,数据就会出现不一致状况了。 上述场景在各个类型的系统中都能找到相似影子,比如在电商系统中,当有用户下单后,除了在订单表插入一条

5838 0
|
存储 NoSQL 容灾
|

表格存储服务在社交应用场景的实践

阿里云的表格存储服务(http://www.aliyun.com/product/ots)是一款面向PB级结构化/半结构化数据存储和百万级高并发读写访问的NoSQL数据库服务,在移动社交场景中有着非常广发的应用,如今非常火热的钉钉也将后台的消息推送和存储功能从MySQL迁移到表格存储上,以获得更加.

5506 0
|
NoSQL 关系型数据库 MySQL
|

使用Datax将MySQL中的数据导入到TableStore中

背景 由于我们的数据在MySQL中的数据已经快接近亿级别,在访问MySQL并发读写的时候遇到了很大的瓶颈,严重的Block了我们的业务发展,主要从白天十点到晚上十点之前,并发访问的用户比较多,我们在写的前面加上了队列,系统后台自动同步。但是读上没有很好的办法解决,所以我们急需一个有较高吞吐量的实时

10167 121
|
网络协议 应用服务中间件 测试技术
|

OSS 性能测试经验总结

10822 2

阿里技术女神的成长之路(有生活素颜照哦)

从入职到现在2年多的时间里,经常有人问起:为什么要做程序员?为什么要来阿里? 这里不聊技术,不聊项目,只是简单分享,邻家女孩初长成,一路走来的风景……

43878 2
|
缓存 监控 Java
|

日志服务接入方式之loghub log4j appender

使用Loghub Log4j Appender,您可以控制日志的输出目的地为阿里云日志服务,使用Loghub Log4j Appender的好处 客户端日志不落盘:既数据生产后直接通过网络发往服务端。 对于已经使用log4j记录日志的应用,只需要简单修改配置文件就可以将日志传输到日志服务。 异

12438 0
|
缓存 监控 Java
|

日志服务接入方式之log producer library

Producer Library解决的问题: 客户端日志不落盘:既数据生产后直接通过网络发往服务端。 客户端高并发写入:例如一秒钟会有百次以上写操作。 客户端计算与IO逻辑分离:打日志不影响计算耗时。

7064 0
|
监控 对象存储
|

号外号外~~OSS监控服务上线啦!!

如何让OSS服务质量透明?如何全面、快速掌握服务运行状态?如何更容易自助定位问题? OSS监控服务来了——服务好助手,问题调查神器助你一臂之力!!

24497 1
|
存储 API 关系型数据库
|

表格存储新手指南:如何实现分页查询

本篇文章主要介绍如何在表格存储上实现分页查询

10516 6
|
JSON JavaScript 应用服务中间件
|

OSS callback功能常见问题分析

oss的callback功能常见错误有1、返回的body非json格式;2、status错误;3、超时

15645 0
|
存储 监控 分布式数据库
|

解密OpenTSDB的表存储优化

本篇文章会详细讲解OpenTSDB的表结构设计,在理解它的表结构设计的同时,分析其采取该设计的深层次原因以及优缺点。它的表结构设计完全贴合HBase的存储模型,而表格存储(TableStore、原OTS)与HBase有类似的存储模型,理解透OpenTSDB的表结构设计后,我们也能够对这类数据库的存储

29134 0
|
存储 监控
|

表格存储最佳实践:一种用于存储时间序列数据的表结构设计

在时间序列存储的场景,例如监控数据或者日志数据,通常比较难解决的是写入的问题,传统的数据库难以承载如此大数据量、高并发的写入压力。 表格存储能够提供非常优秀的写入能力,在阿里内部得到到了正好的实践和证明。但是若要发挥其强度的写入能力,需要有一个良好的表结构设计。 本篇文章给出了一个存储时间序

10562 0
|
监控 图形学
|

日志服务接入方式之Unity 3D篇

通过Web Tracking功能非常方便的收集Unity 3D的日志,这篇文章将以收集Unity Debug.Log为例,讲解如何将Unity日志收集到日志服务中。

6166 0
|
存储 监控 NoSQL
|

基于表格存储的高性能监控数据存储计算方案

随着软件架构的愈发复杂,借助强大的监控系统提高工作效率已经成为工程师的共识。监控系统会产生很多的监控信息,同时也要求对这些监控信息进行运算,此时就要求有一个扩展能力强、性能高的的存储系统来支撑监控信息的存储。本文以表格存储为例介绍NoSQL系统如何助力监控系统的构建。

7652 0
|
监控 JavaScript Java
|

日志服务接入方式之JS篇

本篇主要介绍使用JS SDK收集浏览器端的数据,附件是我们提供的JS库,使用它可以非常方便的收集浏览器端的信息,比如用户操作系统类型、浏览器类型和版本、屏幕分辩率等。除此以外,JS SDK还支持收集用户自定义的数据,比如在事件响应中收集特定的信息。

5680 0
|
存储 Java 开发工具
|

表格存储新手指南:Java SDK异步接口的使用

本篇文章主要会介绍下表格存储的Java SDK提供的异步接口,如何使用以及应用场景。

6604 0
|
PHP 开发工具 对象存储
|

Windows下编译使用Aliyun OSS PHP SDK

WIN环境下搭建Aliyun OSS PHP SDK编译运行环境。从PHP的安装逐步完成,SDK的编译运行。即使没有任何PHP基础,也能顺利完成。

19451 0
|
API 开发工具 Python
|

OAS的使用——Python SDK

当需要向OAS备份归档的文件量非常大的时候,通过web控制台和命令行工具来完成是不可能的,这时候需要使用OAS提供的SDK编写操作代码来实现

4604 0
|
Shell 开发工具
|

OAS的使用——控制台和命令行工具

OAS提供命令行工具oascmd.py,命令行工具可以给用户一个快捷的使用工具,不需要任何代码编写就可以使用OAS的功能,在实际使用中命令行工具更多作为一种测试工具。

2776 0
|
API 开发工具 Python
|

OAS的使用——概述

本文将从一个OAS(Open Archive Service)服务使用者的角度对OAS进行简单讲解

6174 0
|
存储 分布式数据库 数据库
|

阿里云表格存储技术分享

表格存储(Table Store)是构建在阿里云飞天分布式系统之上的NoSQL数据存储服务,提供海量结构化数据的存储和实时访问。表格存储以实例和表的形式组织数据,通过数据分片和负载均衡技术,实现规模上的无缝扩展。应用通过调用表格存储 API / SDK 或者操作管理控制台来使用表格存储服务。

7213 0
|
消息中间件
|

最佳实践:如何基于MNS实现事务消息

事务消息的背景: 有时候我们需要实现本地操作和消息发送的事务一致性功能。即:消息发送成功,则本地操作成功;反之,如果消息发送失败,本地操作失败(成功也需要rollback)。保证不出现操作成功但消息发送失败;或者操作失败但消息发送成功的情况; 另外,消费端,我们也希望消息一定被成功处理一次,不会

7278 0

云存储

阿里云存储基于飞天盘古2.0分布式存储系统,产品多种多样,充分满足用户数据存储和迁移上云需求。

0
今日
8358
内容
45
活动
195821
关注
你好!
登录掌握更多精彩内容

活跃用户

相关产品