|
SQL API 对象存储
|

OSS重磅推出OSS Select——使用SQL选取文件的内容

OSS重磅推出OSS Select功能,可以直接使用简单的SQL语句,从OSS的文件中选取所需要的内容

28463 0
|
存储 JSON NoSQL
|

如何将DynamoDB的数据增量迁移到表格存储

AWS 的 Amazon DynamoDB 和阿里云的表格存储 TableStore 都是完全托管的NoSQL数据库服务,提供快速的、可预期的性能,并且可以实现无缝扩展。本篇文章介绍了如何使用 Lambda 将 DynamoDB 的数据增量迁移到表格存储中。

19174 0
|
存储 监控 Java
|

Logtail从入门到精通(四):正则表达式Java日志采集实战

为简化日志接入门槛,我们提供了极简模式的日志解析方式(如[开启日志采集之旅]()中的介绍)。为了更好的对日志进行分析,我们还提供了其他解析方式,例如:分隔符模式、完整正则模式、JSON模式等。本文将为大家介绍如何使用完整正则解析模式。

7537 0
|
存储 监控 NoSQL
|

使用函数计算对表格存储中数据做简单清洗

表格存储的增量数据流功能能够使用户使用API获取Table Store表中增量数据,并可以进行增量数据流的实时增量分析、数据增量同步等。通过创建Table Store触发器,能够实现Table Store Stream和函数计算的自动对接,让计算函数中自定义的程序逻辑自动处理Table Store表中发生的数据修改,充分的利用了函数计算全托管、弹性伸缩的特点。

3462 0
|
Web App开发 监控 对象存储
|

日志服务(Log service)4月控制台更新指南

概览 查询界面全新视图 支持查询页面以及仪表盘页面内嵌 支持OSS访问日志向导以及安骑士访问日志向导 时间选择器全面加强 部分细节优化和已知bug修复 一.查询界面全新视图 左侧标签页替换为资源树状结构,直接展示用户的日志库、快速查询和仪表盘列表。

2511 0
|
前端开发 安全 Java
|

智能媒体管理产品文档转换/预览功能介绍(4)--快速搭建

智能媒体管理提供了 Cloud Native 架构的文档转换/预览服务,本文介绍快速搭建的示例,让您用 DIY 的体验方式实现文档预览功能。

6392 0
|
监控
|

日志服务时间选择器增强

日志服务(Log Service)提供给用户丰富的时间选择功能,意图帮助用户快速选择时间段对日志信息进行查询和分析。主要包括3个大类 相对时间 整点时间 自定义时间 一、相对时间 相对时间的计算方式为: 当前时间精确到秒 - 窗口 如当前时间为2018-04-26 21:14:32,时间窗口大小.

5139 0
|
PHP 对象存储
|

ThinkPHP 5使用OSS

ThinkPHP 5使用OSS示例。

5932 0
|
Kubernetes 容器 弹性计算
|

Logtail从入门到精通(三):机器分组配置

基于集团内数年来的Agent运维经验总结,我们设计了一种灵活性更高、使用更加便捷、耦合度更低的配置&机器管理方式:自定义标识机器分组。此种方式对于动态环境非常适用,尤其适用于弹性伸缩服务和swarm、pouch(阿里docker)、Kubernetes等容器环境。

3073 0
|
Web App开发 Shell
|

CLI使用案例5: 在配置文件中简单配置多个账户

这里介绍一种通过配置文件,简单的配置多个账户的方式。

1765 0
|
存储 弹性计算 监控
|

Logtail从入门到精通(二):开启日志采集之旅

为了更好的了解日志采集,这里我们首先对日志采集中遇到的基本概念进行简要的介绍。

6673 0
|
存储 运维 监控
|

Logtail从入门到精通(一):日志采集杂谈

目前logtail已承载阿里云全站、所有云产品服务、全球各Region部署、阿里巴巴集团(淘宝、天猫、菜鸟等)上重要服务的数据采集。每天采集接近百万服务器上数PB的实时数据,对接数千个应用与消费者。

8713 0
|
SQL UED
|

SQL老司机:流量骤增骤减,可以这样设置告警

面向用户的在线产品,例如游戏行业,需要实时的关注流量情况,如果流量突然降低,那么我们得立刻检查,是否是宕机了,或者进程异常,避免影响用户体验。那么怎么设置这样的告警呢?接下来通过日志服务来介绍。 完整的报警语句 先贴个完整的告警语句: * | select time,pvPerSec, lastPvPerSec, diff,diff >1.

2707 0
|
Web App开发 监控
|

如此方便的日志分析功能,快来嵌入到你的网站吧!

背景需求 用户配置完成日志服务采集和查询分析等功能后,期望能直接使用日志查询分析和仪表盘页面,同时对于日志一般需要分享给其他同事进行使用,此时使用RAM会带来众多子账号的管理成本,因此日志服务提供新的单点登录方式嵌入式集成查询分析和仪表盘等页面。

3414 0
|
存储 安全 对象存储
|

带您探究云存储的奥秘,三分钟帮您快速了解OSS

快来,带您探究云存储的奥秘,三分钟帮您快速了解OSS。 阿里云对象存储服务,简称 OSS,是一种面向海量数据规模的分布式存储服务,具有稳定、可靠、安全、低成本的特点,能够提供十一个九的数据可靠性。OSS提供与平台无缝对接地RESTful API接口,您可以在互联网任何位置任何设备上访问OSS。

3882 0
|
安全 数据安全/隐私保护 对象存储
|

智能媒体管理产品文档转换/预览功能介绍(3)---预览原理

智能媒体管理产品提供了 Cloud Native 架构的文档转换/预览服务,本文介绍其中的预览原理和使用方法。

7379 1
|
存储 自然语言处理 数据库
|

Lucene 查询原理

# 前言 Lucene 是一个基于 Java 的全文信息检索工具包,目前主流的搜索系统Elasticsearch和solr都是基于lucene的索引和搜索能力进行。想要理解搜索系统的实现原理,就需要深入lucene这一层,看看lucene是如何存储需要检索的数据,以及如何完成高效的数据检索。

8904 1
|
Web App开发 存储 Java
|

智能媒体管理产品文档转换/预览功能介绍(2)---转换原理

智能媒体管理产品提供了 Cloud Native 架构的文档转换/预览服务,本文介绍其中的转换原理和使用方法。

6852 0
|
SQL 人工智能 监控
|

SQL老司机,居然是这样智能挖掘异常日志

提取异常日志是个大难题 面对海量的日志(TB乃至PB级别),如何从日志中挖掘出异常信息对于大部分的开发者而言是一个大难题。例如,判断机器的延时是否正常,部分request是否正常。通常,我们对于异常的数据,要及时的报警,以尽快的处理。

3367 0
|
存储 弹性计算 安全
|

智能媒体管理产品文档转换/预览功能介绍(1)---Cloud Native架构

办公文档是每个人日常频繁使用的工具,ppt、word、xls、wps、pdf等为我们工作和生活带来了很多的便利,本文介绍在云计算和智能手机时代,基于智能媒体管理的新型Cloud Native文档转换/预览架构,实现高效的

5287 0
|
监控 开发工具 索引
|

使用Logging Handler自动上传Python程序日志到日志服务

想要日志上云,又不想修改程序代码? 或者不希望进行相对复杂的客户端部署?那么您需要使用Logging Handler,现在Python程序也支持了!

4253 0
|
安全 对象存储 Web App开发
|

如何在阿里云•对象存储OSS托管用户域名的https证书

OSS服务支持将用户域名绑定到OSS域名,并为此用户域名提供HTTPS证书托管服务。以满足用户使用自己的域名也能支持HTTPS安全加密的访问方式传输数据。

6109 0
|
对象存储
|

如何使用OSS视频截帧功能快速生成视频预览

OSS作为对象存储产品,主要提供的是海量非结构化数据的存储,其中绝大部分都是视频和图片等富媒体数据,针对该场景的需求,OSS提供了丰富的图片处理功能来帮助用户更加方便的对存储于OSS上的图片数据进行加工,从而减少了对于流量、CPU等资源的消耗。

12882 0
|
存储 JSON Shell
|

CLI使用案例4:灵活配置CLI

配置CLI以满足不同需求: - 配置多个账户,方便测试和多域操作。 - 切换默认账户,不用每个命令都指定。 - 使用HTTPS连接日志服务,更加安全。 - 格式化输出json格式,更方便查阅。

2422 0
|
存储 监控 API
|

开放分布式追踪(OpenTracing)入门与 Jaeger 实现

分布式系统的运维挑战 容器、Serverless 编程方式的诞生极大提升了软件交付与部署的效率。在架构的演化过程中,可以看到两个变化: 应用架构开始从单体系统逐步转变为微服务,其中的业务逻辑随之而来就会变成微服务之间的调用与请求。

49840 1
|
监控 安全 BI
|

安骑士主机日志实时分析功能

日志服务与安骑士主机日志已经打通,提供实时分析查询、开箱即用的多个领域报表

3641 0
|
JSON 监控 数据格式
|

日志服务(原SLS)2018-2 月功能发布

发布Json类型、中文分词、新增窗口/逻辑运算/二进制处理/Lamdba等分析函数,支持Kubernetes数据采集

4282 0
|
Web App开发 监控 测试技术
|

如何给你的OSS资源加上监控

OSS日渐成为大家应用和服务的核心存储组件,本文来介绍一下如何通过云监控的简单配置来实现对OSS资源使用量和状态进行监控和报警。

3135 0
|
存储 Linux 对象存储
|

OSS定制自定义response header

OSS通过传入"x-oss-persistent-headers"这个头,支持指定非"x-oss-meta-"开头的usermeta,满足特定用户特定场景的需求

11963 0
|
SQL JSON 监控
|

日志服务支持Json类型数据

JSON数据作为一种通用类型的数据类型,其自解析、灵活的特性,使其能够很好满足复杂场景下数据的记录需求,在很多日志内容中格式不固定的部分往往都是以json的形式进行记录,如将一次http请求的request参数和response内容以json的形式记录在一条日志中。

7052 0
|
运维 监控 Docker
|

全面提升,阿里云Docker/Kubernetes(K8S) 日志解决方案与选型对比

今天,日志服务再次升级Kubernetes(k8s)的日志解决方案。1分钟内即可完成整个集群部署,支持动态扩容,提供采集宿主机日志、容器日志、容器stdout等所有数据源的一站式采集。

25081 0
|
监控 关系型数据库 Java
|

日志服务(原SLS)2018-1 月功能发布

2018年1月版本已发布,包含:Mysql Binlog/JDBC/Http Reqeust采集,IP位置/经纬度分析函数,Log4J/LogBack Appender,OSS访问日志分析等功能,欢迎试用!

4855 0
|
存储 监控 大数据
|

CLI使用案例3:轻松跨库查询数据并下载到本地

使用日志服务想要跨库查询? 网页控制台下载数据一页一页十分痛苦? SDK分页加格式化有些复杂? 不想写代码就可以查询数据并下载到本地? 日志服务CLI可以帮助你轻松解决这些问题.

3262 0
|
Web App开发 算法 测试技术
|

OSS服务器端加密之初体验

本文介绍如何基于ossutil工具,体验oss服务器端加密功能。 关于服务器端加密 OSS支持在服务器端对用户上传的数据进行加密编码(Server-Side Encryption):用户上传数据时,OSS对收到的用户数据进行加密编码,然后再将得到的加密数据持久化保存下来;用户下载数据时,OSS自动对保存的加密数据进行解密并把原始数据返回给用户,并在返回的HTTP请求Header中,声明该数据进行了服务器端加密。

7653 0
|
存储 文件存储
|

阿里云NAS备份服务

阿里云NAS(Network Attached Storage)是一款高可靠高可用高性能的分布式存储产品,应用场景包括ECS、HPC、Docker等共享存储。目前已经有大量的客户使用NAS作为他们的数据存储,其中包括今日头条、Ofo这样的大型互联网企业,也有基因测序这类生物医药企业,还有众多的小企业,应用场景非常丰富。

4937 0
|
存储 监控 Java
|

Java日志上云三剑客:Log4J/LogBack/Producer Lib

日志服务提供30多种数据采集方式,针对服务器、移动端、嵌入式设备及各种开发语言都提供完整的接入方案。对 Java 开发者而言,没有什么比熟悉的日志框架 Log4j、Log4j2、Logback Appender 更好使的了。

24649 0
|
存储 监控 大数据
|

CLI使用案例2:轻松大并发地拉取大数据到本地

当你需要把特定数据下载到本地时, 是否遇到一些困难: 1. 现在的Web控制台只能一页一页的下载? 2. SDK提供的接口需要用起来有些复杂, 例如游标怎么获取, 分区如何传入, 拉去数据后需要输出格式化? 如果是的, 你可能需要使用日志服务的CLI来轻松拉取大量数据到本地.

3234 0
|
JSON 监控 数据格式
|

CLI使用案例1:快速创建Logtail配置

Logtail作为日志服务的轻量级数据采集工具, 如何大批量快速配置Logtail是使用日志服务的一个重要操作, CLI使得这件事情可以快速完成.

3104 0
|
存储 监控 数据格式
|

SLS 命令行控制台工具(CLI)来啦

如果你遇到以下槽点, 那么CLI为你而生: 1. 线下创建项目后,线上又要重新配置 2. 一个区域创建好项目,复制到其他15个区域 3. 把日志查询结果批量导出 4. 批量配置与脚本化配置

5570 0
|
存储 固态存储 对象存储
|

认识阿里云的产品逻辑:基础设施必须比业务跑得快

(本文根据海峰姐与狒哥的E企播报的直播访谈中进行整理解读: 原文来源:E企播报:阿里云、华为存储重压全闪存,英特尔美光劳燕分飞 作者:海峰姐 狒哥 地址:https://mp.weixin.qq.com/s/-8llRtGtP0cA76-u13Ctpw)

3708 0
|
监控 安全
|

增长黑客系列:今天比昨天增长多少?快使用环比函数来分析日志

增长黑客系列:今天比昨天增长多少?快使用环比函数来分析日志 在我们平时分析业务时,一个最重要的指标就是,今天比昨天增长多少,本周比上周增长多少;或者同上一个周期相比增长最大的分类是哪个?这些问题,可以使用一个SQL来分析。

3509 0
|
机器学习/深度学习 人工智能 监控
|

AI驱动智能化日志分析 : 通过决策树给日志做聚类分析

日志自动化、智能化分析对于AI需求 通常,我们分析日志,是为了两个目标: 对数据有个整体的概览,例如,生成一天内的报表。 对异常数据进行挖掘,例如,对特殊的日志进行告警。 日志分析,通常对分析者有这些要求: 对业务数据的熟悉程度要求比较高。

9566 0
|
存储 弹性计算 文件存储
|

阿里云文件系统SMB访问协议服务及使用指南

阿里云于2016年发布了支持NFS网络文件系统访问协议的阿里云文件系统。2017年3月,又增加了SMB文件系统访问协议的支持,正式对外公测。2018年1月,阿里云NAS SMB支持正式提供商业化服务。本文简单描述了SMB文件系统访问协议以及阿里云NAS支持的SMB协议功能,并简单介绍了该服务的使用场景以及使用流程。

6914 0
|
监控 应用服务中间件 Android开发
|

日志服务-15分钟搞定NGINX访问日志分析

15分钟能做什么? 可能一本书只能看一个章节,慢慢品一杯咖啡才喝了一半,或许玩一把炉石传说。 日志服务11月份发布数据接入向导功能,如果平均一首歌的时间按3分钟计算,那么给我们5首歌的时间,我们一起来通过日志服务的数据接入向导快速玩转NGINX访问日志分析~

10506 3
|
存储 Cloud Native 数据库
|

时间序列数据的存储和计算 - 开源时序数据库解析(四)

Prometheus 开源时序数据库解析的系列文章在之前已经完成了几篇,对比分析了Hbase系的OpenTSDB、Cassandra系的KairosDB、BlueFlood及Heroic,最后是tsdb ranking top 1的InfluxDB。

8424 0
|
监控 关系型数据库 数据库
|

10分钟搭建MySQL Binlog分析+可视化方案

日志服务 最近在原有30+种数据采集渠道 基础上,新增MySQL Binlog、MySQL select等数据库方案,仍然主打快捷、实时、稳定、所见即所得的特点。 以下我们以用户登录数据库作为案例,演示如何在10分钟内手把手完成从binlog采集到查询、告警、搭建报表等全过程,满足各个老板们的需求。

15209 0

一张图看懂阿里云智能媒体管理产品

近日,阿里云发布了智能媒体管理(Intelligent Media Managemen)服务, 通过离线处理能力关联授权的云存储,提供便捷的海量多媒体数据一键分析,并通过该分析过程构建价值元数据,更好支撑内容检索。

3887 0
|
人工智能 数据处理 调度
|

场景化封装,一站式使用,普惠AI集成 ——阿里云发布智能媒体管理产品

近日,阿里云发布了智能媒体管理(Intelligent Media Management)服务, 通过离线处理能力关联授权的云存储,提供便捷的海量多媒体数据一键分析,并通过该分析过程构建价值元数据,更好支撑内容检索。

8379 0
|
监控 物联网 应用服务中间件
|

日志服务(原SLS)2017-12 月功能发布

日志服务12月功能已上线,包括美东Region、嵌入式客户端(C-Producer)、Flink Connector、 CLI、API网关打通、告警优化、控制台快速分析等功能,欢迎试用

3836 0
|
存储 监控 BI
|

1分钟构建API网关日志解决方案

访问日志(Acccess Log)是由web服务生成的日志,每一次api请求都对应一条访问记录,内容包括调用者IP、请求的URL、响应延迟、返回状态码、请求和响应字节数等重要信息。 阿里云API网关提供API托管服务,在微服务聚合、前后端分离、系统集成上为用户便利的产品。

9758 0

云存储

阿里云存储基于飞天盘古2.0分布式存储系统,产品多种多样,充分满足用户数据存储和迁移上云需求。

0
今日
8312
内容
45
活动
195707
关注
你好!
登录掌握更多精彩内容

活跃用户

相关产品

  • 对象存储
  • 日志服务
  • 文件存储 NAS