• 【监控】InfluxDB与 Prometheus的监控分析

    Promethues 的数据采集器,我们称之为 exporter,每一个 exporter 会对外开放一个 端口,供 Prometheus Server 拉取数据。InfluxDB 的数据采集器 Telegraf,influxDB 官方宣传插件化驱动。这玩意的默认配置文件很多,...
    文章 2020-07-30 3062浏览量
  • 开源监控利器Prometheus初探

    之前提到Prometheus server的数据采集配置都是通过配置文件,那服务发现该怎么做?总不能每次要添加采集目标还要修改配置文件并重启服务吧。这里使用file_sd_configs指定定义了采集目标的文件。Prometheus server会...
    文章 2018-07-19 5071浏览量
  • 开源监控利器Prometheus初探

    之前提到Prometheus server的数据采集配置都是通过配置文件,那服务发现该怎么做?总不能每次要添加采集目标还要修改配置文件并重启服务吧。这里使用file_sd_configs指定定义了采集目标的文件。Prometheus server会...
    文章 2018-12-18 2441浏览量
  • 阿里云高级技术专家空见:CDN的数据化之路

    下面我们看看阿里云CDN在数据收集方面是怎么做的。现在整个系统数据量化的程度还是比较高的,不光是用户的访问数据,系统的操作数据也是可以量化的。下面是数据收集全貌图: 数据来源,有两个方面,一个是左边的节点...
    文章 2017-10-16 3537浏览量
  • 能源行业将被重构,大数据有哪些“挖”法?

    具体流程是,基于百分点的大数据平台,从流量数据、企业内部数据和企业外部数据,进行基础的数据处理和数据拉通,并整合所有能源使用端的数据,通过原始数据采集到中间气特征模型,建立全维的用户气特征和用户...
    文章 2017-08-01 1495浏览量
  • 云时代的应用性能管理(APM)

    APM就像是部署在互联网上的CT扫描设备,通过SDK采集用户端数据,通过监控点采集网络数据,通过探针采集服务器上各种软硬件环境数据,然后利用大数据技术把采集到的数据进行快速诊断分析,发现影响应用性能的“病灶”...
    文章 2017-05-02 1968浏览量
  • 数加平台——阿里大数据OS实践

    大数据OS希望提供高度集成的大数据平台,将计算引擎、数据开发工具、数据采集和传输工具、数据分析工具、机器学习平台无缝集成,提供端到端的一站式用户体验;提供云数仓服务(对标redshift),革传统数据仓库的命,...
    文章 2017-03-24 10406浏览量
  • 【干货】大数据,你懂了吗?

    实现数据的自动记录可以大幅度提高数据采集的质量。5 提问:您一直在谈数据很重要,包括说到大数据上升为国家战略,您这个公司也是跨境的公司,大家的医疗数据在国内是怎么样一种保护的方式?最近谷歌在欧洲也受到跨...
    文章 2017-04-03 957浏览量
  • 旗正规则引擎的产品设计

    旗正规则引擎具体怎么用?旗正规则引擎可以作为基础软件产品集成到各种业务管理系统中,用于管理各类将来可能会调整的各种业务逻辑。用户可以将各种和数据处理相关的逻辑通过规则配置器进行定义后,通过旗正规则引擎...
    文章 2017-11-24 3572浏览量
  • HBase全网最佳学习资料汇总

    如何保证重要的计费数据不重不丢 3.HBase实战经验,优化负载均衡、读写缓存、批量读写等性能问题 HBase在京东的实践:跟阿里一样,京东各个业务线使用了HBase,如:风控、订单、商品评价等 中国人寿基于HBase的企业...
    文章 2017-09-20 6673浏览量
  • 数据分析在私有云平台运维中的应用

    数据采集、数据分析、报表生成及采取相应措施来进行系统优化是一个集成了从底层到应用层的较长的过程。每一层都需要付出相当的努力才能最终将系统集成起来并发挥效益。本文作者:万盛 来源:51CTO
    文章 2017-08-02 1255浏览量
  • 车品觉:对于大数据未来趋势的判断

    同样地、如果车险是为了确保车人在驾驶期间的风险,那透过车辆的传感器,我可以清楚的知道这辆车有多少时间是停在车库、又有多少时间是在被使用的状态,所以保费的计费也是根据车辆实际承受风险的时间来跟客户收费...
    文章 2017-05-02 1431浏览量
  • NAS日志分析用户指南

    NAS文件存储是阿里云提供给用户的云上高性能文件...在公测阶段结束后,NAS可以免费将日志数据开放给用户,但日志存储和日志分析需要使用日志服务(SLS)的相关功能,其计费标准可以参考现行日志服务(SLS)的计费说明。
    文章 2018-07-31 3341浏览量
  • BAT下的大数据创业机会

    客户是世界最大的某材料生产企业之一,日产千万件,每件根据质量划分不同的等级,不同的等级价格不同,而良品率的提升直接与收益挂钩,客户已经具备初步的数据采集能力,但存储的数据未开发,也带来不小的存储成本,...
    文章 2016-08-15 4503浏览量
  • 在微服务架构下基于 Prometheus 构建一体化监控平台的...

    可以把原组件非 Prometheus 标准的数据格式转化成 Prometheus 的数据格式供采集器进行采集。再者&xff0c;Prometheus 支持 go、Python、Java 等 20 多种语言&xff0c;可以非常简单的为应用生成和暴露监控的 metric。最后...
    文章 2022-03-21 174浏览量
  • AWS韩小勇为创业者详细解读云服务商如何为他们提供...

    另外一个服务是流式数据采集传输以及提供的一个服务,Kinesis,大家可以把它想象成一个开源的卡夫卡,但是这是AWS自己的数据采集的服务。首先AWS提供了SDK,咱们把这些SDK嵌入到安卓的客户端里面,嵌入到网页里面,...
    文章 2018-02-22 2179浏览量
  • MaxCompute Tunnel上传典型问题场景

    Tunnel数据采集过程中会生成小文件;Job执行过程中生成的各种临时文件、回收站保留的过期的文件等,主要分类为: TABLE_BACKUP:回收站中超过保留天数的表 FUXI_JOB_TMP:作业运行临时目录 TMP_TABLE:作业运行中...
    文章 2018-08-21 7626浏览量
  • 实用教程:使用Netflow分析网络异常流量

    这些数据按照一定的时间组织起来,每5分钟采集一次数据,同时由nfcapd产生新的文件,并用当前时间来命名,例如nfcapd.2013053112035包含的数据是从2013年5月31日12小时35分钟开始的数据。图 4 nfcapd产生的数据 从...
    文章 2017-07-05 4499浏览量
  • AI加持的阿里云飞天大数据平台技术揭秘

    今天我的用户怎么用?用哪些部分?这是第一部分。第二部分是开发,开发有IDE,IDE用来写代码,写完代码之后提交,提交之后存在一个调度的问题,这么多的资源任务顺序是什么?谁先谁后,出了问题要不要中断,这些都由...
    文章 2019-10-28 8067浏览量
  • 超越批处理的世界:流计算

    因此我更倾向于无穷数据来指代无限流数据集,有穷数据来指代有限的批次数据。无穷数据处理(Unbounded data processing):一种发展中的数据处理模式,应用于前面所说的无穷数据类型。尽管我本人也喜欢使用流式...
    文章 2017-05-02 1058浏览量
  • AI加持的阿里云飞天大数据平台技术揭秘

    今天我的用户怎么用?用哪些部分?这是第一部分。第二部分是开发,开发有IDE,IDE用来写代码,写完代码之后提交,提交之后存在一个调度的问题,这么多的资源任务顺序是什么?谁先谁后,出了问题要不要中断,这些都由...
    文章 2019-10-28 842浏览量
  • Maxcompute tunnel 上传典型问题|学习笔记

    这个数据是用来采集访问比如阿里云这个帮助文档的时候&xff0c;可以记录访问的客户端是什么&xff0c;这个数据把它去上传的时候&xff0c;最后想要提取的时候可能是比较麻烦的&xff0c;因为这个分隔符是空格并且并不是完全的...
    文章 2021-12-16 251浏览量
  • MaxCompute Tunnel上传典型问题场景

    Tunnel数据采集过程中会生成小文件;Job执行过程中生成的各种临时文件、回收站保留的过期的文件等,主要分类为: TABLE_BACKUP:回收站中超过保留天数的表 FUXI_JOB_TMP:作业运行临时目录 TMP_TABLE:作业运行中...
    文章 2018-09-26 2346浏览量
  • 阿里巴巴飞天大数据平台MaxCompute(原名ODPS)全套...

    机器学习——让人工智能触手可及大规模深度学习优化技术在PAI平台中的应用及实践阿里云工程师机器学习破解雾霾成因大规模数据的分布式机器学习平台ODPS—MPI机器学习编程框架人工智能居然会模仿人类品酒炸弹开路...
    文章 2017-05-05 123054浏览量
  • 千亿级的数据难题,优酷工程师怎么解决?

    我们下层的数据输入,包括一些集团的采集工具,再往上边,有提供给开发人员的DataWorks,包括一些命令行的工具,有提供给BI人员的QuickBI及数据服务。图4 MaxCompute 生态完善 第三个特点,强悍的性能,...
    文章 2019-07-26 2136浏览量
  • 千亿级的数据难题,优酷工程师怎么解决?

    我们下层的数据输入,包括一些集团的采集工具,再往上边,有提供给开发人员的DataWorks,包括一些命令行的工具,有提供给BI人员的QuickBI及数据服务。第三个特点,强悍的性能,MaxCompute支撑了优酷EB级的数据...
    文章 2019-07-09 1980浏览量
  • 在AWS上的架构部署与设计

    2)制造:最核心的首先要做好数据采集,要把人、设备机器、产品、流程串接起来,做好数据采集、做好数据分析、做好数据决策,最后通过一个平台执行下去,还能不断的修正它,比如说制造行业要做数据采集、数据分析、...
    文章 2021-08-19 2048浏览量
  • 首席架构师白鳝:运维的进阶与哲学之道

    这是做完自动化以后必须做的一个环节,它既可以把采集到的大量数据通过一种可视化的方式表现出来,也可以很好地把一些指标向运维人员展示,可以一定程度解放运维人员,降低运维的成本。但是在做可视化的过程中,...
    文章 2017-05-02 1883浏览量
  • 优酷背后的大数据秘密

    我们下层的数据输入,包括一些集团的采集工具,再往上边,有提供给开发人员的DataWorks,包括一些命令行的工具;有提供给BI人员的QuickBI及数据服务。第三个特点,强悍的性能,MaxCompute支撑了优酷EB级的数据...
    文章 2020-06-02 1036浏览量
  • 优酷背后的大数据秘密

    我们下层的数据输入,包括一些集团的采集工具,再往上边,有提供给开发人员的DataWorks,包括一些命令行的工具;有提供给BI人员的QuickBI及数据服务。第三个特点,强悍的性能,MaxCompute支撑了优酷EB级的数据...
    文章 2019-06-11 19827浏览量
1 2 3 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化