• 关于

    数据采集与控制错误如何解决

    的搜索结果
  • IoT日志利器:嵌入式日志客户端(C Producer)发布

    2017年12月19日至20日,2017云栖大会·北京峰会在国家会议中心召开,飞天智能是贯穿云栖大会不变的主题,云计算、大数据、人工智能、物联网等热门话题备受各方关注。其中阿里云日志服务发布的嵌入式日志采集客户端(C Producer Library) 就是其中解决物联网日志采集、分析难的利器。 ...

    文章 元乙 2017-12-21 5892浏览量

  • 扫平日志分析路上障碍, 实时海量日志加工实践直播培训

    直播讲师: 丁来强(成喆)- 阿里高级技术专家从事阿里云日志服务相关的产品与研发工作,擅长AIOps/SecOps的大数据分析平台构建与场景落地,乐于分享, PyCon历届讲师/云栖直播讲师,曾经在中国PyCon2015、2016与2018以及云栖分享过10+不同议题,覆盖Jupyter扩展、大数...

    文章 成喆 2019-08-06 2107浏览量

  • LC3视角:Kubernetes下日志采集、存储与处理技术实践

    Kubernetes日志处理的趋势与挑战 Kubernetes的serveless化 Kubernetes容器技术促进了技术栈的去耦合,通过引入栈的分层使得开发者可以更加关注自身的应用程序和业务场景。从Kubernetes本身来看,这个技术解耦也在更进一步发展,容器化的一个发展的趋势是:这些容器都...

    文章 唐恺 2018-07-05 13026浏览量

  • Quick BI 数据可视化分析平台

    2020年入选全球Gartner ABI魔力象限,为中国首个且唯一入选BI产品

    广告

  • 看高精地图如何助力交通安全有序地发展

    在我们生活的城市中交通的供需矛盾日益突出,如何解决有限的交通设施来缓解交通堵塞问题,高精度地图和互联网大数据在这方面能起到哪那些作用呢?针对这些问题图盟CEO李俊彪将从高精度地图在城市中的发展背景、高精地图的含义以及基于高精地图的组织优化三个方面进行了全面的分析与解答。 数十款阿里云产品限时折扣中...

    文章 云迹九州 2018-06-27 1764浏览量

  • 游戏日志分析2:全方位数据采集

    系列文章: 游戏日志分析(1):概览 游戏日志分析(2):全方位数据采集 游戏日志分析(3):程序日志规范与埋点 游戏日志分析(4):线上问题定位与排查 游戏日志分析(5):数据库与日志关联分析 游戏日志分析(6):CDN/对象存储日志分析 游戏日志分析(7):网络日志查询与分析 游戏日志分析(...

    文章 元乙 2018-05-22 3979浏览量

  • 一文深度解读阿里云CDN实时日志的前世今生:挖掘实时数据的无限价值

    阿里云CDN实时日志服务可以将CDN采集的日志,秒级的交付给用户, 并且可以对采集到的日志进行实时、交互式分析和报表呈现,为监控、报警、渠道分析、运营分析提供实时、可靠的数据参考,让用户远离锁事,专注数据价值。 12月26日,阿里云CDN实时日志服务举办线上直播发布会,全网首次深度解读阿里云CDN...

    文章 樰篱 2018-12-26 4137浏览量

  • Logtail技术分享(二) : 多租户隔离技术+双十一实战效果

    日益增长的数据采集需求 上一篇中我们分享了日志采集中基于Polling+Notify组合的日志保序采集技术,Logtail基于Polling+Notify的组合方案以及日志轮转队列等相关技术实现了单一配置下的日志保序、高效、可靠采集问题。 然而日志采集并不仅仅是单一用户/应用需要完成的工作,例如一...

    文章 元乙 2017-11-16 10147浏览量

  • 阿里云 PB 级 Kubernetes 日志平台建设实践

    前言 阿里云日志服务是阿里集团针对日志分析、处理的自研产品。Kubernetes 近两年来发展十分迅速,已经成为容器编排领域的事实标准,但是 Kubernetes 中日志采集相对困难,阿里云日志服务技术专家元乙即将在 QCon 北京 2019 分享Kubernetes 日志平台建设最佳实践,借此机...

    文章 木环 2019-04-28 2929浏览量

  • 干货分享 | 阿里PB级Kubernetes日志平台建设实践

    嘉宾 | 元乙 随着近两年的发展,Kubernetes 早已成为容器编排领域的标准,现在非常多的企业基于 Kubernetes 构建整个微服务的开发、运维平台,而日志是其中必不可少的核心功能。 本文整理自阿里云日志服务技术专家元乙在 QCon 全球软件开发大会(北京站)2019 上的演讲,他的分...

    文章 KB小秘书 2019-07-25 498浏览量

  • 阿里PB级Kubernetes日志平台建设实践

    阿里PB级Kubernetes日志平台建设实践 QCon是由InfoQ主办的综合性技术盛会,每年在伦敦、北京、纽约、圣保罗、上海、旧金山召开。有幸参加这次QCon10周年大会,作为分享嘉宾在刘宇老师的运维专场发表了《阿里PB级Kubernetes日志平台建设实践》,现将PPT和文字稿整理下来,希望...

    文章 元乙 2019-05-29 15320浏览量

  • 日志服务数据加工的设计与实践

    前言 快速发展的日志数据 伴随Logging、Metrics、Tracing三者融合趋势的部分显现,日志类数据的范围正在泛化,包括:工业传感器数据、日志文件、Prometheus采集的云原生应用指标、Syslog、网络点击日志、stdout、业务埋点等等。 可以看到: •数据规模快速增长,日志类...

    文章 唐恺 2019-11-05 1558浏览量

  • 全方位 Logtail 状态监控

    作为日志服务的采集 agent,Logtail 目前已运行于上百万的机器,为万级别的应用提供服务,每天采集的数据已达到 PB 级别,这些实战的打磨使得 Logtail 在稳定性和性能上都已非常出色,在机器、网络等环境不变的情况下,配置完成后基本不再需要进行任何运维。但对于一些业务,仍旧存在着对 L...

    文章 抱泽 2019-02-25 7189浏览量

  • 物联网如何改善工业自动化在石油与天然气领域的价值?

    时至今日,我们可以看到各个不同行业已经开始尝试使用物联网的技术架构与解决方案来探索物联网能给他们带来哪些新的收益。欣慰的是,他们已经初步看见效果,尤其是工业领域——物联网正在为工业自动化领域的企业带来巨大的变革。 我们以罗克韦尔自动化公司为例,作为一家知名的工业自动化产品供应商,其产品涵盖控制系...

    文章 玄学酱 2018-02-08 977浏览量

  • 日志系列--程序日志处理挑战与方案

    程序日志(AppLog)有什么特点? 内容最全:程序日志是由程序员给出,在重要的地点、变量数值以及异常都会有记录,可以说线上90%以上Bug都是依靠程序日志输出定位到 格式比较随意:代码往往经过不同人开发,每个程序员都有自己爱好的格式,一般非常难进行统一,并且引入的一些第三方库的日志风格也不太一...

    文章 简志 2017-07-11 7144浏览量

  • 美国大数据治理下的新问题

    大数据与开放政府数据对电子公共服务、开放和透明政府以及政府公众与企业间的互动,都蕴藏着巨大的变革潜力。大数据与开放政府数据可推动多方协作,为农业、健康和交通运输等各个领域面临的挑战提出实时解决方案,推动更大程度的开放,并引领政策制定走向新时代。 本文以美国为背景,对有关开放政府数据与大数据的关键...

    文章 小旋风柴进 2017-05-02 1094浏览量

  • 日志数据如何同步到MaxCompute

    摘要:日常工作中,企业需要将通过ECS、容器、移动端、开源软件、网站服务、JS等接入的实时日志数据进行应用开发。包括对日志实时查询与分析、采集与消费、数据清洗与流计算、数据仓库对接等场景。本次分享主要介绍日志数据如何同步到MaxCompute。具体讲解如何通过Tunnel,DataHub,日志服务...

    文章 刘-建伟 2019-11-18 2290浏览量

  • 揭秘!文字识别在高德地图数据生产中的演进

    一 背景 作为一个DAU过亿的国民级软件,高德地图每天为用户提供海量的查询、定位和导航服务。地图数据的丰富性和准确性决定了用户体验。传统的地图数据的采集和制作过程,是在数据采集设备实地采集的基础上,再对采集资料进行人工编辑和上线。这样的模式下,数据更新慢、加工成本高。为解决这一问题,高德地图采用...

    文章 茶什i 2020-07-30 437浏览量

  • 大数据浪潮下,前端工程师眼中的完整数据链图

    马云曾经说过『人类正从IT时代走向DT时代』。正如他说言,今天几乎所有的互联网公司背后都有一支规模庞大的数据团队和一整套数据解决方案作决策,这个时代已经不是只有硅谷巨头才玩数据的时代,是人人都在依赖着数据生存,可以说如今社会数据价值已经被推到前所未有的高度。 我作为一名前端工程师在阿里巴巴数据团...

    文章 小旋风柴进 2017-05-17 2552浏览量

  • 《企业大数据系统构建实战:技术、架构、实施与应用》一3.2 如何选择解决方案

    本节书摘来自华章出版社《企业大数据系统构建实战:技术、架构、实施与应用》一书中的第3章,第3.2节,作者吕兆星 郑传峰 宋天龙 杨晓鹏,更多章节内容可以访问云栖社区“华章计算机”公众号查看 3.2 如何选择解决方案 企业选择大数据解决方案时,需要综合企业外部环境、企业内部环境、需求规划、解决方案特...

    文章 华章计算机 2017-05-02 3121浏览量

  • 日志服务运行日志使用指南

    日志服务是针对日志类数据的一站式服务,提供了海量的日志处理能力。用户在使用日志服务的过程中,经常会遇到如下问题: 数据写入之后查询不到,是不是数据有丢失; 怎么查看每天写入的数据量; 各个Shard数据写入和消费是否均衡; 怎么看消费组的消费进度,消费速度能否赶上写入速度; Logtail数据没...

    文章 liketic 2018-07-30 2806浏览量

  • 【百川云栖分享】离青&冰撤:云时代下,如何应对运维变革?

    【2016杭州·云栖大会】阿里百川在“淘宝移动技术实践&开放”专场演讲中,分别邀请了来自淘宝移动平台基础平台部负责人吴志华(花名:天施)和阿里百川负责人斯登宇(花名:承渊)等嘉宾分别做了精彩演讲。以下是离青和冰撤的演讲实录: 陈以鎏(离青) 阿里巴巴资深研发工程师:大家下午好,这个主题...

    文章 l.a.p.d 2016-11-03 2200浏览量

  • 《机器人操作系统ROS原理与应用》——3.2 如何选择解决方案

    本节书摘来自华章出版社《企业大数据系统构建实战:技术、架构、实施与应用》一 书中的第3章,第3.2节,作者:吕兆星 郑传峰 宋天龙 杨晓鹏,更多章节内容可以访问云栖社区“华章计算机”公众号查看。 3.2 如何选择解决方案 企业选择大数据解决方案时,需要综合企业外部环境、企业内部环境、需求规划、解决...

    文章 华章计算机 2017-05-02 1418浏览量

  • 如何设计一个端计算架构?

    作者 | 技神来源 | 阿里技术公众号移动端发展至今,诞生了很多架构用于解决各领域的专有问题。比如针对移动端动态化的Hybrid方案;兼顾动态化和性能的RN、WEEX乃至界面搭建方案;针对热修复的各种Patch方案;还有一些配置、编排等特殊需求的方案。这些方案的核心都是用某种语言描述业务的逻辑方法...

    文章 开发者小助手_LS 2020-11-09 1322浏览量

  • Logtail从入门到精通(四):正则表达式Java日志采集实战

    前言 为简化日志接入门槛,我们提供了极简模式的日志解析方式(如[开启日志采集之旅]()中的介绍)。为了更好的对日志进行分析,我们还提供了其他解析方式,例如:分隔符模式、完整正则模式、JSON模式等。本文将为大家介绍如何使用完整正则解析模式。 日志解析介绍 日志采集最终目的还是为了分析,通常分析都要...

    文章 元乙 2018-05-12 5362浏览量

  • 重磅:大数据与开放数据的政策框架

    摘 要:大数据与开放数据对电子公共服务、开放和透明政府以及政府公众与企业间的互动,都蕴藏着巨大的变革潜力。从“智慧”政府到变革政府,开放数据与大数据可推动协作,为农业、健康和交通运输等领域面临的挑战提出实时解决方案,推动更大程度的开放,并引领政策制定走向新时代。然而,开放数据与大数据也面临着一系列...

    文章 小旋风柴进 2017-05-02 1130浏览量

  • 2017年12月19-20日 阿里云 飞天/智能 云栖大会-北京峰会 会议笔记

    2017年12月19-20日,在北京国家会议中心举办了云栖大会北京峰会,19日为Tech Insight,20日为主论坛和其他分论坛。场次很多,内容很丰富,自己的一些参会笔记整理如下: 20171219 上午 阿里云MVP Demo Show:快速定位问题,实现安全的及时监控 09:00 - 10...

    文章 笨笨的粽子妞 2017-12-21 2732浏览量

  • 【云服务月刊】2018年第3期:阿里云服务产品全新升级

    本期头条 【重磅】阿里云服务产品全新升级 随着云计算与大数据行业的蓬勃发展,各行业客户在阿里云上快速成长。为了保障客户云上系统的平稳运行,并向客户提供更多有价值的服务,阿里云全面升级支持与服务体系: 为所有客户提供基础支持; 企业客户可根据自身需求,选择合适的支持计划; 客户可根据特定场景需求...

    文章 阿里云支持与服务 2018-04-09 4077浏览量

  • SLS:海量日志数据管理利器

    SLS:海量日志数据管理利器 日志是大规模集群管理系统中非常关键的部分,服务器上的各种日志数据(如访问日志、应用日志等)可以帮助我们回答如运维、开发、运营、客服、安全等各种问题,例如: 运维:服务是否正常,流量和QPS是多少; 开发:线上有没有异常和错误发生; 运营:多少账号开通了服务,其...

    文章 yq传送门 2016-12-25 9824浏览量

  • 《Arduino计算机视觉编程》一1.2 解决计算机视觉问题

    ####本节书摘来自华章出版社《Arduino计算机视觉编程》一书中的第1章,第1.2节,作者[土耳其] 欧森·奥兹卡亚(zen zkaya),吉拉伊·伊利茨(Giray Yilliki),更多章节内容可以访问云栖社区“华章计算机”公众号查看。 1.2 解决计算机视觉问题 解决任何复杂的问题,比如...

    文章 华章计算机 2017-05-02 3437浏览量

  • 5.22成都workshop:4. 游戏日志采集与分析

    场景简介 小吴负责公司的DevOps 以及 数据团队:在服务器和用户数上升后,开发花了非常多的时间在服务器查日志问题上。在支持移动入口、网页、推广渠道后,日志的来源也变得越来越多,加剧了他的困扰。除此之外,运营团队、BI团队、运维团队等对日志提出各自需求。 因此小吴需要一套快捷灵活的日志系统,来解...

    文章 简志 2017-05-21 2492浏览量

1 2 3 4 ... 11 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT