• 关于

    海量数据处理技术常见故障

    的搜索结果
  • 重磅!《Apache Flink 十大技术难点实战》发布,帮你从容应对生产环境中的技术难题

    《Apache Flink 十大技术难点实战》独家下载来啦!总结生产环境十大常见难点,10篇技术实战文章帮你完成故障识别、问题定位、性能优化等全链路过程,实现从基础概念的准确理解到上手实操的精准熟练,从容应对生产环境中的技术难题! 点击免费下载《Apache Flink 电子书合辑》>&g...

    文章 阿里云实时计算Flink 2020-03-11 23394浏览量

  • 收藏!一张图帮你快速建立大数据知识体系

    前言 最早提出“大数据”时代到来的是全球知名咨询公司麦肯锡,麦肯锡称:“数据,已经渗透到当今每一个行业和业务职能领域,成为重要的生产因素。人们对于海量数据的挖掘和运用,预示着新一波生产率增长和消费者盈余浪潮的到来。”数据,让一切有迹可循,让一切有源可溯。我们每天都在产生数据,创造大数据和使用大数据...

    文章 茶什i 2020-06-11 9117浏览量

  • 数据中台建设方法论实践之技术选型

    数据中台解决方案包含:数据中台建设方法论、相关技术体系和工具、数据体系等几大部分构成,前文介绍了数据建设方法论中的数据仓库建设部分,本文将介绍具体构建数仓的相关技术。大数据技术肇始于Google,涉及到的相关技术包含数据采集交换技术,面向ETL的计算技术,面向数据查询分析的计算技术。本文主要介绍面...

    文章 悠朝 2020-03-09 823浏览量

  • Quick BI 数据可视化分析平台

    2020年入选全球Gartner ABI魔力象限,为中国首个且唯一入选BI产品

    广告

  • 专访 OceanBase 数据库创始人阳振坤: 数据驱动业务发展 共建数据技术未来

    随着互联网的爆发式增长,数据库作为 IT信息产业最重要最核心的部分,迎来了成长和发展的绝佳时机。如何把握机遇,迎接海量数据、通用高性能的挑战?国产自研分布式数据库 OceanBase,在国家内循环、新基建政策的引导下,发挥着强大的中国制造的技术魅力。 在互联网爆炸式增长对海量业务中数据库高并发、高...

    文章 荔子liqi 2021-01-07 42浏览量

  • 主流大数据系统在后台的层次角色及数据流向

    最近有不少质疑大数据的声音,这些质疑有一定的道理,但结论有些以偏概全,应该具体问题具体分析。对大数据的疑问和抗拒往往是因为对其不了解,需要真正了解之后才能得出比较客观的结论。 大数据是一个比较宽泛的概念,它包含大数据存储和大数据计算,其中大数据计算可大致分为计算逻辑相对简单的大数据统计,以及计算...

    文章 知与谁同 2017-08-01 958浏览量

  • 阿里如何做到百万量级硬件故障自愈?

    随着阿里大数据产品业务的增长,服务器数量不断增多,IT运维压力也成比例增大。各种软、硬件故障而造成的业务中断,成为稳定性影响的重要因素之一。本文详细解读阿里如何实现硬件故障预测、服务器自动下线、服务自愈以及集群的自平衡重建,真正在影响业务之前实现硬件故障自动闭环策略,对于常见的硬件故障无需人工干预...

    文章 技术小能手 2018-11-19 2526浏览量

  • 《企业大数据系统构建实战:技术、架构、实施与应用》一3.2 如何选择解决方案

    本节书摘来自华章出版社《企业大数据系统构建实战:技术、架构、实施与应用》一书中的第3章,第3.2节,作者吕兆星 郑传峰 宋天龙 杨晓鹏,更多章节内容可以访问云栖社区“华章计算机”公众号查看 3.2 如何选择解决方案 企业选择大数据解决方案时,需要综合企业外部环境、企业内部环境、需求规划、解决方案特...

    文章 华章计算机 2017-05-02 3040浏览量

  • Elasticsearch 全观测技术解析与应用(三):能力呈现与应用价值

    点击免费下载《Elasticsearch 全观测技术解析与应用》>>> 分享嘉宾:朱杰 这节课承接《全观测技术原理与技术生态》,介绍Elastic整套工具带来的能力,以及用demo展示怎么用这些能力构建全方位的观测性。 实现全观测主要有以下步骤 第一步是数据采集,这些数据可能来自...

    文章 工程师甲 2020-12-17 358浏览量

  • 八年来我们到底经历了什么?——中间件专家带你“重走”双11高可用架构演进之路

    双11的技术挑战 双11技术挑战的本质使用用有限的成本去是实现最大化的用户体验和集群整体吞吐能力,用最合理的代价解决零点峰值,支撑好业务的狂欢。阿里做双11已经有八年之久了,八年来双11的交易额增长200倍,交易峰值增长400多倍,系统复杂度和大促支撑难度以指数级攀升;并且经过多年的发展,双11技...

    文章 场景研读 2017-08-04 7570浏览量

  • AIOps智能监控在阿里巴巴故障管理工作中的成功实践

    摘要:在自动化运维还不普及的时候,运维人员更多的运用手动的方式完成运维工作,这种方式耗时长,效率低。由此,如何合理发挥人工智能技术辅助运维人员进行故障管理工作逐步成为了业界关注的焦点。阿里巴巴的GOC团队通过研究并使用AIOps系统到运维业务场景中的方式,积累了大量的智能运营的方法论和技术体系。 ...

    文章 止水如心 2018-06-26 5105浏览量

  • 分布式系统架构技术分析(一)

    原创声明:本文系作者原创,谢绝个人、媒体、公众号或网站未经授权转载,违者追究其法律责任。 在 20 世纪 60 年代,大型主机凭借其超强的计算和 IO 处理能力以及在稳定性和安全性方面的卓越表现,在很长的一段时间里引领了计算机行业的发展。随着大型主机的发展,集中式的计算机系统架构也成为了主流。随...

    文章 初商 2019-08-03 951浏览量

  • 解密:金融级海量数据库OceanBase

    OceanBase是一个高性能、高可用、高可扩展并且廉价的关系数据库。 为什么要做OceanBase? 互联网金融对数据库系统提出了更高的要求。传统数据库在扩展性、事务特性以及数据强一致等方面已经做了大量的工作,但是仍不足以达到现在互联网飞速发展的要求。 以支付宝业务为例,其业务体量...

    文章 华蒙 2016-05-06 6875浏览量

  • 【盘点篇】从安全、稳定、高可用、高性能、智能等维度看阿里云存储 2018

    2008年,为了探索阿里巴巴集团大规模存储解决之道,阿里云存储自研飞天大规模的分布式存储引擎(盘古 1.0 ),从写下第一行代码开始,阿里云存储的进化之路正式开启。 作为阿里云飞天系统里极其重要的一环,阿里云存储的使命不仅解决了双 11、双 12、蚂蚁金服等集团大规模业务对存储系统的超高要求和挑战...

    文章 株莉 2019-02-26 7741浏览量

  • 《机器人操作系统ROS原理与应用》——3.2 如何选择解决方案

    本节书摘来自华章出版社《企业大数据系统构建实战:技术、架构、实施与应用》一 书中的第3章,第3.2节,作者:吕兆星 郑传峰 宋天龙 杨晓鹏,更多章节内容可以访问云栖社区“华章计算机”公众号查看。 3.2 如何选择解决方案 企业选择大数据解决方案时,需要综合企业外部环境、企业内部环境、需求规划、解决...

    文章 华章计算机 2017-05-02 1401浏览量

  • AI助力日志中心智能化运营

    摘要:AIOps将人工智能应用于运维领域,基于已有的运维数据通过机器学习的方式来进一步解决自动化运维无法解决的问题。运维数据包含海量的日志数据,随着大数据分析水平的提升,需要更加精准地挖掘日志当中的信息。本文将主要介绍日志易在AIOps方面如何做出智能的日志中心以及日志在IT领域中发挥的价值。 ...

    文章 sherlding 2018-06-23 9916浏览量

  • 带你读《企业数据湖》之三:Lambda架构:一种数据湖实现模式

    第3章Lambda架构:一种数据湖实现模式 在前一章中介绍数据湖的一系列概念时,粗略地提到了Lambda架构。在本章中,我们将介绍Lambda架构的一些细节,并解释该架构模式在本书的数据湖实现方案中的重要意义。本章虽然会尽量涵盖Lambda架构范式的全部细节,但是并不会给出任何技术实现。这是为了保...

    文章 云迹九州 2019-10-20 1724浏览量

  • 存的起,看得见—云原生多模数据库Lindorm技术解析

    用户福利 阿里云最新发布业界首款云原生多模数据库Lindorm,帮助企业一站式存储处理海量数据,降低80%成本,技术交流钉钉群:35977898,更多内容请参考链接 一、背景 作为面向大数据场景的半结构化、结构化存储系统,Lindorm已经在阿里发展了近十年,并始终保持着快速的能力更新和技术升级,...

    文章 天梧 2020-10-22 777浏览量

  • 【收藏+下载】Flink 年度学习资料大礼包!

    大数据实时计算及 Apache Flink 年度Flink 年度学习资料大礼包,300+页实战应用精华总结! 零基础入门,30 天成长为 Flink 大神的经典教程。 Apache Flink 核心贡献者及阿里巴巴技术专家的一线实战经验总结。 收录来自 bilibili、美团点评、小米、OPPO...

    文章 阿里云实时计算Flink 2020-03-16 23969浏览量

  • 轻松应对双11,百万级物理和虚拟网络设备的网络智能化实践

    12月13-14日,由云栖社区与阿里巴巴技术协会共同主办的《2017阿里巴巴双11技术十二讲》顺利结束,集中为大家分享了2017双11背后的黑科技。本文是《双11的智能化网络实践》演讲整理,主要讲解了阿里巴巴在网络智能化技术中,大量级网络下网络变更、调度优化技术的大幅度提升,故障快速发现、定位、恢...

    文章 zengzengzeng 2017-12-14 1781浏览量

  • 带你读《企业数据湖》之二:数据湖概念概览

    点击这里查看第一章:数据导论 点击这里查看第三章:Lambda架构:一种数据湖实现模式 第2章数据湖概念概览 数据湖概念的诞生,源自企业面临的一些挑战,如数据应该以何种方式处理和存储。最开始,企业对种类庞杂的应用程序的管理都经历了一个比较自然的演化周期。最开始的时候,每个应用程序会产生、存储大量数...

    文章 云迹九州 2019-10-19 909浏览量

  • 网站架构模式

    模式描述对重复发生时间的通用解决方案的核心。 模式的价值在于可重复性。 网站架构模式 为了解决高并发访问,海量数据,高可靠运行,提出了很多解决方案实现高性能,高可用,易伸缩,可扩展,安全等技术架构。 分层 横向分成, mvc, 视图,业务,数据库层 进制跨层调用 会给以后的...

    文章 机械键盘 2015-10-09 1245浏览量

  • 阿里双11网络技术揭秘:百万级物理和虚拟网络设备的智能化之路

    阿里巴巴资深技术专家后羿 后羿:大家好,首先给大家呈现的是阿里巴巴在双11中主要依赖的网络相关技术。在今年双11中我们在稳定性、高性能网关、去堆叠以及25G、骨干网流量调度平台、流量的精准评估、QOS优化和成本优化方面都取得了突破性的进展。 助力双11的重要网络技术 在稳定性的强化方面,在过去一年...

    文章 技术小能手 2018-01-05 4675浏览量

  • 解密:金融级海量数据库OceanBase

    OceanBase是一个高性能、高可用、高可扩展并且廉价的关系数据库。 为什么要做OceanBase? 互联网金融对数据库系统提出了更高的要求。传统数据库在扩展性、事务特性以及数据强一致等方面已经做了大量的工作,但是仍不足以达到现在互联网飞速发展的要求。 以支付宝业务为例,其业务体量在平时几乎是...

    文章 初商 2019-07-30 571浏览量

  • 每秒8.8亿次请求!让数据存得起,看得见 - 云原生多模数据库Lindorm 2020双十一总结

    一、引言 2020双十一顺利落下帷幕,这也是云原生多模数据库Lindorm参与的第九个双十一,其作为阿里经济体的核心数据库产品之一,全面支撑了淘宝、天猫、蚂蚁、菜鸟、阿里妈妈、高德、优酷、钉钉、大文娱等经济体业务的结构化、半结构化数据存储需求,今年更是为申通这样的公有云用户保驾护航。在今年的双十一...

    文章 stromal 2020-11-25 546浏览量

  • 基础设施助力双11(十):百万级物理和虚拟网络设备的智能化之路

    导言 后羿:阿里巴巴资深技术专家,参与8年双11大战,主导阿里“去IOE”战略落地,目前在推动阿里基础设施智能化。 后羿此次给大家分享的是双11的智能化网络实践,关于如何在网络智能领域通过数据手段极致地优化运营场景,在稳定性、成本、效率方面提升网络运营竞争力,给大家呈现了阿里巴巴在双11中主要依赖...

    文章 初商 2019-07-31 759浏览量

  • 一个系统,搞定闲鱼服务端复杂问题告警-定位-快速处理

    作者|吴白出品|阿里巴巴新零售淘系技术部 服务端问题排查对开发而言是家常便饭,问题并不可怕但要花大量时间去处理;另一方面故障的快速解决至关重要。 目前问题排查最大的障碍是什么呢?我们认为有以下几个原因: 大量的告警信息。 链路的复杂性。 排查过程繁复。 依赖经验。 实际工作中的排查思路并非无迹...

    文章 淘系技术 2019-08-29 2466浏览量

  • IoT+Tablestore快速构建智能售货机应用

    一、 背景介绍         近年来,物联网(IoT)技术发生了巨大的变化。NB-IoT、LoRa等技术的产生解决了网络覆盖、设备功耗成本问题;尤其是最近5G技术的商用,意味着支持海量设备连接进行高质量数据通讯即将有坚实的基础设施支持。在过去的二十年,人的各种活动如社交、购物等产生了海量的数据。...

    文章 butingbutingbuting 2019-07-15 1284浏览量

  • 零距离接触阿里云时序时空数据库TSDB

    概述 最近,Amazon新推出了完全托管的时间序列数据库Timestream,可见,各大厂商对未来时间序列数据库的重视与日俱增。阿里云TSDB是阿里巴巴集团数据库事业部研发的一款高性能分布式时序时空数据库,在即将过去的2018年,我们对TSDB进行了多次的系统架构改进,引入了倒排索引、无限时间线支...

    文章 焦先 2018-12-14 7772浏览量

  • 谈谈互联网后端基础设施

    纵观整个互联网技术体系再结合公司的目前状况,个人认为必不可少或者非常关键的后端基础技术/设施如下图所示: Api网关 业务应用和后端基础框架 缓存、数据库、搜索引擎、消息队列 文件存储 统一认证中心 单点登录系统 统一配置中心 服务治理框架 统一日志服务 数据基础设施 故障监控 这里的...

    文章 jurassic_1 2016-12-09 4927浏览量

  • 如何解决生产环境 Flink 应用的技术难题?

    大数据时代,数据已成为国家基础性战略资源。如何挖掘数据无穷潜力,将算力推至极致,是整个社会面临的难题。 Apache Flink 作为业界公认的领先的大数据计算引擎,不仅仅局限于做流处理,而是一套兼具流、批、机器学习等多种计算功能的大数据引擎。从2015年承载搜索和推荐实时化开始,近年来 Flin...

    文章 阿里云实时计算Flink 2020-12-17 421浏览量

1 2 3 4 ... 8 >

云产品推荐

阿里云大学 云服务器ECS com域名 网站域名whois查询 开发者平台 小程序定制 小程序开发 国内短信套餐包 开发者技术与产品 云数据库 图像识别 开发者问答 阿里云建站 阿里云备案 云市场 万网 阿里云帮助文档 免费套餐 开发者工具 企业信息查询 小程序开发制作 视频内容分析 企业网站制作 视频集锦 代理记账服务 企业建站模板