• 关于

    实时执行系统常见问题及解决方法

    的搜索结果
  • 有赞实时任务优化:Flink Checkpoint 异常解析与应用实践

    作者:沈磊(有赞大数据) 有赞实时任务主要以 Flink 为主,为了保证实时任务的容错恢复以及停止重启时的状态恢复,几乎所有的实时任务都会开启 Checkpoint 或者触发 Savepoint 进行状态保存。由于 Savepoint 底层原理的实现和 Checkpoint 几乎一致,本文结合 F...

    文章 阿里云实时计算Flink 2020-03-11 949浏览量

  • 有赞实时任务优化:Flink Checkpoint 异常解析与应用实践

    作者:沈磊(有赞大数据) 有赞实时任务主要以 Flink 为主,为了保证实时任务的容错恢复以及停止重启时的状态恢复,几乎所有的实时任务都会开启 Checkpoint 或者触发 Savepoint 进行状态保存。由于 Savepoint 底层原理的实现和 Checkpoint 几乎一致,本文结合 F...

    文章 阿里云实时计算Flink 2020-03-11 570浏览量

  • Apache Flink 在同程艺龙实时计算平台的研发与应用实践

    本文主要介绍 Apache Flink 在同程艺龙的应用实践,从当前同程艺龙实时计算平台现状、建设过程、易用性提升、稳定性优化四方面分享了同城艺龙实时计算平台的建设经验,供大家参考。 1.背景介绍 在 2015 年初,为了能够采集到用户在 PC,APP 等平台上的行为轨迹,我们开始开发实时应用。那...

    文章 阿里云实时计算Flink 2019-09-10 904浏览量

  • Apache Flink 在同程艺龙实时计算平台的研发与应用实践

    本文主要介绍 Apache Flink 在同程艺龙的应用实践,从当前同程艺龙实时计算平台现状、建设过程、易用性提升、稳定性优化四方面分享了同城艺龙实时计算平台的建设经验,供大家参考。 1.背景介绍 在 2015 年初,为了能够采集到用户在 PC,APP 等平台上的行为轨迹,我们开始开发实时应用。那...

    文章 阿里云实时计算Flink 2019-09-11 2174浏览量

  • 『StabilityGuide』| 10+位阿里技术专家共同发起稳定性知识库开源项目

    我们穿过山和大海,也见过人山人海。我们见过各类故障,也排过千雷万险。这一次,不如我们一起,开启稳定性的探索之旅。让无法解决的问题少一点点,让世界的确定性多一点点。 无论是前端业务的开发者,还是后端架构的开发者,都会遇到业务稳定性的难题。但稳定性的话题涉及之广、之深,很难通过一两篇文章道清原委。因此...

    文章 中间件小哥 2019-08-02 5212浏览量

  • 带你读《企业数据湖》之二:数据湖概念概览

    点击这里查看第一章:数据导论 点击这里查看第三章:Lambda架构:一种数据湖实现模式 第2章数据湖概念概览 数据湖概念的诞生,源自企业面临的一些挑战,如数据应该以何种方式处理和存储。最开始,企业对种类庞杂的应用程序的管理都经历了一个比较自然的演化周期。最开始的时候,每个应用程序会产生、存储大量数...

    文章 云迹九州 2019-10-19 1033浏览量

  • 专治数仓疑难杂症!美团点评 Flink 实时数仓应用经验分享

    整理 | 青渊(Flink 社区志愿者)校对 | 青雉(Flink 社区志愿者)作者 | 黄伟伦@美团点评 摘要:本文根据 Apache Flink 系列直播整理而成,由美团点评数据系统研发工程师黄伟伦老师分享。主要内容如下: 实时数仓建设目的 如何建立实时数仓 仓库质量保证 Tips:点击...

    文章 阿里云实时计算Flink 2020-07-04 808浏览量

  • 数据中台建设方法论实践之技术选型

    数据中台解决方案包含:数据中台建设方法论、相关技术体系和工具、数据体系等几大部分构成,前文介绍了数据建设方法论中的数据仓库建设部分,本文将介绍具体构建数仓的相关技术。大数据技术肇始于Google,涉及到的相关技术包含数据采集交换技术,面向ETL的计算技术,面向数据查询分析的计算技术。本文主要介绍面...

    文章 悠朝 2020-03-09 909浏览量

  • 阿里云数据库CloudDBA智慧解决数据库性能优化和问题诊断难题

    背景 我要申请CloudDBA免费体验     阿里云数据库为何推出CloudDBA?问题诊断(trouble shooting) 和 性能优化(performance tunning) 一直都是数据库领域的专业问题,需要资深DBA的专业技能才能胜任解决,但这样的人才是稀缺的,无法及时满足...

    文章 rds-pd 2017-09-25 13552浏览量

  • 10大常见的安全漏洞!你知道吗?

    众所周知,黑客入侵、网络攻击以及其他数字化安全漏洞从来都有百害而无一利。一个行业的烦恼可能是另一个行业的噩梦——如果你读过 Veracode 的《软件安全报告声明,卷6》,就会知道大多数安全漏洞在某些特定行业更为频繁。 1. 代码质量问题 这个问题排在第一是有理由的。根据 Veracode 的研...

    文章 oneapm_official 2016-03-04 1632浏览量

  • 重启大法好!线上常见问题排查手册

    一 线上常见问题定位 常见问题 1:CPU 利用率高 CPU 使用率是衡量系统繁忙程度的重要指标,一般情况下单纯的 CPU 高并没有问题,它代表系统正在不断的处理我们的任务,但是如果 CPU 过高,导致任务处理不过来,从而引起 load 高,这个是非常危险需要关注的。 CPU 使用率的安全值没有...

    文章 好好、学习 2020-04-27 5259浏览量

  • Hyper-V Server虚拟机快照(检查点)

    Windows Server 2012/R2 通过使用微软Volume Copy Service 技术,可对Hyper-V 上运行的虚拟机制作实时快照,快照内容为虚拟机的状态、数据、硬件配置。每一部虚拟机最多可以制作50 份快照。 快照主要用于测试对现有虚拟机环境的改动,在必要的时候,作为返回之前...

    文章 技术小胖子 2017-11-10 869浏览量

  • Hyper-V Server虚拟机快照(检查点)

    Windows Server 2012/R2 通过使用微软Volume Copy Service 技术,可对Hyper-V 上运行的虚拟机制作实时快照,快照内容为虚拟机的状态、数据、硬件配置。每一部虚拟机最多可以制作50 份快照。 快照主要用于测试对现有虚拟机环境的改动,在必要的时候,作为返回之前...

    文章 技术小胖子 2017-11-11 663浏览量

  • Flink SQL 1.11 新功能与最佳实践

    作者:伍翀(云邪),Apache Flink PMC member,阿里巴巴技术专家整理:陈婧敏(清樾) 本文整理自 Apache Flink PMC,阿里巴巴技术专家伍翀(云邪)的分享,旨在帮助用户快速了解新版本 Table & SQL 在 Connectivity 和 Simplici...

    文章 阿里云实时计算Flink 2020-09-08 2655浏览量

  • 网易云音乐基于 Flink + Kafka 的实时数仓建设实践

    简介:本文由网易云音乐实时计算平台研发工程师岳猛分享,主要从以下四个部分将为大家介绍 Flink + Kafka 在网易云音乐的应用实战: 背景 Flink + Kafka 平台化设计 Kafka 在实时数仓中的应用 问题 & 改进 直播回放:https://developer.ali...

    文章 阿里云实时计算Flink 2020-11-02 5878浏览量

  • 微服务--分布式事务的实现方法及替代方案

    这两天正在研究微服务架构中分布式事务的处理方案, 做一个小小的总结, 作为备忘. 如有错误, 欢迎指正! 概念澄清 事务补偿机制: 在事务链中的任何一个正向事务操作, 都必须存在一个完全符合回滚规则的可逆事务. CAP理论: CAP(Consistency, Availability, Pa...

    文章 潘天涯 2018-04-25 965浏览量

  • 《实用软件架构:从系统环境到软件部署 》——第1章 案例研究1.1 业务问题

    本节书摘来自华章出版社《实用软件架构:从系统环境到软件部署》一书中的第1章,第1.1节,作者:[印]蒂拉克·米特拉(Tilak Mitra)著,爱飞翔 译,更多章节内容可以访问云栖社区“华章计算机”公众号查看。 第1章 案 例 研 究 我这个人专门解决难题,有什么事尽管拿来问! 生活脱离了环...

    文章 华章计算机 2017-05-02 887浏览量

  • 揭秘阿里云WAF背后神秘的AI智能防御体系

    背景 应用安全领域,各类攻击长久以来都危害着互联网上的应用,在web应用安全风险中,各类注入、跨站等攻击仍然占据着较前的位置。WAF(Web应用防火墙)正是为防御和阻断这类攻击而存在,也正是这些针对Web应用的安全威胁促使了WAF这个产品的不断发展和进化。同时,各种机器学习算法和模型也被不断提出和...

    文章 云安全专家 2019-10-28 8825浏览量

  • 中原银行 Arthas 实践之路

    Arthas 是一款 Java应用开源诊断工具,由于其强大的问题排查及诊断能力,自其开源以来广受开发者的关注和使用,多次登顶 GitHub Trending,并得到国内多家技术媒体的推荐分享。 一. 定制化功能改造 Arthas 可以通过简单的命令交互模式,接入运行的 JVM,快速定位和诊断线上程...

    文章 创业头条-吴松 2020-07-28 107浏览量

  • 数据科学中“专业化”意味着什么

    我作为一个数据科学家的经历跟我在书本和博客上所读到的根本不一样。我曾读到过为数字超级新星公司工作的数据科学家,他们听上去像是英雄,可以写出自动化(近乎有感知能力的)算法并不断地大量获取认知结果。我也读到过像百战天龙那样的数据科学家黑客,他们可以通过将他们周围有的任意原始材料拼凑出数据产品来拯救世界...

    文章 小旋风柴进 2017-05-02 895浏览量

  • Redis实战之入门进阶到精通

    本章主要内容 Redis 与其他软件的相同之处和不同之处 Redis 的用法 使用 Python 示例代码与 Redis 进行简单的互动 使用 Redis 解决实际问题 以下知识点解析来自于《Redis实战》文档其中的一部分!由于不影响观看,只选取了其中的一部分来展示。如果你也对这份 PD...

    文章 有故事的程序员 2020-12-10 334浏览量

  • 基于 Flink 构建 CEP 引擎的挑战和实践

    作者:韩鹏@奇安信 背景及现状 奇安信集团作为一家网络安全公司,专门为政府、企业,教育、金融等机构和组织提供企业级网络安全技术、产品和服务,奇安信的 NGSOC 产品的核心引擎是一个 CEP 引擎,用于实时检测网络攻击,其技术演进过程如下图所示。 2015 年开始使用基于 Esper 的 CEP...

    文章 阿里云实时计算Flink 2020-01-10 629浏览量

  • 基于 Flink 构建 CEP 引擎的挑战和实践

    作者:韩鹏@奇安信 背景及现状 奇安信集团作为一家网络安全公司,专门为政府、企业,教育、金融等机构和组织提供企业级网络安全技术、产品和服务,奇安信的 NGSOC 产品的核心引擎是一个 CEP 引擎,用于实时检测网络攻击,其技术演进过程如下图所示。 2015 年开始使用基于 Esper 的 CEP...

    文章 阿里云实时计算Flink 2020-01-16 5159浏览量

  • 通过DTS将RDS的数据实时同步至DataHub

    准备工作 创建一个数据库和表,您可以选择使用阿里云的RDS数据库,也可以在本地服务器上自建数据库。本案例以华东1区的RDS MySQL数据库为例,数据库表的名称为datav_test,字段及数据如下图所示。 登录阿里云Datahub控制台,选择华东1,单击创建Project,创建一个Datahu...

    文章 阿里云文档 2018-09-29 2646浏览量

  • 收藏!一张图帮你快速建立大数据知识体系

    前言 最早提出“大数据”时代到来的是全球知名咨询公司麦肯锡,麦肯锡称:“数据,已经渗透到当今每一个行业和业务职能领域,成为重要的生产因素。人们对于海量数据的挖掘和运用,预示着新一波生产率增长和消费者盈余浪潮的到来。”数据,让一切有迹可循,让一切有源可溯。我们每天都在产生数据,创造大数据和使用大数据...

    文章 茶什i 2020-06-11 9451浏览量

  • 《循序渐进学Spark》一第1章

    本节书摘来自华章出版社《循序渐进学Spark》一书中的第1章,第1.1节,作者   小象学院 杨 磊 更多章节内容可以访问云栖社区“华章计算机”公众号查看。  第1章 Spark架构与集群环境 本章首先介绍Spark大数据处理框架的基本概念,然后介绍Spark生态系统的主要组成部分,包括Spar...

    文章 华章计算机 2017-05-02 2210浏览量

  • 带你读《Flink原理、实战与性能优化》之一:Apache Flink介绍

    大数据技术丛书点击查看第二章点击查看第三章Flink原理、实战与性能优化 张利兵 著第1章 Apache Flink介绍本章对Apache Flink从多个方面进行介绍,让读者对Flink这项分布式处理技术能够有初步的了解。1.1节主要介绍了Flink的由来及其发展历史,帮助读者从历史的角度了解...

    文章 温柔的养猫人 2019-11-01 4519浏览量

  • Hyper-v Server检查点(虚拟机快照)

    Hyper-v Server检查点(虚拟机快照) 不知道大家有没有想到过,如果你能及时地返回到以前的某个时间点,然后看看当时你的虚拟机是怎么样的?比如说,在生产环境中的Windows Server安装Update产品补丁之前,你的虚拟机是怎样的?或者,由于在SQL update语句中遗漏了wher...

    文章 科技小先锋 2017-11-14 1421浏览量

  • 塔说 | 区块链遇到数据库:相爱还是相杀?

    导读:如果你正在想要通过部署区块链来改善数据库流程,请记住你不需要进行彻底替换,下面让我们看看如何做? 当部署区块链时,无需替换现有数据库和相关流程,而是应该整合和改进。 虽然区块链技术可改善DevOps以及脱媒的数字化及基于共识的信息传播,但试点系统的支持者也尝尝建议应丢弃现有流程和传统数据库...

    文章 云栖号 2018-04-18 2492浏览量

  • 【技术干货】想要高效采集数据到阿里云Elasticsearch,这些方法你知道吗?

    简介: 本文全面介绍了Elastic Beats、Logstash、语言客户端以及Kibana开发者工具的特性及数据采集到阿里云Elasticsearch(简称ES)服务中的解决方案。帮助您全面了解原理并选择符合自身业务特色的数据采集方案。 本文字数:2763阅读时间:预计10分钟 以下是正文 ...

    文章 工程师甲 2019-10-31 1803浏览量

1 2 3 4 ... 15 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT