• 关于

    作业请求有什么用

    的搜索结果
  • Flink 必知必会经典课程3:Flink Runtime Architecture

    作者:朱翥(长耕)本文由 Apache Flink PMC 及 Committer 朱翥分享,主要介绍 Flink Runtime 的底层架构。本篇文章包含四部分:Runtime总览作业的控制中心—Jobmaster任务的运行容器—TaskExacutor资源的管理中心—ResourceManag...

    文章 阿里云实时计算Flink 2021-03-17 660浏览量

  • 【大数据技术干货】阿里云伏羲(fuxi)调度器FuxiMaster功能简介(四) NodeLabel调度

    免费开通大数据服务:https://www.aliyun.com/product/odps 转载自xingbao 各位好,这是介绍阿里云伏羲(fuxi)调度器系列文章的第四篇,今天主要介绍NoedLabel的调度策略一、FuxiMaster简介 FuxiMaster和Yarn非常相似,定位于分布式...

    文章 隐林 2016-11-24 4080浏览量

  • 初步掌握Yarn的架构及原理(转)

    1、YARN 是什么? 从业界使用分布式系统的变化趋势和 hadoop 框架的长远发展来看,MapReduce的 JobTracker/TaskTracker 机制需要大规模的调整来修复它在可扩展性,内存消耗,线程模型,可靠性和性能上的缺陷。在过去的几年中,hadoop 开发团队做了一些 bug ...

    文章 developerguy 2016-05-16 994浏览量

  • 《计算机网络:自顶向下方法(原书第6版)》一课后习题和问题

    本节书摘来华章计算机《计算机网络:自顶向下方法(原书第6版)》一书中的第2章 ,(美)James F.Kurose Keith W.Ross 著 陈 鸣 译 更多章节内容可以访问云栖社区“华章计算机”公众号查看。 课后习题和问题 复习题2.1节R1.列出5种非专用的因特网应用及它们所使用的应用层协...

    文章 华章计算机 2017-07-03 13901浏览量

  • Hulu大规模容器调度系统Capos

    Hulu是美国领先的互联网专业视频服务平台,目前在美国拥有超过2000万付费用户。Hulu总部位于美国洛杉矶,北京办公室是仅次于总部的第二大研发中心,也是从Hulu成立伊始就具有重要战略地位的分支办公室,独立负责播放器开发,搜索和推荐,广告精准投放,大规模用户数据处理,视频内容基因分析,人脸识别,...

    文章 技术小能手 2018-07-22 1498浏览量

  • 都是default惹的祸-yarn调度(一)-fair调度器drf调度策略作业不执行问题的调查和源码分析

    本文主要记录了fair调度器drf调度策略作业不执行问题的解决过程,重点介绍了调查方法和调查过程细节,希望对大家了解fair调度器有所帮助 。 除本人知乎专栏外,转载请联系我。 一.问题背景 yarn的调度器有capacity和fair两种,之间的区别可以自行谷歌。fair调度器(附录1)是...

    文章 鸿初 2018-05-11 2800浏览量

  • 怎么实现微服务的实时性能分析?

    当开发者从微服务架构获得敏捷时,观测整个系统的运行情况成为最大的痛点。在本文,IBM Research 展示了如何用 Spark 对微服务性能进行分析和统计,由 Cloudinsight 工程师编译整理。 引言 作为一种灵活性极强的构架风格,时下微服务在各种开发项目中日益普及。在这种架构中,应用...

    文章 行者武松 2017-08-01 957浏览量

  • 全方位对比Mesos、Omega和Borg

    谷歌最近公布了他们基础设施系统王冠上的宝石之一:Borg,集群调度系统。这促使我重新阅读了Mesos和Omega论文,它们与Borg的功能类似。我觉得对比下这三个系统一定会非常有趣。Mesos两级调度的突破性理念得到了认可,Omega使用类似数据库的技术有所改进,Borg可以看作是对所有这些思想的...

    文章 六翁 2016-04-11 1574浏览量

  • ASP.NET Core 中间件 - ASP.NET Core 基础教程 - 简单教程,简单编程

    原文:ASP.NET Core 中间件 - ASP.NET Core 基础教程 - 简单教程,简单编程 ASP.NET Core 中间件 上一章节中,我们我们有讲到 Startup 类中的 Configure() 方法用于定义请求管道中的中间件 ASP.NET Core 中的中间件控制...

    文章 杰克.陈 2018-09-29 933浏览量

  • 一篇文章教你如何用 Redis 轻松实现秒杀系统的构思

    用 Redis 轻松实现秒杀系统的构思 前言: 秒杀系统的架构设计 秒杀系统,是典型的短时大量突发访问类问题。对这类问题,有三种优化性能的思路: **1. 写入内存而不是写入硬盘、 异步处理而不是同步处理、 分布式处理** 用上这三招,不论秒杀时负载多大,都能轻松应对。更好的是,Redis能...

    文章 Java周某人 2019-07-29 2269浏览量

  • 整理一些计算机基础知识!

    1、网络层次划分 为了使不同计算机厂家生产的计算机能够相互通信,以便在更大的范围内建立计算机网络,国际标准化组织(ISO)在1978年提出了“开放系统互联参考模型”,即著名的OSI/RM模型(Open System Interconnection/Reference Model)。它将计算机网络体...

    文章 技术小能手 2018-08-01 859浏览量

  • 整理一些计算机基础知识!

    本文来自云栖社区官方钉群“Python技术进阶”,了解相关信息可以关注“Python技术进阶”。 1、网络层次划分 为了使不同计算机厂家生产的计算机能够相互通信,以便在更大的范围内建立计算机网络,国际标准化组织(ISO)在1978年提出了“开放系统互联参考模型”,即著名的OSI/RM模型(Open...

    文章 一码平川MACHEL 2019-02-26 9698浏览量

  • 《深入理解Hadoop(原书第2版)》——2.4 Hadoop 2.0

    本节书摘来自华章计算机《深入理解Hadoop(原书第2版)》一书中的第2章,第2.4节,作者 [美]萨米尔·瓦德卡(Sameer Wadkar),马杜·西德林埃(Madhu Siddalingaiah),杰森·文纳(Jason Venner),译 于博,冯傲风,更多章节内容可以访问云栖社区“华章计...

    文章 华章计算机 2017-05-02 1527浏览量

  • Hangfire 使用笔记

    “巨人们”的地址 Hangfire Mysql: https://github.com/arnoldasgudas/Hangfire.MySqlStorage 在获取set表数据的sql语句有bug   Hangfire Console: https://github.com/pieceofsu...

    文章 鱼东东 2017-02-19 1137浏览量

  • 详解 Flink 指标、监控与告警

    整理:李培殿 & 杨伟海(Flink 社区志愿者)校对:杨伟海(Flink 社区志愿者) 摘要:本文由美团点评研发工程师孙梦瑶分享,主要介绍 Flink 的指标监控和报警的内容,分为以下四部分: 监控告警链路:基于美团点评实时计算平台的实践 常用的监控项:哪些指标可以高效地衡量作业 指...

    文章 阿里云实时计算Flink 2020-07-23 1264浏览量

  • Apache Flink 零基础入门教程(六):状态管理及容错机制

    作者:孙梦瑶整理:韩非 本文主要分享内容如下: 状态管理的基本概念; 状态的类型与使用示例; 容错机制与故障恢复; 一.状态管理的基本概念 1.什么是状态 首先举一个无状态计算的例子:消费延迟计算。假设现在有一个消息队列,消息队列中有一个生产者持续往消费队列写入消息,多个消费者分别从消息队列...

    文章 Ververica 2019-08-05 857浏览量

  • Apache Flink 零基础入门教程(六):状态管理及容错机制

    **作者:孙梦瑶整理:韩非** 本文主要分享内容如下: 状态管理的基本概念; 状态的类型与使用示例; 容错机制与故障恢复; 一.状态管理的基本概念 1.什么是状态 首先举一个无状态计算的例子:消费延迟计算。假设现在有一个消息队列,消息队列中有一个生产者持续往消费队列写入消息,多个消费者分别从...

    文章 阿里云实时计算Flink 2019-08-05 4764浏览量

  • 监控系统哪家强?eBay 在监控系统上的实践应用!

    来源 | eBay Unified Monitoring Platform 翻译 | 顾欣怡 Sherlock.IO 是 eBay 现有的监控平台,每天要处理上百亿条日志、事件和指标。Flink Streaming job 实时处理系统用于处理其中的日志和事件。本文将结合监控系统 Flink 的现...

    文章 阿里云实时计算Flink 2019-08-16 1355浏览量

  • 杨孟哲:云平台安全访问控制的设计与实现揭秘

    10月25日,阿里云课堂第二期在上海开课,“云安全架构设计与实践”主题分享在众多朋友的期待下精彩上演,现场观众再次爆满。本次活动中,李雪峰(花名:虚舟)和杨孟哲(花名:孟哲)两位安全专家为大家献上了精彩演讲,并在OpenSpace环节与观众展开讨论,积极互动。应广大用户要求,我们将云课堂讲师现场分...

    文章 阿里云柳璃 2014-10-28 2093浏览量

  • Oozie coordinator 作业自定义的配置的一些方法

    Oozie的coordinator有啥用? The Oozie Coordinator system allows the user to define and execute recurrent and interdependent workflow jobs (data application...

    文章 技术mix呢 2017-09-14 1146浏览量

  • Oozie 使用ActiveMQ实现 JMS通知

    一,介绍 提交给Oozie的作业,作业在运行过程中的状态会发生变化如:执行成功了,或者失败了……Oozie能够监控这些作业状态的改变并且将这些消息发送到JMS消息服务器。这里,使用ActiveMQ作为JMS消息服务器。 Oozie supports publishing notifications...

    文章 技术mix呢 2017-10-12 1214浏览量

  • [IT]当你在浏览器地址栏输入一个URL后回车,将会发生的事情?

    原文:What really happens when you navigate to a URL 作为一个软件开发者,你一定会对网络应用如何工作有一个完整的层次化的认知,同样这里也包括这些应用所用到的技术:像浏览器,HTTP,HTML,网络服务器,需求处理等等。 本文将更深入的研究当你输入一个网...

    文章 sjf0115 2014-12-29 1636浏览量

  • 带你玩转Logview: MaxCompute Logview参数详解和问题排查

    摘要:Logview是MaxCompute Job提交后查看和Debug任务的工具。通过Logview可看到一个Job的运行状态、运行结果以及运行细节和每个步骤的进度。当Job提交到MaxCompute后,会生成Logview的链接,用户可以直接在浏览器上打开Logview链接,进入查看Job的信...

    文章 午夜漫步者 2018-09-03 2466浏览量

  • 4. SQL Server数据库状态监控 - 作业状态

    原文:4. SQL Server数据库状态监控 - 作业状态 有很多地方可以设置定时任务,比如:Windows的计划任务,Linux下的crontab,各种开发工具里的timer组件。SQL Server也有它的定时任务组件 SQL Server Agent,基于它可以方便的部署各种数据库相关的作...

    文章 杰克.陈 2014-09-06 738浏览量

  • 走近伏羲,谈5000节点集群调度与性能优化

    5K项目是飞天平台的里程碑,系统在规模、性能和容错方面都得到了飞跃式的发展,达到世界领先水平。伏羲作为飞天平台的分布式调度系统,能支持单集群5000节点,并发运行10000作业,30分钟完成100TB数据Terasort,性能是当时Yahoo ! 在Sort Benchmark上世界纪录的两倍。 ...

    文章 yq传送门 2016-12-18 4199浏览量

  • 频繁插入(insert)的业务,用什么存储引擎更合适? | 数据库系列

    继续回答星球水友提问: 沈老师,MyISAM只支持表锁,但网上文章却说,在并发插入量比较大的时候,比较适合使用MyISAM,这矛盾吗? 这个问题,涉及MySQL表锁的一些细节,借着这个问题,系统性说下表锁的“所以然”。画外音:网上不少文章只说结论,不说为什么,容易让人蒙圈。 MySQL表锁知识系统...

    文章 云起君 2020-02-07 188浏览量

  • 常见的几种操作系统进程调度算法

    什么是进程调度算法??? 进程调度算法:根据系统的资源分配策略所规定的资源分配算法。 一、先来先服务和短作业(进程)优先调度算法 1.先来先服务调度算法     先来先服务(FCFS)调度算法是一种最简单的调度算法,该算法既可用于作业调度,也可用于进程调度。当在作业调度中采用该算法时,每次调度...

    文章 科技小能手 2017-11-12 1220浏览量

  • 盒子科技刘恒:聚合支付系统演讲

    大家好,我是来自盒子科技研发部支付线刘恒,目前主要是负责公司的一个聚合支付系统的研发工作。今天主要是讲一下我们聚合支付系统从2016年年初到现在技术演变。 首先我会从那三个方向,第一是聚合支付的介绍,聚合支付在我们公司它承担一个什么样的地位,第二是在我们公司有什么样的使用场景。第三是从公司开始做...

    文章 技术小能手 2018-05-25 1607浏览量

  • 从一道百度面试题到分析输入url到页面返回的过程(或者查询返回过程)

    最近看到一个题目,是当在浏览器中输入一个url后回车,后台发生了什么?比如输入url后,你看到了百度的首页,那么这一切是如何发生的呢? 这个问题之前、最近、我想以后肯定还会被问到,或者问到这样的题目,如果在百度框里输入查询的字符串开始,是怎么返回你需要的东西呢。 那这什么个过程呢(这个问题我在之后...

    文章 atlas2015 2013-09-06 2320浏览量

  • 历时1年,上百万行代码!首次揭秘手淘全链路性能优化(上)

    作者|手淘用户体验提升项目组 出品|阿里巴巴新零售淘系技术部 导读:自阿里在11年提出 All in 无线之后,手淘慢慢成长为承载业务最多,体量巨大的航母级移动端应用。与之相应的,手淘离轻量,快速,敏捷这些关键词却越来越远,启动慢,使用卡逐步成为用户使用过程中的主要体验问题。为此,手淘的技术团队启...

    文章 KB小秘书 2019-07-24 1706浏览量

1 2 3 4 ... 12 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT