• 关于

    调度模型会出现哪些问题

    的搜索结果
  • PAI分布式机器学习平台编程模型演进之路

    在云栖计算之旅第5期—大数据与人工智能大会上,来自阿里云大数据事业部的九丰分享了《PAI分布式机器学习平台编程模型演进之路》。他主要介绍了在集团中使用机器学习解决大数据问题时如何通过编程模型的演进逐步解决业务上的痛点。其中,他只要分享了MapReduce、MPI、Parameter Server编...

    文章 场景研读 2017-06-20 8703浏览量

  • 并发处理中的问题以及解决这些问题的并发模型

    单机并发是集群并发的基础。本文主要将单机并发问题,和解决这些单机并发问题的解决模型。本文只讨论单机并发,集群并发将在我的后续其他文章中讨论,所以本文将单机并发简化称为并发,省去单机二字。 1. 并发问题 什么并发问题,举个例子,一个服务器,有大量的链接上来,每个链接同时发请求。另外一种情况,只有一...

    文章 cadem 2017-04-26 2146浏览量

  • 调度系统设计精要

    作者 | Draveness 导读:本文作者写这篇文章前前后后大概 2 个月的时间,全文大概 2w 字,建议收藏后阅读或者通过电脑阅读。 调度是一个非常广泛的概念,很多领域都会使用调度这个术语,在计算机科学中,调度就是一种将任务(Work)分配给资源的方法。任务可能是虚拟的计算任务,例如线程、进程...

    文章 阿里巴巴云原生小助手 2020-02-12 84浏览量

  • 阿里云试用中心,为您提供0门槛上云实践机会!

    100+款试用云产品,最长免费试用12个月!拨打95187-1,咨询专业上云建议!

    广告

  • 调度系统设计精要

    作者 | Draveness 导读:本文作者写这篇文章前前后后大概 2 个月的时间,全文大概 2w 字,建议收藏后阅读或者通过电脑阅读。 调度是一个非常广泛的概念,很多领域都会使用调度这个术语,在计算机科学中,调度就是一种将任务(Work)分配给资源的方法。任务可能是虚拟的计算任务,例如线程、进程...

    文章 阿里巴巴云原生小助手 2020-02-12 78浏览量

  • 调度系统设计精要

    作者 | Draveness 导读:本文作者写这篇文章前前后后大概 2 个月的时间,全文大概 2w 字,建议收藏后阅读或者通过电脑阅读。 调度是一个非常广泛的概念,很多领域都会使用调度这个术语,在计算机科学中,调度就是一种将任务(Work)分配给资源的方法。任务可能是虚拟的计算任务,例如线程、进程...

    文章 阿里巴巴云原生小助手 2020-02-12 148浏览量

  • 调度系统设计精要

    作者 | Draveness 导读:本文作者写这篇文章前前后后大概 2 个月的时间,全文大概 2w 字,建议收藏后阅读或者通过电脑阅读。 调度是一个非常广泛的概念,很多领域都会使用调度这个术语,在计算机科学中,调度就是一种将任务(Work)分配给资源的方法。任务可能是虚拟的计算任务,例如线程、进程...

    文章 阿里巴巴云原生小助手 2020-02-12 483浏览量

  • 宜信微服务任务调度平台建设实践

    内容来源:宜信技术学院第4期技术沙龙-线上直播|宜信微服务任务调度平台建设实践 主讲人:宜信高级架构师&开发平台负责人 梁鑫 导读:如今,无论是互联网应用还是企业级应用,都充斥着大量的批处理任务,常常需要一些任务调度系统帮助我们解决问题。随着微服务化架构的逐步演进,单体架构逐渐演变为分布...

    文章 宜信技术学院 2019-10-22 1764浏览量

  • CNCF 宣布 TUF 毕业 | 云原生生态周报 Vol. 33

    作者 | 孙健波、汪萌海、陈有坤、李鹏 业界要闻 CNCF 宣布 TUF 毕业 CNCF 宣布 TUF(The update Framework)项目正式毕业,成为继 Kubernetes、Premetheus、Envoy、CoreDNS、containerd、Fluentd Jaeger 以及...

    文章 阿里巴巴云原生小助手 2019-12-26 306浏览量

  • 数仓系列 | 深入解读 Flink 资源管理机制

    作者:宋辛童(五藏)整理:王文杰(Flink 社区志愿者) 摘要:本文根据 Apache Flink 系列直播整理而成,由阿里巴巴高级开发工程师宋辛童分享。文章主要从基本概念、当前机制与策略、未来发展方向等三个方面帮助开发者深入理解 Flink 的资源管理机制。 基本概念 当前机制与策略 未来...

    文章 阿里云实时计算Flink 2020-06-17 553浏览量

  • 调度、模型、同步与任务——阿里云大数据数仓建设性能优化方案

    摘要:对于阿里云大数据数仓建设性能优化而言,主要可以从调度优化、模型优化、同步优化以及任务优化这四个方面着手。其实,对于性能优化而言,最终还是会归结到“资源”之上,所以资源是否足够,分配是否合理也是我们在进行性能优化时必须考虑的关键所在。以下内容根据演讲视频以及PPT整理而成。 本次演讲视频分享,...

    文章 萌萌怪兽 2018-07-28 3291浏览量

  • 应用容器化优化指南 - Golang篇

    前言 随着容器技术的兴起,越来越多不同类型的应用开始使用容器的方式进行交付。Golang作为服务器端非常热门的一门语言同时也是容器技术的主要编写语言备受关注。那么将一个Golang应用进行容器化的时候,需要注意哪些事情,在出现问题时该如何进行调优和诊断呢? 先谈谈Golang本身的设计 Golan...

    文章 莫源 2018-10-29 2914浏览量

  • 通篇干货!纵观 PolarDB-X 并行计算框架

    作者:玄弟 七锋PolarDB-X 面向 HTAP 的混合执行器 一文详细说明了PolarDB-X执行器设计的初衷,其初衷一直是致力于为PolarDB-X注入并行计算的能力,兼顾TP和AP场景,逐渐为其打造一款具备TB级数据处理能力的数据库。...

    文章 louth 2021-03-22 211浏览量

  • 应用容器化优化指南 - Golang篇

    前言 随着容器技术的兴起,越来越多不同类型的应用开始使用容器的方式进行交付。Golang作为服务器端非常热门的一门语言同时也是容器技术的主要编写语言备受关注。那么将一个Golang应用进行容器化的时候,需要注意哪些事情,在出现问题时该如何进行调优和诊断呢? 先谈谈Golang本身的设计 Golan...

    文章 技术小能手 2018-10-31 1537浏览量

  • 求你了,再问你Java内存模型的时候别再给我讲堆栈方法区了…

    GitHub 4.1k Star 的Java工程师成神之路 ,不来了解一下吗? GitHub 4.1k Star 的Java工程师成神之路 ,真的不来了解一下吗? GitHub 4.1k Star 的Java工程师成神之路 ,真的确定不来了解一下吗? 最近,面试过很多Java中高级开发,问过很多次...

    文章 Hollis 2019-07-02 5096浏览量

  • 阿里云马劲:保证云产品持续拥有稳定性的实践和思考

    对所有的技术人员来说,业务可靠性提升是一个系统工程,涉及网络管理、IDC管理、服务器管理、交付管理、变更管理、故障管理、监控管理、预案管理、根因分析、容量规划、容灾演练、标准化建设、集成测试、泛操作管理、权限管理、数据安全管理等方方面面,随着先进技术的应用、业务云化、微服务化等,业务架构变得更加复...

    文章 云攻略小攻 2018-12-06 15475浏览量

  • 你们看尽世界杯的快乐忧伤,他们负责稳定流畅

    当球迷们通过网络随时随地以各种姿势享受世界杯的时候,阿里云的工程师们在背后做了哪些不为人知的努力? 当球迷们在电脑或手机上看球的时候,有一群他们看不到的人正在默默地为他们加班。这群人就是阿里云的工程师们。中国网友观看的2018年俄罗斯世界杯直播,有70%的流量跑在阿里云上:优酷世界杯直播由阿里...

    文章 樰篱 2018-07-09 1456浏览量

  • 业界 | 每天1800万单,1小时送到,美团外卖如何优化配送模型?

    在4月13号刚结束的O'Reilly和Intel AI Conference上,美团点评的配送算法策略架构师郝井华博士详细介绍了美团外卖即时配送业务的重难点,让我们来看看大数据文摘整理的演讲精华。 郝井华,美团点评研究 美团外卖是全球最大的外卖平台,以及全球最大的即时配送平台。其共有骑手60万,...

    文章 技术小能手 2018-04-16 2157浏览量

  • 独家揭秘:阿里巴巴Zeus资源调度系统

    本文主要概述阿里巴巴Zeus资源调度系统的背景和实现思路。本文主线:问题、解决方案、依赖基础知识、工程实践、目标、经验分享。立足企业真实问题、常规解决策略,引出依赖的容器技术、实践方案,所有这些落实到工程实践,要解决那些问题、实现哪些目标、技术大趋势的影响。最后给出阿里巴巴的实践经验。本序列文章并...

    文章 初商 2019-07-30 1888浏览量

  • 深度解析 | 基于DAG的分布式任务调度平台:Maat

    背景 什么是Maat? Maat是一个基于开源项目Airflow的流程调度系统,它支持用户自定义地组装流程节点,流程可以在用户指定的时间触发(支持crontab格式),或由用户手动触发。 Maat的所有节点分布式地运行在Hippo上,由Drogo调度。用户可以创建自己的调度节点和执行节点,达到资源...

    文章 技术小能手 2018-08-16 8824浏览量

  • Serverless 选型:深度解读 Serverless 架构及平台选择

    近两年来,Serverless 概念在开发者中交流的越来越多,主题分享呈现爆发趋势,如在云原生领域颇具影响力 KubeCon&CloudNativeCon 会议中,关于 Serverless 的主题,2018 年有 20 个,到 2019 年增长至 35 个。 在 Serverless 产...

    文章 云栖TechDay-闫瑾 2020-06-28 81浏览量

  • Serverless 选型:深度解读 Serverless 架构及平台选择

    作者 | 悟鹏  阿里巴巴技术专家 导读:本文尝试以日常开发流程为起点,分析开发者在每个阶段要面对的问题,然后组合解决方案,提炼面向 Serverless 的开发模型,并与业界提出的 Serverless 产品形态做对应,为开发者采用 Serverless 架构和服务提供参考。 近两年来,Serv...

    文章 阿里巴巴云原生小助手 2020-05-15 900浏览量

  • 超线程处理器使用前:检查系统需求

    从观察CPU的关联设置到处理器可用性的检查,在使用管理程序的超线程处理器之前,需要考虑哪些事情。 超线程提供了性能优势,在管理程序中使用超线程时,超线程利用未使用的处理器资源,使处理器保持忙碌的状态,完成更多的任务。然而,管理程序中超线程的成功或者失败,取决于管理程序或操作系统是否可以探测到超线程...

    文章 寒凝雪 2017-07-10 875浏览量

  • 独家揭秘:阿里巴巴Zeus资源调度系统

    本文主要概述阿里巴巴Zeus资源调度系统的背景和实现思路。本文主线:问题、解决方案、依赖基础知识、工程实践、目标、经验分享。立足企业真实问题、常规解决策略,引出依赖的容器技术、实践方案,所有这些落实到工程实践,要解决那些问题、实现哪些目标、技术大趋势的影响。最后给出阿里巴巴的实践经验。本序列文章并...

    文章 kevinliali 2016-04-29 10236浏览量

  • Serverless 服务选型

    综述 近两年来,Serverless 概念在开发者中交流的越来越多,实践、服务、产品层出不穷。Serverless 的主题分享呈现爆发趋势,如在云原生领域颇具影响力的 KubeCon&CloudNativeCon 会议中,关于 Serverless 的主题,2018 年有 20 个,到 2...

    文章 中间件小哥 2020-05-07 788浏览量

  • Serverless 服务选型

    综述 近两年来,Serverless 概念在开发者中交流的越来越多,实践、服务、产品层出不穷。Serverless 的主题分享呈现爆发趋势,如在云原生领域颇具影响力的 KubeCon&CloudNativeCon 会议中,关于 Serverless 的主题,2018 年有 20 个,到 2...

    文章 中间件小哥 2020-05-08 388浏览量

  • MaxCompute2.0助力众安保险快速成长

    摘要:2017云栖大会阿里云大数据计算服务(MaxCompute)专场,众安保险数据总监王超群带来MaxCompute助力众安保险方面的演讲。本文主要从MaxCompute优势开始谈起,进而谈及大数据能够为公司运营带来的好处,最后重点分析了众安保险的数据平台建设,包括任务调度、元数据和数据质量监控...

    文章 隐林 2017-10-25 3720浏览量

  • 高清视频下如何节省带宽?

    一 节省带宽成本的技术挑战 从实际业务场景出发,节省带宽成本这个命题,在技术上面临非常多的挑战。 第一,优酷服务的终端类型多,移动端有 Android,IPhone,IPad;PC 端有 Window 和 MAC,还有 Web 端,OTT 端等等。不同终端有不同特性,在处理机制上就会不同。即使同...

    文章 茶什i 2020-06-04 237浏览量

  • 磁盘 IO 和网络 IO 该如何评估、监控、性能定位和优化?

    生产中经常遇到一些IO延时长导致的系统吞吐量下降、响应时间慢等问题,例如交换机故障、网线老化导致的丢包重传;存储阵列条带宽度不足、缓存不足、QoS限制、RAID级别设置不当等引起的IO延时。 一、评估 IO 能力的前提 评估一个系统IO能力的前提是需要搞清楚这个系统的IO模型是怎么样的。那么IO模...

    文章 技术小能手 2018-09-11 3638浏览量

  • Hulu大规模容器调度系统Capos

    Hulu是美国领先的互联网专业视频服务平台,目前在美国拥有超过2000万付费用户。Hulu总部位于美国洛杉矶,北京办公室是仅次于总部的第二大研发中心,也是从Hulu成立伊始就具有重要战略地位的分支办公室,独立负责播放器开发,搜索和推荐,广告精准投放,大规模用户数据处理,视频内容基因分析,人脸识别,...

    文章 技术小能手 2018-07-22 1504浏览量

  • Uber:用司机手机做数据中心备份

    【编者的话】 Uber是一家总部位于旧金山的风险投资的创业公司和交通网络公司,以移动应用程序链接乘客和司机,提供租车及实时共乘的服务。在最近短短四年间,Uber的业务量已经惊人地增长了38倍,在这背后起到支撑作用的是公司强大的系统架构。其中一项非常杰出的工作是他们在处理系统故障时,包括当出现数据中...

    文章 小旋风柴进 2017-05-02 999浏览量

1 2 3 4 ... 17 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化