• 关于

    导致worker使用率

    的搜索结果
  • 闲里偷忙的CPU

    有一类比较特殊的CPU使用率问题,这类问题的特点是,系统平均CPU使用率很低,但是个别CPU的使用率非常高。今天借助这个真实案例,来跟大家探讨一下这类问题的解题思路。 四平八稳的kworker进程 如下图,客户提交问题的时候描述,kworker这个进程会把单个CPU几乎跑满。看到问题截图,我的第...

    文章 声东 2018-03-02 7683浏览量

  • Flink 使用大状态时的一点优化

    作者:fanrui 通过本文你能 get 到以下几点: Flink 内使用大状态时,该如何配置? 常见的负载均衡策略有哪些? Flink 源码中在选择 RocksDB 状态磁盘时,存在的问题。 一些解决方案,并分析了每种方案的利弊。 一、为什么要优化?(优化背景) Flink 支持多种 Sta...

    文章 阿里云实时计算Flink 2020-07-04 827浏览量

  • 10倍性能提升!DLA SQL推出基于Alluxio的数据湖分析加速功能

    背景 在数据上云的大背景下,随着网络和存储硬件能力的提升,存储计算分离逐渐成为了大数据处理的一大趋势。相比于存储和计算耦合的架构,存储计算分离可以带来许多好处,例如允许独立扩展计算和存储、提高资源的利用率、提高业务的灵活性等等。特别是,借助云上的基础设施,存储可以选择便宜的对象存储OSS,计算资源...

    文章 云原生数据湖分析DLA 2021-01-18 4378浏览量

  • OSS 性能测试经验总结

    OSS 性能测试经验总结 1、CPU 相关 1.1 进程使用CPU 我们通常都会习惯性的用top 去查看进程CPU 使用率,但是通常会进入以下误区系统CPU idle很高CPU不是性能瓶颈 通常我们在看进程CPU使用率的时候用的是top,默认是按照CPU使用排序的,而且这时候看到的进程CPU使用情...

    文章 简单爱0107 2016-07-04 8559浏览量

  • Mars 如何分布式地执行

    先前,我们已经介绍过 Mars 是什么。如今 Mars 已在 Github 开源并对内上线试用,本文将介绍 Mars 已实现的分布式执行架构,欢迎大家提出意见。 架构 Mars 提供了一套分布式执行 Tensor 的库。该库使用 mars.actors 实现的 Actor 模型编写,包含 Sche...

    文章 继盛 2019-01-08 2470浏览量

  • 不要在nodejs中阻塞event loop

    简介 我们知道event loop是nodejs中事件处理的基础,event loop中主要运行的初始化和callback事件。除了event loop之外,nodejs中还有Worker Pool用来处理一些耗时的操作,比如I/O操作。 nodejs高效运行的秘诀就是使用异步IO从而可以使用少量...

    文章 公众号:程序那些事 2021-02-02 25浏览量

  • 进击的Kubernetes调度系统(三):支持批任务的Binpack Scheduling

    作者:王庆璨 张凯 进击的Kubernetes调度系统(一):Scheduling Framework进击的Kubernetes调度系统(二):支持批任务的Coscheduling/Gang scheduling进击的Kubernetes调度系统(三):支持批任务的Binpack Scheduli...

    文章 ZhangKai 2020-08-13 815浏览量

  • 进击的Kubernetes调度系统(三):支持批任务的Binpack Scheduling

    作者: 王庆璨:阿里云技术专家,专注于大规模集群资源管理和调度。Kubernetes社区成员,主要参与Kube-scheduler社区开发。目前负责阿里云容器服务ACK资源调度和云原生AI相关工作。 张凯:阿里云高级技术专家,从事容器服务ACK 和云原生AI解决方案的研发和客户支持。拥有10余年...

    文章 中间件小哥 2020-08-17 846浏览量

  • 36. Python 多进程

    多进程概念: 进程是程序在计算机上的一次执行活动。当你运行一个程序,你就启动了一个进程。显然,程序是死的(静态的),进程是活的(动态的)。进程可以分为系统进程和用户进程。凡是用于完成操作系统的各种功能的进程就是系统进程,它们就是处于运行状态下的操作系统本身;用户进程就不必我多讲了吧,所有由你启动的...

    文章 科技小能手 2017-11-12 642浏览量

  • 【巡检问题分析与最佳实践】RDS SQL Server CPU高问题

    往期分享RDS MySQLRDS MySQL 实例空间问题RDS MySQL 内存使用问题RDS MySQL 活跃线程数高问题RDS MySQL 慢SQL问题RDS MySQL 实例IO高问题RDS MySQL 小版本升级最佳实践RDS PostgreSQLRDS PostgreSQL 实例IO高...

    文章 数据库知多少 2021-03-15 87浏览量

  • 分布式深度学习“神器”ElasticDL如何同时提升集群利用率和研发效率

    ElasticDLhttps://github.com/sql-machine-learning/elasticdl ElasticDL 的首要设计意图是简化分布式编程。它允许用户只提供用 TensorFlow 2.0 API 描述的模型,而不需要用户写分布式训练过程代码。用户的模型定义只要能在本...

    文章 华蒙 2020-07-14 1676浏览量

  • presto-多租户资源管理

    presto资源管理介绍 oomKiller presto会监控sql整个生命周期资源的使用(mem,cpu),worker也会周期性汇报自身mem使用状况,当worker的free memory降为0及以下时,触发集群oom逻辑。 正常场景下,ClusterMemoryManger也会周期性...

    文章 陈江@阿里 2020-04-02 1291浏览量

  • Spark技术内幕:Executor分配详解

    当用户应用new SparkContext后,集群就会为在Worker上分配executor,那么这个过程是什么呢?本文以Standalone的Cluster为例,详细的阐述这个过程。序列图如下: 1. SparkContext创建TaskScheduler和DAG Scheduler Spar...

    文章 anzhsoft 2014-10-05 2735浏览量

  • 深度解析 | 基于DAG的分布式任务调度平台:Maat

    背景 什么是Maat? Maat是一个基于开源项目Airflow的流程调度系统,它支持用户自定义地组装流程节点,流程可以在用户指定的时间触发(支持crontab格式),或由用户手动触发。 Maat的所有节点分布式地运行在Hippo上,由Drogo调度。用户可以创建自己的调度节点和执行节点,达到资源...

    文章 技术小能手 2018-08-16 8775浏览量

  • RDS SQL Server - 专题分享 - 巧用执行计划缓存之数据类型隐式转换

    摘要 SQL Server数据库基表数据类型隐式转换,会导致Index Scan或者Clustered Index Scan的问题,这篇文章分享如何巧用执行计划缓存来发现数据类型隐式转换的查询语句,从而可以有针对性的优化查询,解决高CPU使用率的问题。 问题引入 数据类型转化是导致SQL Serv...

    文章 风移 2017-06-20 1697浏览量

  • apache工作模式介绍

    apache作为现今web服务器用的最广泛也是最稳定的开源服务器软件,其工作模式有许多中,目前主要有两种模式:prefork模式和worker模式 。   prefork模式:这个多路处理模块(MPM)实现了一个非线程型的、预派生的web服务器,它的工作式类似于Apache 1.3。它适合于没有线...

    文章 技术小甜 2017-11-08 777浏览量

  • 进击的Kubernetes调度系统(二):支持批任务的Coscheduling/Gang scheduling

    作者:王庆璨 张凯 进击的Kubernetes调度系统(一):Scheduling Framework进击的Kubernetes调度系统(二):支持批任务的Coscheduling/Gang scheduling 前言 首先我们来了解一下什么是Coscheduling和Gang schedulin...

    文章 ZhangKai 2020-06-29 1872浏览量

  • 进击的 Kubernetes 调度系统(二):支持批任务的 Coscheduling/Gang scheduling

    作者 | 王庆璨(阿里云技术专家)、张凯(阿里云高级技术专家) 导读:阿里云容器服务团队结合多年 Kubernetes 产品与客户支持经验,对 Kube-scheduler 进行了大量优化和扩展,逐步使其在不同场景下依然能稳定、高效地调度各种类型的复杂工作负载。《进击的 Kubernetes 调度...

    文章 阿里巴巴云原生小助手 2020-07-15 430浏览量

  • Apache 三种工作模式介绍

    三种MPM介绍                                                                               Apache 2.X  支持插入式并行处理模块,称为多路处理模块(MPM)。在编译apache时必须选择也只能选择一个MPM,...

    文章 科技小能手 2017-11-12 690浏览量

  • eBCC性能分析最佳实践(1) - 线上lstat, vfs_fstatat 开销高情景分析

    Guide: eBCC性能分析最佳实践(0) - 开启性能分析新篇章 eBCC性能分析最佳实践(1) - 线上lstat, vfs_fstatat 开销高情景分析 eBCC性能分析最佳实践(2) - 一个简单的eBCC分析网络函数的latency 敬请期待... 0. Intro BCC是基于...

    文章 muahao 2019-04-11 886浏览量

  • 门道多:一次MaxCompute PS任务的问题排查之旅

    关于PS是什么,可以参考一下以下两个介绍:基于参数服务器的大规模在线学习算法和Parameter Server。更多问题可以咨询玄乐。下面主要总结一下这回遇到一个PS任务跑不起来的问题排查过程。不想看过程的直接看最后一点总结就行。一 为什么要分享一个问题排查过程        作为初级用户来说只要...

    文章 载思 2017-06-05 1476浏览量

  • 高可用 kubernetes 集群部署实践

    前言 Kubernetes(k8s) 凭借着其优良的架构,灵活的扩展能力,丰富的应用编排模型,成为了容器编排领域的事实标准。越来越多的企业拥抱这一趋势,选择 k8s 作为容器化应用的基础设施,逐渐将自己的核心服务迁移到 k8s 之上。 可用性对基础设施而言至关重要。各大云计算厂商纷纷推出了高可用、...

    文章 吴波bruce_wu 2019-06-10 10378浏览量

  • 解析阿里云分布式调度系统伏羲

    云计算并不是无中生有的概念,它是将普通的单台PC的计算能力通过分布式调度的软件连接起来。其最核心的问题是如何把100台、1千台、1万台机器高效的组织起来,灵活的进行任务调度和管理,从而使得可以像使用台式机一样使用云计算。在云计算中,最核心的模块是分布式调度,它好比于云计算的中央处理器。目前,业界已...

    文章 场景研读 2017-03-21 8635浏览量

  • 如何识别SQL Server中的CPU瓶颈

    原文: 如何识别SQL Server中的CPU瓶颈 原文出自: http://www.mssqltips.com/sqlservertip/2316/how-to-identify-sql-server-cpu-bottlenecks/   ...

    文章 杰克.陈 2015-03-06 860浏览量

  • F1 Query: Declarative Querying at Scale

    作者:陶克路,花名敌珐,阿里巴巴技术专家。Apache Pulsar 等开源软件 Contributor。技术领域包括大数据和云原生技术栈,目前致力于构建大数据领域业界领先的 APM 产品。 原文链接 距离 Google 的上一篇 F1 论文,也就是 F1: A Distributed SQL ...

    文章 开源大数据EMR 2020-01-13 237浏览量

  • 如何将深度学习训练速度提升一百倍?PAISoar 来了

    阿里妹导读:得力于数据规模增长、神经网络结构的演进和计算能力的增强,深度学习的图像处理、语音识别等领域取得了飞速发展。随着训练数据规模和模型复杂度的不断增大,如何充分利用分布式集群的计算资源加快训练速度,提升业务支持能力成为用户非常关注的问题。今天,我们就来分享阿里工程师的实践成果:将深度学习模型...

    文章 技术小能手 2019-06-12 22644浏览量

  • Apache Prefork、Worker和Event三种MPM分析

    三种MPM介绍                                                                                     Apache 2.X  支持插入式并行处理模块,称为多路处理模块(MPM)。在编译apache时必须选择也只能选择...

    文章 虫师2016 2016-04-28 1869浏览量

  • Nginx性能优化配置(三)

    Nginx性能优化配置(三)  本文主要介绍Nginx的性能优化配置,文章的层次架构如图所示。 1.Nginx的工作进程优化  1.worker_processes     作用:worker进程的数量;通常应该等于小于当前主机的cpu的物理核心数;auto表示根据CPU的物理核心数自动调整工作...

    文章 技术小阿哥 2017-11-27 535浏览量

  • Microsoft SQL Server 2005 提供了一些工具来监控数据库

    --WL 09-07-03/*Microsoft SQL Server 2005 提供了一些工具来监控数据库。方法之一是动态管理视图。动态管理视图 (DMV) 和动态管理函数 (DMF) 返回的服务器状态信息可用于监控服务器实例的运行状况、诊断问题和优化性能。 常规服务器动态管理对象包括: dm_...

    文章 嗯哼9925 2017-11-14 795浏览量

  • 监控 SQL Server 的运行状况

    Microsoft SQL Server 2005 提供了一些工具来监控数据库。方法之一是动态管理视图。动态管理视图 (DMV) 和动态管理函数 (DMF) 返回的服务器状态信息可用于监控服务器实例的运行状况、诊断问题和优化性能。 常规服务器动态管理对象包括: dm_db_*:数据库和数据库对...

    文章 嗯哼9925 2017-11-14 817浏览量

1 2 3 4 ... 10 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT