分布式算法如何看配置

  • Mahout驾驭hadoop之详解

    众所周知,Mahout是基于Hadoop分布式系统的,要想看懂Mahout的源码,首先得明白mahout是如何使用hadoop的! 首先,在我的<<Hadoop运行原理详解>>一篇中,详细介绍了hadoop的运行机制,这里就不多说了!下面我就以Kmeans聚类算法为例,讲讲...

    文章 skyme 2016-05-05 1010浏览量

  • 【C#|.NET】跳出一致性Hash算法 打造更高效的分布式缓存

    背景   谈到分布式缓存,大家首先想到的是memcached。确实memcached是目前最流行的方案之一。不过很多互联网公司不用memcached,例如新蛋。为什么不选择memcached呢,命中率?热插拔?还是性能。这里先不放结论,用事实来说话。 算法篇 -1.除余法     如果你手上有老...

    文章 科技小能手 2017-11-12 937浏览量

  • 一致性哈希算法(consistent hashing) .

    一致性Hash算法背景   一致性哈希算法在1997年由麻省理工学院的Karger等人在解决分布式Cache中提出的,设计目标是为了解决因特网中的热点(Hot spot)问题,初衷和CARP十分类似。一致性哈希修正了CARP使用的简单哈希算法带来的问题,使得DHT可以在P2P环境中真正得到应用。 ...

    文章 技术小牛人 2017-11-13 881浏览量

  • 阿里云试用中心,为您提供0门槛上云实践机会!

    0元试用32+款产品,最高免费12个月!拨打95187-1,咨询专业上云建议!

    广告

  • 蚂蚁金服服务注册中心数据分片和同步方案详解 | SOFARegistry 解析

    SOFAStack (Scalable Open Financial  Architecture Stack) 是蚂蚁金服自主研发的金融级分布式架构,包含了构建金融级云原生架构所需的各个组件,是在金融场景里锤炼出来的最佳实践。 SOFARegistry 是蚂蚁金服开源的具有承载海量服务注册和订阅...

    文章 花肉酱 2019-10-11 432浏览量

  • ZooKeeper分布式架构实战系列(01):ZooKeeper概念、功能、架构、与使用场景和面试题

    ZooKeeper是分布式协调服务,开源分布式架构领域不可或缺的技术组件,使用非常的广泛,我们在一些分布式架构的文章中经常看到。比如常见的Hadoop大数据架构,阿里巴巴的Dubbo分布式架构,Spring Cloud微服务架构等都有涉及。BAT名企面试中也是经常作为考点。重要性不言而喻,作为互联...

    文章 徐雷frank 2019-03-31 1983浏览量

  • 一文读懂分布式架构知识体系(内含超全核心知识大图)

    点击图片或戳我查看详情和投简历作者 | 晓土  阿里巴巴高级工程师 姊妹篇阅读推荐:《云原生时代,分布式系统设计必备知识图谱(内含22个知识点)》 导读:本文力求从分布式基础理论、架构设计模式、工程应用、部署运维、业界方案这几大方面,介绍基于 MSA(微服务架构)的分布式知识体系大纲,从而对 SO...

    文章 阿里巴巴云原生小助手 2019-10-16 4719浏览量

  • 如何解决大规模机器学习的三大痛点?

    2017年,阿里巴巴推荐算法团队和计算平台PAI团队合作打造了eXtreme Parameter Sever (XPS) 机器学习平台,其中eXtreme寓意为“追求极致”, 体现我们希望设计具有极致性能和效果的机器学习平台的愿景。XPS平台已经广泛全流量运行在手机淘宝的猜你喜欢、生活研究所、飞猪...

    文章 技术小能手 2017-12-14 4217浏览量

  • ACM 无缝支持 Spring 全栈

    ACM 产品介绍 应用配置管理 ACM(Application ConfigurationManagement)前身为淘宝内部配置中心Diamond,是一款在分布式架构环境中对应用配置进行“集中管理”和“动态推送”的配置中心产品。利用ACM,您可以在微服务、DevOps、大数据等场景下极大减轻配置...

    文章 配置管理 2019-01-18 14858浏览量

  • 【云周刊】第189期:在云栖大会上服务了12万人的“刷脸”技术,将如何赋能零售行业?

    本期头条 在云栖大会上服务了12万人的“刷脸”技术,将如何赋能零售行业? 你的脸就是通行证!今年的云栖大会对AI刷脸技术做了最好的阐释。在线完成实名认证的嘉宾,在通过云栖大会人脸闸机时,只需对着摄像头,刷一下脸,就能无感通过。据悉,在9月19日至22日的2018年云栖大会期间,共有12万人通过刷...

    文章 场景研读 2018-09-28 2459浏览量

  • 关于负载均衡的一切:总结与思考

    古人云,不患寡而患不均。 在计算机的世界,这就是大家耳熟能详的负载均衡(load balancing),所谓负载均衡,就是说如果一组计算机节点(或者一组进程)提供相同的(同质的)服务,那么对服务的请求就应该均匀的分摊到这些节点上。负载均衡的前提一定是“provide a single Inter...

    文章 java填坑路 2018-10-07 766浏览量

  • 说说分布式文件存储系统

          分布式文件存储系统主要被分为三种类型:分布式文件存储、块存储、对象存储。这三种存储系统都有着自己的特点和适用场景。 其中分布式文件存储和对象存储是联系非常紧密的,大多对象存储系统都是在分布式文件系统基础上实现的。 很幸运自己在过去的工作中对这三种系统都有过或深或浅的接触,因此有了想...

    文章 boxti 2017-08-02 2056浏览量

  • 基于Spark的机器学习实践 (二) - 初识MLlib

    1 MLlib概述 1.1 MLlib 介绍 ◆ 是基于Spark core的机器学习库,具有Spark的优点 ◆ 底层计算经过优化,比常规编码效率往往要高 ◆ 实现了多种机器学习算法,可以进行模型训练及预测 1.2 Spark MLlib实现的算法 ◆ 逻辑回归 朴素贝叶斯 线性回归 SVM 决...

    文章 javaedge 2019-04-09 1664浏览量

  • 由"缓存"到"Memcached分布式缓存"

    【学习背景】 在ITOO4.0的时候,自己听了师哥师姐的技术分享,从那开始,Memcached 就留在脑海中了。现在,我们开始了ITOO4.1,在师父的指导下,开始缓存的学习。自然地,我第一时刻想到的便是Memcached。 【学习阶梯】 在正是进入Memcached之前,自己先了解了些关于“...

    文章 leanring 2016-02-11 1203浏览量

  • 如何落地一个算法?

    一 背景 在云计算环境下,虚拟机的负载均衡、自动伸缩、绿色节能以及宿主机升级等需求使得我们需要利用虚拟机(VM)迁移技术,尤其是虚拟机热迁移技术,对于down time(停机时间)要求比较高,停机时间越短,客户业务中断时间就越短,影响就越小。如果能够根据VM的历史工作负载预测其未来的工作负载趋势...

    文章 茶什i 2020-06-18 381浏览量

  • 【独家】一文读懂非关系型数据库(NoSQL)

    前言 NoSQL(NoSQL = Not Only SQL ),意即"不仅仅是SQL"。 现代计算系统每天在网络上都会产生庞大的数据量。这些数据有很大一部分是由关系型数据库管理系统(RDBMSs)来处理,其严谨成熟的数学理论基础使得数据建模和应用程序编程更加简单。 但随着信息化的浪潮和...

    文章 行者武松 2017-05-01 1684浏览量

  • 《Redis官方文档》用Redis构建分布式锁

    原文链接  译者:yy-leo   校对:方腾飞(红体标记重点) 用Redis构建分布式锁 在不同进程需要互斥地访问共享资源时,分布式锁是一种非常有用的技术手段。 有很多三方库和文章描述如何用Redis实现一个分布式锁管理器,但是这些库实现的方式差别很大,而且很多简单的实现其实只需采用稍微增加一点...

    文章 ali清英 2016-04-01 1850浏览量

  • 如何借助配置中心ACM加速企业IT服务快速迭代

    在5月29日召开的第二届研发效能嘉年华中,云效邀请了阿里云产品团队的伏羿和来自阿里巴巴中间件技术部的彦林带来了“如何借助配置中心ACM加速企业IT服务快速迭代”的主题分享。 分别对配置中心ACM和ACM技术进行了讲解,并且对ACM的主要应用场景进行了介绍,并进行了Demo环节。精彩视频请点击PPT...

    文章 smile小太阳 2018-06-01 1857浏览量

  • 微服务与配置中心:别让您的微服务被配置管理“绊”了一跤

    微服务与配置中心:别让您的微服务被配置管理“绊”了一跤 本文是阿里巴巴高级技术专家坤宇在2017年QCon微服务专题演讲中关于微服务与配置中心的演讲实录的文字版,演讲视频可以参见 演讲视频 阿里巴巴集团早在2007年进行从IOE集中式应用架构升级为互联网分布式服务化架构的时候,就意识到在分布式环...

    文章 配置管理 2018-02-12 6221浏览量

  • 由"缓存"到"Memcached分布式缓存"

    【学习背景】 在ITOO4.0的时候,自己听了师哥师姐的技术分享,从那开始,Memcached 就留在脑海中了。现在,我们开始了ITOO4.1,在师父的指导下,开始缓存的学习。自然地,我第一时刻想到的便是Memcached。 【学习阶梯】 在正是进入Memcached之前,自己先了解了些关于“...

    文章 you一年 2016-02-11 1200浏览量

  • 《区块链原理、设计与应用》一2.3 关键问题和挑战

    2.3 关键问题和挑战 从技术角度讲,区块链所涉及的领域比较繁杂,包括分布式系统、存储、密码学、心理学、经济学、博弈论、控制论、网络协议等,这也就意味着大量工程实践上的技术挑战。下面列出了目前业内关注较多的一些技术话题。1.?抗抵赖与隐私保护怎么防止交易记录被篡改?怎么证明交易双方的身份?怎么保护...

    文章 华章计算机 2017-09-11 1427浏览量

  • 《大规模Java平台虚拟化与调优》——2.3 Active-Active架构与现代化数据平台

    本节书摘来自华章计算机《大规模Java平台虚拟化与调优》一书中的第2章,第2.3节,作者:(美)Emad BenjaminLiang) 更多章节内容可以访问云栖社区“华章计算机”公众号查看。 2.3 Active-Active架构与现代化数据平台 图2-25展现了位于两个数据中心中的4个act...

    文章 华章计算机 2017-07-03 903浏览量

  • 招募有志青年

    0 初衷 现在有很多的技术交流群,很多的群都是这样的: 1 经常扯淡 2 很多伸手党 3 一些道听途说的结论都拿来作为自己的观点 4 技术交流的深度不够 花费了很多时间在群上,但是收获缺并不多。而想找到一个有深度的交流群,而不是一个问答群。希望如下: 1 针对一个话题,感兴趣的人都能够进行深...

    文章 乒乓狂魔 2016-12-04 3088浏览量

  • 【玩转数据系列一】人口普查统计案例

    产品地址:https://data.aliyun.com/product/learn?spm=a21gt.99266.416540.102.OwEfx2 一、背景 感谢大家关注玩转数据系列文章,我们希望通过在阿里云机器学习平台上提供demo数据并搭建相关的实验流程的方式来帮助大家学习如何通过算法来...

    文章 傲海 2016-06-01 12429浏览量

  • 云原生必备知识: etcd

    所属技术领域: 云原生 |名词定义| etcd is a distributed, consistent key-value store for shared configuration and service discovery, with a focus on being: Secure: a...

    文章 保持可爱mmm 2020-02-20 188浏览量

  • 表格存储如何实现高可靠和高可用

    系列文章 表格存储如何实现高可靠和高可用表格存储如何实现跨区域的容灾 前言 本文会介绍一款分布式NoSQL如何实现数据高可靠和服务高可用,这是一款云上的NoSQL服务,叫做表格存储。对于分布式NoSQL,大家可能会想到很多名字,比如HBase、Cassandra,AWS的DynamoDB等,这类N...

    文章 亦征 2017-11-08 7172浏览量

  • Tengine TLSv1.3最佳实践

    TLSv1.3 概述 背景 SSL 是1994年网景公司提出,主要解决安全传输从0到1的过程,真正被大规模应用是1996年发布的 SSLv3,经过了几年的发展,在1999年被IETF纳入标准化,改名叫 TLS,其实本质是一样的,TLSv1.0 跟 SSLv3 没有太多差异,TLSv1.1 做了一些...

    文章 金九 2018-08-31 4576浏览量

  • 【机器学习PAI实践二】人口普查统计

    产品地址:https://data.aliyun.com/product/learn?spm=a21gt.99266.416540.102.OwEfx2 一、背景 感谢大家关注玩转数据系列文章,我们希望通过在阿里云机器学习平台上提供demo数据并搭建相关的实验流程的方式来帮助大家学习如何通...

    文章 傲海 2016-12-30 1068浏览量

  • 从分布式一致性到共识机制(二)Raft算法

    春秋五霸说开 春秋五霸,是指东周春秋时期相继称霸主的五个诸侯,“霸”,意为霸主,即是诸侯之领袖。典型的比如齐桓公,晋文公,春秋时期诸侯国的称霸,与今天要讨论的Raft算法很像。 一、更加直观的Raft算法 Raft 适用于一个管理日志一致性的协议,相比于 Paxos 协议 Raft 更易于理解和...

    文章 邴越 2018-04-16 2431浏览量

  • 为了让 AI 更快地融入生活,AutoML 提供了哪些帮助?

    小叽导读:AI 应用在我们的生活中已经无处不在了。可是作为知识与人力密集型的 AI 应用,如果要获得更好的效果,目前仍然需要重度依赖算法科学家。如何帮助 AI 应用快速落地?减少对于人的依赖,AutoML 已经成为炙手可热的话题。今天,为你揭秘阿里巴巴人工智能实验室在 AutoML 方面做了哪些探...

    文章 初商 2019-08-16 714浏览量

  • 架构选型必读:集中式与分布式全方位优劣对比

    应用现状比较 由于历史原因,集中式架构多用于传统银行、电信等行业。主机资源集中在大型主机或小型机上。集中式架构下,包括操作系统、中间件、数据库等“基础软件” 均为闭源商用系统。集中式架构的典型案例是 IOE(IBM、 Oracle、EMC)提供的计算设备、数据库技术和存储设备共同组成的系统。 近年...

    文章 技术小能手 2018-06-15 2821浏览量

1 2 3 4 ... 31 >

云产品推荐

阿里云大学 云服务器ECS com域名 网站域名whois查询 开发者平台 小程序定制 小程序开发 国内短信套餐包 开发者技术与产品 云数据库 图像识别 开发者问答 阿里云建站 阿里云备案 云市场 万网 阿里云帮助文档 免费套餐 开发者工具 企业信息查询 小程序开发制作 视频内容分析 企业网站制作 视频集锦 代理记账服务 企业建站模板