分布式数据系统出现问题怎么解决

  • 分布式一致性的想法

    背景 最近一直在思考,工作这么多年下遇到的分布式系统的一下问题,以及针对这些问题提供的解决方案。 借这个机会,顺便梳理清楚这块知识,希望同大家一起探讨下 常见一致性问题 下订单减库存 在我们做的电商系统中,会有这样的一个场景:用户下单购买某个商品,然后进行扣减商品库存的场景。 如果先下订单,然后...

    文章 曹林华 2017-11-27 1322浏览量

  • 互联网 Java 工程师进阶知识完全扫盲

    高并发架构 消息队列 为什么使用消息队列?消息队列有什么优点和缺点?Kafka、ActiveMQ、RabbitMQ、RocketMQ 都有什么优点和缺点? 如何保证消息队列的高可用? 如何保证消息不被重复消费?(如何保证消息消费时的幂等性) 如何保证消息的可靠性传输?(如何处理消息丢失的问题) 如...

    文章 java隋七哥 2018-12-07 1978浏览量

  • 68期:2015“双11”背后的关键技术专题

    云周刊 本周要点 查看更多 【盘点】2015“双11”背后的关键技术 回首这一年,盘点技术界的大事件必...

    文章 云栖徒骇 2016-02-24 2468浏览量

  • Quick BI 数据可视化分析平台

    2020年入选全球Gartner ABI魔力象限,为中国首个且唯一入选BI产品

    广告

  • 分布式大数据系统巧实现,全局数据调度管理不再难

    背景 看到这个题目,我们会有很多疑问:什么是分布式大数据系统中的全局数据管理?为什么要从全局对数据进行管理?这种对数据从全局进行分布和调度的策略是在什么样的背景下产生的?如果我们不解决全局数据管理的问题,分布式大数据系统中将会面临一些什么样的风险? 总的来说:基于大数据,云计算的需求,加快了分布式...

    文章 大数据史记 2017-05-18 4208浏览量

  • 分布式系统--Lease机制

    分布式系统的设计中会涉及到许多的协议、机制用来解决可靠性问题、数据一致性问题等,Quorum 机制就是其中的一种。我们通过分布式系统中的读写模型来简单介绍它。 分布式系统中的读写模型   分布式系统是由多个节点(指代一台服务器、存储设备等)构成,由于网络异常、宕机等节点并不能保证正常工作,特别是在...

    文章 技术小甜 2017-11-16 1007浏览量

  • POLARDB云数据库分布式存储引擎揭秘

    2017云栖大会POLARDB专场,阿里云资深技术专家曹伟带来POLARDB云数据库分布式存储引擎揭秘的演讲。本文主要从计算和存储分离的优势谈起,然后说明控制平面与数据平面分离,接着分享了划时代的技术,包括零拷贝、并行副本等,最后解释了面向数据库优化的智能存储。 以下是精彩内容整理:   计算和存...

    文章 场景研读 2017-10-27 3762浏览量

  • 蚂蚁金服资深总监韩鸿源:企业级数据库平台的持续与创新

    2019年11月19日,蚂蚁金服在北京举办“巅峰洞见·聚焦金融新技术”发布会,介绍2019双11支付宝背后的技术,并重磅发布全新OceanBase 2.2版本和SOFAStack双模微服务平台。我们将系列演讲整理并发布在 “蚂蚁金服科技” 公众号上,欢迎关注。 蚂蚁金服研究员韩鸿源在发布会分享了《...

    文章 缪克卢汉 2019-11-28 326浏览量

  • 如何高效排查系统故障?一分钱引发的系统设计“踩坑”案例

    阿里妹导读:阿里巴巴的电商业务十分复杂,一方面是市场多样化,业务多样化,另外是消费者,商家的影响面非常广,任何一个小故障都可能引发一些社会问题,所以阿里对产品的质量,对服务的连续性有严格的要求。阿里技术人员在日常的研发运维过程中,积累了丰富的实战经验。今天,阿里妹将为大家分享一个关于故障,排查,分...

    文章 技术小能手 2017-11-27 2773浏览量

  • 深度|蚂蚁金服分布式金融核心套件:金融核心系统变革助推器

    小蚂蚁说: 分布式金融核心套件是蚂蚁金服针对分布式核心系统全新推出的金融科技产品,该套件包含客户、产品、资产平台等多个应用组件,业界首创将融合核心业务能力组件与技术平台于一体,可有效解决金融机构应用研发效能、数据治理和运营、全域风控管理、技术架构升级等问题。 本文是对蚂蚁金服高级技术专家李玄的...

    文章 路飞到处飞 2018-10-18 2110浏览量

  • 蚂蚁金服资深总监韩鸿源:企业级数据库平台的持续与创新

    2019年11月19日,蚂蚁金服在北京举办“巅峰洞见·聚焦金融新技术”发布会,介绍2019双11支付宝背后的技术,并重磅发布全新OceanBase 2.2版本。欢迎持续关注~ 蚂蚁金服研究员韩鸿源在发布会分享了《企业级数据库平台的持续与创新》,以下为演讲实录: 在今天企业级的市场里,数据库是根...

    文章 荔子liqi 2019-12-03 1303浏览量

  • EDAS:快速搞定分布式应用

    本期分享嘉宾:滨雨 多年IT领域工作经验,先后在华为、阿里基础架构部担任软件工程师、项目经理。目前从事存储、cdn、视频、中间件等技术领域的支持,喜欢新技术,喜欢新挑战,喜欢钻研。 攻城狮:谁又动了我模块接口?谁又改了我模块逻辑??? 运维:有bug!模块之间的调用跟个蜘蛛网一样...

    文章 阿里云支持与服务 2017-03-10 6970浏览量

  • 分布式锁的几种实现方式~

    目前几乎很多大型网站及应用都是分布式部署的,分布式场景中的数据一致性问题一直是一个比较重要的话题。分布式的CAP理论告诉我们“任何一个分布式系统都无法同时满足一致性(Consistency)、可用性(Availability)和分区容错性(Partition tolerance),最多只能同时满足...

    文章 Hollis 2018-04-13 2209浏览量

  • 含PPT下载 | 李飞飞:如何看待数据库的未来?

    本文内容根据演讲嘉宾视频以及PPT整理而成,文末有直播全程的 PDF 下载链接。 视频地址:https://developer.aliyun.com/live/2031 本次分享将主要围绕以下四个方面展开: 云原生分布式数据库系统的发展历程 数据库系统架构的对比及趋势 云数据库技术高速发展的现...

    文章 开发者社区 2020-02-25 7128浏览量

  • 突破Java面试(44)-分布式事务解决方案

    0 Github 1 面试题 分布式事务了解吗?你们如何解决分布式事务问题的? 2 考点分析 只要聊到做了分布式系统,必问分布式事务,若你对分布式事务一无所知的话,确实很坑,起码得知道有哪些方案,一般怎么来做,每个方案的优缺点是什么。 现在面试,分布式系统成了标配,而分布式系统带来的分布式事务...

    文章 javaedge 2019-07-12 1694浏览量

  • 蚂蚁金服黑科技:SOFA DTX分布式事务,保障亿级资金操作一致性

    小蚂蚁说: SOFA ( Scalable Open Financial Architecture )是蚂蚁金服自主研发的金融级分布式中间件,包含了构建金融级云原生架构所需的各个组件,包括微服务研发框架,RPC 框架,服务注册中心,分布式定时任务,限流/熔断框架,动态配置推送,分布式链路追踪,M...

    文章 兔子酱 2018-05-23 4758浏览量

  • 支付系统如何进行分布式改造

    原创声明:本文系作者原创,谢绝个人、媒体、公众号或网站未经授权转载,违者追究其法律责任。 传统支付系统面临的挑战 随着近年来移动支付的兴起 ,如条码支付、声波支付、NFC 近场支付等,随之还产生了聚合支付把多种支付方式聚合在一起,方便人们的使用,移动支付已经渗透到我们生活的每一个角落,不带钱包出...

    文章 初商 2019-08-03 551浏览量

  • 大数据小视角4:小议Lambda 与 Kappa 架构,不可变数据的计算探索

    这个系列文章之前因为私事荒废了很久,继续更新~~之前与老大谈论架构时,老大和我聊了聊分布式数据处理之中的Lambda结构,之前在《Designing Data-Intensive Applications》这本书之中,作者 Martin Kleppmann也在文中涉及到了通过重...

    文章 happenlee 2018-08-08 2300浏览量

  • 五小时构建云原生电商平台 | KubeCon SOFAStack Workshop 详解

    本文根据 KubeCon China 2019 同场活动 SOFAStack Cloud Native Workshop 内容整理,文末包含文档、PPT 地址,欢迎试用和提出建议。 2019 年 6 月 25 日,在 KubeCon China 2019,全球知名开源组织云原生计算基金会 CNCF...

    文章 平生栗子 2019-06-27 3176浏览量

  • 阿里中间件(Aliware)双十一专题——“分布式事务中间件GTS(TXC)”

    一、 前言 什么是事务?大家最熟悉的莫过于数据库事务,一大堆SQL操作一个DB,要么同时成功、要么同时失败。(GTS支持ACID,特此公告,不再解释) 什么是分布式事务?一大堆SQL操作N个DB,或者一大堆服务操作1个或多个DB,要么同时成功、要么同时失败。 怎么保证事务?有一个解决办法是“两阶段...

    文章 中间件小哥 2016-12-08 11472浏览量

  • 五小时构建云原生电商平台 | KubeCon SOFAStack Workshop 详解

    本文根据 KubeCon China 2019 同场活动 SOFAStack Cloud Native Workshop 内容整理,文末包含文档、PPT 地址,欢迎试用和提出建议。 2019 年 6 月 25 日,在 KubeCon China 2019,全球知名开源组织云原生计算基金会 CNCF...

    文章 初商 2019-07-31 875浏览量

  • 五小时构建云原生电商平台 | KubeCon SOFAStack Workshop 详解

    本文根据 KubeCon China 2019 同场活动 SOFAStack Cloud Native Workshop 内容整理, 文末包含文档、PPT 地址,欢迎试用和提出建议。 2019 年 6 月 25 日,在 KubeCon China 2019,全球知名开源组织云原生计算基金会 CNC...

    文章 s潘潘 2019-06-27 978浏览量

  • 分布式领域架构师要掌握的技术

    分布式系统无疑是持久的热门话题,但其实如果不是一定有必要,强烈建议不要进入分布式领域,在集中式的情况下很多问题都会简单不少,技术人员千万不要因为外界火热的例如微服务,就把自己的产品的也去做改造,一定要仔细判断是否有必要,不要为了技术而技术,那么在必须分布式的情况下(访问量、存储量或开发人数),一个...

    文章 xiaoqb 2016-11-03 7876浏览量

  • 回顾过去看应用PaaS的Next

    作者:毕玄   文章来源:微信公众号HelloJava 和上周那篇回顾过去看IaaS的Next一样,这篇我将通过回顾我自己所经历的应用PaaS的发展,来找找应用PaaS发展的动力,从而更好的寻找创新方向。 PaaS是个非常广泛的词,这里主要还是说说应用PaaS,我对应用PaaS狭隘的理解为应用开发...

    文章 社区助手 2019-08-13 1085浏览量

  • 《大型网站系统与Java中间件》读书笔记(上)

    前言 只有光头才能变强。 文本已收录至我的GitHub仓库,欢迎Star:https://github.com/ZhongFuCheng3y/3y 这本书买了一段时间了,之前在杭州没带过去,现在读完第三章,来做做笔记 这本书前三章都在科普和回顾中间件/分布式的基础,讲得非常通俗易懂。在之前已...

    文章 java3y 2019-06-10 4812浏览量

  • 胡喜:从 BASIC 到 basic ,蚂蚁金服技术要解决两个基本的计算问题

    导读:5 月 6 日,蚂蚁金服副 CTO 胡喜在 2019 年 QCon 上做了《蚂蚁金服十五年技术架构演进之路》的演讲。借此机会,也和大家深入讨论了一下蚂蚁金服对金融科技未来的判断,并首次对外曝光了蚂蚁金服技术人才培训体系以及 BASIC College 项目。 主要观点 蚂蚁金服过去十五年...

    文章 平生栗子 2019-05-09 1728浏览量

  • 十五年了,蚂蚁为何执着攻坚这两个技术堡垒?

    阿里妹导读:近日,蚂蚁金服副CTO 胡喜应邀做了《蚂蚁金服十五年技术架构演进之路》的演讲,分享蚂蚁金服对金融科技未来的判断,并首次对外公开蚂蚁金服技术人才培训体系以及 BASIC College 项目。 主要观点: 蚂蚁金服过去十五年,通过技术重塑了支付和微贷业务。Blockchain (区块链...

    文章 技术小能手 2019-05-10 3159浏览量

  • 深度| 一篇文章为你解读SOFA-DTX 分布式事务的设计演进路线

    小蚂蚁说: 本文介绍了蚂蚁金服在分布式事务上,经过多年发展,服务于内外部大量不同业务,沉淀出的一整套包含TCC、FMT、XA模型的分布式事务解决方案。并且在持续对外输出的过程中,进一步打磨产品体验,适应各种严苛的金融级场景和机构需求,比如跨机房跨地域的容灾业务连续性保障能力等。 移除点击此处添加图...

    文章 兔子酱 2018-06-07 4769浏览量

  • 技术连载:LinkedIn大数据后台如何运作-1

    我在六年前的一个令人兴奋的时刻加入到LinkedIn公司。从那个时候开始我们就破解单一的、集中式数据库的限制,并且启动到特殊的分布式系统套件的转换。这是一件令人兴奋的事情:我们构建、部署,而且直到今天仍然在运行的分布式图形数据库、分布式搜索后端、Hadoop安装以及第一代和第二代键值数据存储。 ...

    文章 小旋风柴进 2017-04-03 835浏览量

  • 分布式ID生成器的解决方案总结

    在互联网的业务系统中,涉及到各种各样的ID,如在支付系统中就会有支付ID、退款ID等。那一般生成ID都有哪些解决方案呢?特别是在复杂的分布式系统业务场景中,我们应该采用哪种适合自己的解决方案是十分重要的。下面我们一一来列举一下,不一定全部适合,这些解决方案仅供你参考,或许对你有用。 一个ID一般来...

    文章 java技术栈 2018-01-11 1685浏览量

  • 分布式服务化系统一致性的“最佳实干”

    李艳鹏 易宝支付平台架构师,专注线上和线下支付平台的应用架构和技术架构的规划与落地,负责交易、支付、渠道、账务、计费、风控、对账等系统的设计与实现,在移动支付、聚合支付、合规账户、扫码支付、标记化支付等业务场景上有产品应用架构规划的经验。 1 背景 一致性是一个抽象的、具有多重含义的计算机术语...

    文章 行者武松 2017-08-01 1889浏览量

1 2 3 4 ... 41 >

云产品推荐

阿里云大学 云服务器ECS com域名 网站域名whois查询 开发者平台 小程序定制 小程序开发 国内短信套餐包 开发者技术与产品 云数据库 图像识别 开发者问答 阿里云建站 阿里云备案 云市场 万网 阿里云帮助文档 免费套餐 开发者工具 企业信息查询 小程序开发制作 视频内容分析 企业网站制作 视频集锦 代理记账服务 企业建站模板