-
Java架构师必会的技能（你都会了吗？
最简单的单机压测压测应该关注的点如何做分布式压测分布式跟踪系统 如何梳理链路依赖如何做到优雅降级分布式配置系统 灵活配置热发布一切都是为了自动化分布式消息系统 异步化&系统隔离应对瞬时大流量分布式缓存...文章 2018-04-29 5231浏览量 -
【分布式与虚拟化技术入门】分布式架构、分布式计算、...
4.分布式文件存储*免费课程：https://edu.aliyun.com/course/32 本课程针对分步式文件存储系统的实现进行讲解，首先分析为什么要使用这种分步式存储系统，以及这种系统在设计时需要注意的问题，并比较现在市面常见的...文章 2017-08-04 3817浏览量 -
分布式系统的理解
分布式文件系统具有执行远程文件存取的能力,并以透明方式对分布在网络上的文件进行管理和存取。3）分布式程序设计和编译解释系统 分布式程序设计语言用于编写运行于分布式计算机系统上的分布式程序。一个分布式程序...文章 2016-01-04 3518浏览量 -
分布式系统的理解
分布式文件系统具有执行远程文件存取的能力,并以透明方式对分布在网络上的文件进行管理和存取。3）分布式程序设计和编译解释系统 分布式程序设计语言用于编写运行于分布式计算机系统上的分布式程序。一个分布式程序...文章 2016-01-04 1799浏览量 -
【转载】分布式系统的理解
分布式文件系统具有执行远程文件存取的能力,并以透明方式对分布在网络上的文件进行管理和存取。3）分布式程序设计和编译解释系统 分布式程序设计语言用于编写运行于分布式计算机系统上的分布式程序。一个分布式程序...文章 2016-05-11 1539浏览量 -
Hadoop在大数据平台搭建中扮演着何种角色？
HDFS被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时，它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统，适合部署在...文章 2019-05-07 1377浏览量 -
图解大数据|分布式平台Hadoop与Map-Reduce详解
支持Apache Hadoop集群的供应、管理和监控Kafka一种高吞吐量的分布式发布订阅消息系统，可以处理消费者规模的网站中的所有动作流数据Spark类似于Hadoop MapReduce的通用并行框架4.HDFS介绍1）分布式文件系统分布式...文章 2022-04-21 57浏览量 -
部署高可用的分布式文件系统（DFS）
前面的博文中文大家介绍了如何来搭建一个分布式文件系统，以及分布式文件系统的优点，今天我们将要在博文中为大家介绍如何来实现分布式文件系统的高可用部署。大家都知道，微软的服务只有实现了高可用（容错）以后用...文章 2017-11-07 1236浏览量 -
阿里巴巴少杰：大数据处理实践
通常一个大数据系统下面会有一个分布式文件系统，分布式文件系统下会有分布式调度系统，分布式调度系统下可能会有编程模型的实现，这与Maxcompute实现较类似；去中心/弱中心控制。没有中心节点，不必连接某个节点...文章 2018-01-18 5986浏览量 -
Redis+Kafka+分布式
如何搭建redis集群 redis如何主从同步 redis分布式锁注意事项 redis持久化的方式以及区别 redis持久化方式及区别 my sql数据量多大的时候需要分表 my sql常用的存储引擎及区别 死锁的条件及应对措施 ...文章 2018-09-20 1323浏览量 -
基于SOA的高并发和高可用分布式系统架构和组件详解
FastDFS是用c语言编写的一款开源的分布式文件系统。FastDFS为互联网量身定制，充分考虑了冗余备份（高可用）、负载均衡（高并发量）、线性扩容（添加服务器或者磁盘）等机制，并注重高可用、高性能等指标，使用...文章 2018-11-12 2348浏览量 -
Java进阶专题(一)前言
分布式服务治理初步认识分布式服务治理DubboDubbo常用配置文件分析Dubbo源码分析Dubbo+SpringBoot项目实战7：分布式消息中间件ActiveMQ初步使用ActiveMQ原理分析Kafka的初步认识及使用实践Kafka的原理分析初始...文章 2021-11-20 54浏览量 -
软件定义存储之演进：是改变数据中心的洪荒之力？
正如ZFS在10年前的状态一样，Ceph作为当今分布式流行时代的明星开源分布式存储系统实现，被无数的知名的、不知名的公司、个人用来搭建自用的、商用的分布式存储系统。正如当年ZFS一样，Ceph几乎支持所有存储系统该...文章 2017-08-01 1515浏览量 -
（一）spring cloud微服务分布式云架构-Spring Cloud...
利用Spring Boot的开发模式简化了分布式系统基础设施的开发，如服务发现、注册、配置中心、消息总线、负载均衡、断路器、数据监控等（这里只简单的列了一部分），都可以用Spring Boot的开发风格做到一键启动和部署。...文章 2020-10-19 6142浏览量 -
TortoiseSVN与VisualSVN Server搭建SVN版本控制系统
本片主要介绍如何搭建SVN版本控制系统，主要使用工具： 1 客户端：TortoiseSVN（小乌龟） 2 服务端：VisualSVN Server 搭建出图形化管理，以及右键菜单版本控制管理的SVN系统。背景知识 首先要了解SVN是一种集中式...文章 2017-12-05 842浏览量 -
分布式架构原理-CDN加速静态文件访问
我们一般把一些相对静态的文件（例如图片、视频、JS脚本、一些页面框架）放在CDN中。免费的前端开源项目 CDN 加速服务:https://cdn.bootcdn.net二、用户加速流程1.用户向浏览器输入www.aliyun.com这个域名，浏览器第...文章 2022-02-16 134浏览量 -
hbase分布式集群搭建
hbase和hadoop一样也分为单机版、伪分布式版和完全分布式集群版本，这篇文件介绍如何搭建完全分布式集群环境搭建。hbase依赖于hadoop环境，搭建habase之前首先需要搭建好hadoop的完全集群环境，因此看这篇文章之前...文章 2017-08-11 2114浏览量 -
基于Hadoop分布式集群搭建政企大数据计算存储服务平台...
今天，小编就据目前互联网行业的发展，以及大数据Hadoop分布式集群等等来讲解一下，政企如何搭建大数据计算服务平台。互联网信息技术的迅猛发展，云计算、物联网、智能科技、AI、超级计算机等等的出现和发展，使数据...文章 2019-04-10 1323浏览量 -
分布式配置管理
下面讲述一下在阿里云Kubernetes容器服务基础之上，如何快速搭建一套分布式配置管理系统。准备Kubernetes环境 阿里云容器服务Kubernetes 1.9.3目前已经上线，可以通过容器服务管理控制台非常方便地快速创建 ...文章 2018-05-25 4438浏览量 -
基于 Spring+Dubbo 开发分布式REST服务实战
6.理解分布式服务架构，使用Dubbo搭建分布式服务框架，并与Spring Boot和Spring framework结合，处理服务的日志、事务、消息、缓存、定时任务，多线程等问题。课程主要章节如下: 01.课程介绍，架构说明，案例说明，...文章 2017-08-08 2863浏览量 -
分布式文件系统HDFS
正如上图所示：Hadoop包含很多优秀的子项目，例如HDFS，Mapreduce，Hbase，Hive，Zookeeper等，其中最重要的，也是Hadoop当时风靡一时的原因是HDFS（分布式文件系统）和Mapreduce（分布式计算框架）。HDFS解释了，...文章 2018-01-10 1120浏览量 -
干货|如何在海量文件系统中选择合适自己的文件系统
示例图片:分布式文件系统 在上文谈到了数据类型的划分，通常结构性数据都可以通过关系型数据进行存储和管理，而如果想管理非结构性数据，则需要使用到文件系统。 文件系统又可以分为：一般(本地)文件系统...文章 2022-08-02 594浏览量 -
如何成长为一位优秀的技术人？优秀的程序员成长的技术...
传统应用系统如何演变成分布式应用系统详解Dubbo的六大特性是什么?对企业级开发有何好处?Dubbo作用的简要说明?快速演示Dubbo调用实例Dubbo中的协议,注册中心,动态代理机制是怎么达到可扩展的?Dubbo的扩展机制源码...文章 2021-11-27 106浏览量 -
Java技术栈2017年度精选干货总结
分布式系统架构CAP理论 2，Java面试题 TOP 10 2017派卧底去阿里、京东、美团、滴滴带回来的面试题及答案 阿里高级Java面试题（70道，带详细答案） 史上最全Spring面试题汇总 去BAT面试完的Mysql面试题总结 通往大神...文章 2018-03-08 3750浏览量 -
一文读懂分布式架构知识体系（内含超全核心知识大图）
在 1976 年迪吉多公司设计出 File Access Listener（FAL），而现代分布式文件系统则出自赫赫有名的 Google 的论文，《The Google File System》奠定了分布式文件系统的基础。现代主流分布式文件系统参考《分布式文件...文章 2019-10-16 7821浏览量 -
大数据教程（一）—— Hadoop集群坏境搭建配置
关于开源的大数据产品生态链是非常的庞大，所以我们将花费很多的时间在应用的使用场景上，但是其最底层的支撑框架就是Hadoop的Yarn计算模型和HDFS分布式文件存储系统。通过该篇的介绍，多少也需要知道自己需要掌握的...文章 2017-05-02 3011浏览量 -
基于glusterfs和gearman的离线任务运算分布式化方案...
分布式文件系统（Distributed File System）是指文件系统管理的物理存储资源不一定直接连接在本地节点上，而是通过计算机网络与节点相连。分布式文件系统的设计基于客户机/服务器模 式。一个典型的网络可能包括多个...文章 2017-11-15 1395浏览量 -
HDFS伪分布式环境搭建（上）
Hadoop实现的一个分布式文件系统&xff08;Hadoop Distributed File System&xff09;xff0c;简称HDFS源自于Google的GFS论文论文发表于2003年&xff0c;HDFS是GFS的克隆版1.2 HDFS的设计目标&xff1a;非常巨大的分布式文件系统...文章 2021-12-29 42浏览量 -
ecs使用体验
这是云计算的一门课，这个课程其中需要用到hadoop做分布式文件管理的实验，所以我们一个小组的就采用了阿里云的服务器。在使用ECS过程中，因为我是mac系统，所以我可以通过终端直接进行ssh连接，另外云服务器本质上...文章 2021-11-30 225浏览量 -
星际文件存储IPFS是如何颠覆云存储的？
IPFS（The InterPlanetary File System）星际文件存储系统是一种点到点的分布式文件系统，它连接的计算设备都拥有相同的文件管理模式。从某种意义上来说这个概念跟Web的最初理念很类似，但是实际上IPFS更像是互相...文章 2018-05-02 2794浏览量
