• 用大白话聊聊分布式系统

    在设计分布式计算时,我们分布式计算可以采用 MapReduce、Apache Hadoop、Apache Spark 等。在大数据和分布式存储方面,我们可以选择 Apache HBase、Apache Cassandra、Memcached、Redis、MongoDB等。在分布式监控...
    文章 2017-03-05 5880浏览量
  • 《深入理解Hadoop(原书第2版)》——第3...3.1 安装类型

    我们建议你在虚拟机中安装一个开发环境来进行Hadoop2.x平台的开发,本章将会讲述如何安装。3.1.1单机模式 单机模式(Stand-Alone Mode)是最简单的安装类型模式,这种模式最适合调试。在这样的模式中,Hadoop系统的...
    文章 2017-05-02 1624浏览量
  • 猛犸系统

    分布式操作系统如何现存应用进行交互 在软件行业,兼容现存的应用显得尤为重要,是决定一个平台系统能够存活的关键指标。容器技术使得所有应用可以被操作系统运行起来。并且可以吻合Yarn内核对资源控制的要求。但是...
    文章 2016-09-06 2316浏览量
  • 《HBase管理指南》一导读

    HBase管理指南作为一个开源、分布式的大数据存储系统,HBase可以处理记录数达几十亿条、字段数达数百万个的大数据,并且只需依靠一些由商品化硬件而构成的集群就可以运行。如果你正在寻找一种能够实时存储和访问海量...
    文章 2017-05-02 1572浏览量
  • 计算读书笔记(二)

    google云计算服务包括:google文件系统GFS,分布式计算编程模形MapReduce,分布式锁服务Chubby,分布式结构化数据表Bigtable,分布式存储系统Megastore以及分布式监控系统Dapper等。GFS提供了海量数据的存储和访问...
    文章 2011-10-17 670浏览量
  • 《Python分布式计算》第1章 并行和分布式计算介绍...

    第1章 并行和分布式计算介绍第2章 异步编程第3章 Python的并行计算第4章 Celery分布式应用第5章 云平台部署Python第6章 超级计算机群使用Python第7章 测试和调试分布式应用第8章 继续学习 本书示例代码适用于Python ...
    文章 2017-10-11 1346浏览量
  • Nova 组件如何协同工作-每天5分钟玩转 OpenStack(24...

    前面大家已经看到 Nova 由很多子服务组成,同时我们也知道 OpenStack 是一个分布式系统,可以部署到若干节点上,那么接下来大家可能就会问:Nova 的这些服务在物理上应该如何部署呢?对于 Nova,这些服务会部署在两...
    文章 2016-04-22 1012浏览量
  • AgileEAS.NET平台开发实例-药店系统-分布式部署

    前面我们已经将系统的配置及模块的配置配置完毕,并且可以正常的运行和访问了,下面我们来看看我们采用分布式部署的话,如何来做呢?因为可能我们的应用服务器 与数据库服务器不在一台计算机上,为了后期的一些扩展...
    文章 2017-12-18 950浏览量
  • Serverless 实战 —— 快速开发一个分布式 Puppeteer ...

    因为 puppeteer 本身依赖了非常多的系统库,要安装哪些系统库、如何安装这些系统库成了一个比较头痛的问题。好在函数计算命令行工具 Fun 已经集成了 Puppeteer 的解决方案,只要 package.json 中包含了 puppeteer ...
    文章 2019-12-17 614浏览量
  • 开发者社区精选直播合集|玩转 Serverless 合集

    来,本视频手把手教你教你如何快速搭建一个 Serverless 架构的分布式Puppeteer 网页截图服务,让你秒懂解决因环境差异带来的依赖安装以及平台限制带来的应用体积大小限制的问题!戳我观看!函数计算最佳实践:如何...
    文章 2020-06-05 156浏览量
  • 开发者社区精选直播合集|玩转 Serverless 合集

    来,本视频手把手教你教你如何快速搭建一个 Serverless 架构的分布式Puppeteer 网页截图服务,让你秒懂解决因环境差异带来的依赖安装以及平台限制带来的应用体积大小限制的问题!戳我观看!函数计算最佳实践:如何...
    文章 2020-05-09 1495浏览量
  • Serverless 实战 —— 快速开发一个分布式 Puppeteer ...

    因为 puppeteer 本身依赖了非常多的系统库,要安装哪些系统库、如何安装这些系统库成了一个比较头痛的问题。好在函数计算命令行工具 Fun 已经集成了 Puppeteer 的解决方案,只要 package.json 中包含了 puppeteer ...
    文章 2019-11-23 3094浏览量
  • Vineyard|开源分布式内存数据管理引擎

    可以看到,一个经典的大数据应用工作流中,往往会出现多种不同的计算需求,需要用到各种专业性的计算系统来逐一解决,而且往往都会使用一个分布式文件系统,例如HDFS,来解决跨系统数据共享的问题,这也导致每个子...
    文章 2021-03-29 347浏览量
  • Serverless 实战 —— 快速开发一个分布式 Puppeteer ...

    因为 puppeteer 本身依赖了非常多的系统库,要安装哪些系统库、如何安装这些系统库成了一个比较头痛的问题。好在函数计算命令行工具 Fun 已经集成了 Puppeteer 的解决方案,只要 package.json 中包含了 puppeteer ...
    文章 2019-12-11 354浏览量
  • 有了 serverless,前端也可以快速开发一个 Puppeteer ...

    因为 puppeteer 本身依赖了非常多的系统库,要安装哪些系统库、如何安装这些系统库成了一个比较头痛的问题。好在函数计算命令行工具 Fun 已经集成了 Puppeteer 的解决方案,只要 package.json 中包含了 puppeteer ...
    文章 2019-12-13 838浏览量
  • DevOps:软件架构师行动指南DevOps:软件架构师行动...

    2)存储在Hadoop分布式文件系统内的数据是如何防范灾难的?Hadoop分布式文件系统本身会在多个DataNode上备份数据,但数据中心的一般故障可能造成Hadoop分布式文件系统无法访问或者Hadoop分布式文件系统管理的数据被...
    文章 2017-05-02 2019浏览量
  • 83期:PostgreSQL独孤九搞定物联网

    对整个分布式应用系统而言,一共分为两种调用,一种是同步调用,一种是异步调用。同步调用就是基于RPC,基于链路监控等等的一套东西,而今天分享的主题是则基于异步调用的,点击查看。阿里研究员华先胜:图像搜索的...
    文章 2016-09-12 2423浏览量
  • 73期:60天获得1亿A轮融资,空格App上云实战详解

    云周刊 本周要点 查看更多 【直播回顾】60天获得1亿A轮融资App的云上技术实践 你知道吗?空格APP依靠阿里云只用了两个礼拜就实现了APP上线,...最后也分享了DRDS实战案例,希望对大家了解阿里分布式数据库有所帮助。
    文章 2016-04-10 2452浏览量
  • Nova 组件如何协同工作-每天5分钟玩转 OpenStack(24...

    前面大家已经看到 Nova 由很多子服务组成,同时我们也知道 OpenStack 是一个分布式系统,可以部署到若干节点上,那么接下来大家可能就会问:Nova 的这些服务在物理上应该如何部署呢?对于 Nova,这些服务会部署在两...
    文章 2017-11-13 1014浏览量
  • 计算读书笔记(二)

    google云计算服务包括:google文件系统GFS,分布式计算编程模形MapReduce,分布式锁服务Chubby,分布式结构化数据表Bigtable,分布式存储系统Megastore以及分布式监控系统Dapper等。GFS提供了海量数据的存储和访问...
    文章 2016-04-25 1676浏览量
  • Vineyard 加入 CNCF Sandbox,将继续瞄准云原生大数据...

    t=585未来展望Vineyard 已经作为分布式科学计算引擎 Mars 和一站式图计算系统 GraphScope 的存储引擎,Vineyard 助力大数据分析任务离不开与云原生社区的紧密互动,未来Vineyard 会进一步地完善与社区其他项目如 ...
    文章 2021-05-18 347浏览量
  • Torus登场:CoreOS打造的新一代分布式存储系统

    本文讲的是Torus登场:CoreOS打造的新一代分布式存储系统,【编者的话】最近CoreOS推出来重量级产品Torus,专门为容器集群量身打造的分布式存储系统,可以为通过Kubernetes编排和管理的容器集群提供可靠可扩展的存储...
    文章 2017-09-21 1316浏览量
  • 阿里重磅开源首款自研科学计算引擎Mars,揭秘超大规模...

    当下流行的分布式计算引擎也并非为科学计算而生,上层接口不匹配导致科学计算任务很难用传统的SQL/MapReduce编写,执行引擎本身没有针对科学计算优化更使得计算效率难以令人满意。基于以上科学计算现状,由阿里巴巴...
    文章 2019-01-16 7574浏览量
  • 分布式光伏补贴下降收益率分析

    对于分布式光伏电价下降对行业的影响,首先是对家庭用户,本身由于自身用电电价较低且安装成本高,降低度电补贴将会对目前的光伏项目收益率造成较大的影响,也会对目前蓬勃发展的家庭光伏造成一个新的1230。...
    文章 2017-09-04 907浏览量
  • Hadoop生态系统

    在一个宽泛而不断变化的分布式计算领域,Hadoop凭借什么优势能脱颖而出呢?1.运行方便:Hadoop是运行在由一般商用机器构成的大型集群上。Hadoop在云计算服务层次中属于PaaS(Platform-as-a-Service):平台即服务。2....
    文章 2018-01-06 2155浏览量
  • 地铁译:Spark for python developers-搭建Spark虚拟...

    Spark 是一个面向大规模数据处理的快速、分布式、通用的分析计算引擎.主要不同于Hadoop的特点在于Spark 通过数据管道的内存处理允许不同阶段共享数据.Spark 的独特之处在于允许四种不同的数据分析和处理风格.Spark...
    文章 2016-05-09 1041浏览量
  • [转载]聊聊Greenplum的那些事

    3分布式存储和分布式计算理论刚刚被提出来,Google的两篇著名论文发表后引起业界的关注,一篇是关于GFS分布式文件系统,另外一篇是关于MapReduce 并行计算框架的理论,分布式计算模式在互联网行业特别是收索引擎和...
    文章 2016-07-11 7143浏览量
  • JindoFS缓存加速数据湖上的机器学习训练

    JindoFS提供了一个计算侧的分布式缓存系统,可以有效利用计算集群上的本地存储资源(磁盘或者内存)缓存OSS上的热数据,从而减少对OSS上数据的反复拉取,消耗网络带宽。内存缓存 对于深度学习,我们可以选择计算能力...
    文章 2020-09-14 13864浏览量
  • 由"...Memcached分布式缓存"

    分布式缓存Memcached,此"分布式"并非彼"分布式分布式是指不同的计算机可以访问同一服务器上的应用程序。而Memcached的分布式是指不同的数据是分布存储在不同的服务器上。假设有三台Memcached服务器,应用程序要...
    文章 2016-02-11 1326浏览量
  • Serverless 应用部署的工具Funcraft

    Serverless 实战 —— 快速开发一个分布式 Puppeteer 网页截图服务&xff1a;介绍了如何在函数计算中使用 puppeteer。函数计算部署机器学习遇到的问题和解法&xff1a;介绍了机器学习部署到函数计算时可能会遇到的一些问题...
    文章 2021-08-20 73浏览量
1 2 3 4 ... 49 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化