• 文件服务器高可用之DFS

    DFS 复制 可让你有效地在多个服务器和站点上复制文件夹(包括那些由 DFS 命名空间路径引用的文件夹)。DFS 复制使用一种称为远程差分压缩(RDC)的压缩算法。RDC 检测对文件中数据的更改,并使 DFS 复制仅复制已更改...
    文章 2017-11-12 2861浏览量
  • hadoop搭建之hadoop安装

    2、在opt目录下创建文件夹 modules 和 文件夹software,所有的安装包放在software下面,解压文件放在modules下面 3、准备工作,安装 JDK,在三台机器上配置 JDK 环境 tar-zvxf/opt/software/jdk-8u201-linux-x64.tar...
    文章 2019-02-24 1272浏览量
  • 《Hadoop海量数据处理:技术详解与项目实战(第2版)...

    这种方式也可以实现Host和虚拟机的双向访问。Use host-only networking:主机模式,在默认特殊的网络调试环境中,要求将真实环境和虚拟环境隔离开,这时你就可采用host-only模式。在host-only模式下,虚拟机和Host...
    文章 2017-05-02 2284浏览量
  • 将数据迁移到CDP 私有云基础的数据迁移用例

    从 Sentry 服务器导出权限使用authzmigrator 工具将源集群上的 Sentry 服务器的 Sentry 权限导出到文件中。在并行迁移&xff08;side-car migration&xff09;过程中&xff0c;您可以使用authzmigrator工具将Hive对象和URL...
    文章 2021-09-24 159浏览量
  • hadoop原理浅析及安装

    然后每台服务器上都修改ssh的配置文件:/etc/ssh/sshd_config 把GSSAPIAuthentication的值设置为no,然后: [root@hadoop5 conf]#service sshd restart [root@hadoop5 conf]# 我们从master向slave依次登录 [root@...
    文章 2017-11-14 820浏览量
  • Hadoop大数据面试题(全)

    答:flush是在内存的基础上进行的,首先写入文件的时候,会先将文件写到内存中,当内存写满的时候,一次性的将文件全部都写到硬盘中去保存,并清空缓存中的文件, 29.什么是队列 答:是一种调度策略,机制是先进先出...
    文章 2018-05-22 4097浏览量
  • 【飞天存储服务月报】2018年6月刊

    贡献了《基于飞天的Lustre高可用高性能架构解析》《高性能网络技术下的阿里云盘古分布式存储技术变革》、《大规模无服务器计算平台的挑战与实践》、《Kubernetes下日志采集、存储与处理技术实践》、《开源大数据生态...
    文章 2018-07-12 5215浏览量
  • Hadoop就业面试题

    7 配置hadoop的核心文件 hadoop-env.sh,core-site.xml,mapred-site.xml,hdfs-site.xml 8 配置hadoop环境变量 9 格式化 hadoop namenode-format 10 启动节点start-all.sh 2.0 请列出正常的hadoop集群中hadoop都分别...
    文章 2016-06-16 1514浏览量
  • (转)坚持完成这套学习手册,你就可以去 Google 面试了

    自 1997 年以来,我一直从事于 Web 程序的构建、服务器的构建及创业型公司的创办。对于只有着一个经济学学位,而不是计算机科学学位(CS degree)的我来说,在职业生涯中所取得的都非常成功。然而,我想在 Google ...
    文章 2016-10-12 1883浏览量
  • 关于K8s集群环境工作组隔离配置多集群切换的一些笔记

    目前,令牌会长期有效,并且在不重启 API 服务器的情况下 无法更改令牌列表,所以这里使用 Kubeconfig 文件认证使用 Kubeconfig 证书认证关于 kubeconfig 证书认证,在k8s 中 使用 kubeconfig 文件来组织有关集群、...
    文章 2022-12-16 358浏览量
  • 如何成长为一位优秀的技术人?优秀的程序员成长的技术...

    手写一个HashMap顺序存储,双向链表,单向链表,Java当中LinkedList的源码分析Java当中线性结构,树形结构以及图形结构分析以及应用场景和经典使用大数字运算和经典排序,二叉树红黑树排序,查找JVM性能调优Java内存模型...
    文章 2021-11-27 214浏览量
  • Google Interview University-坚持完成这套学习手册,...

    自 1997 年以来,我一直从事于 web 程序的构建、服务器的构建及创业型公司的创办。对于只有着一个经济学学位,而不是计算机科学学位(CS degree)的我来说,在职业生涯中所取得的都非常成功。然而,我想在 Google ...
    文章 2017-10-18 3030浏览量
  • 如何让大数据成为电力企业竞争的核心资本?

    针对非实时性数据,可以考虑基于分布式文件系统(distributedfilesystem,DFS)和MapReduce技术的云计算来进行处理;也可以基于Hadoop,一种DFS和MapReduce的开源实现的云计算平台来进行数据处理。对于实时性数据,如...
    文章 2017-08-01 1540浏览量
  • 如何让大数据成为电力企业竞争的核心资本?

    针对非实时性数据,可以考虑基于分布式文件系统(distributedfilesystem,DFS)和MapReduce技术的云计算来进行处理;也可以基于Hadoop,一种DFS和MapReduce的开源实现的云计算平台来进行数据处理。对于实时性数据,如...
    文章 2017-07-03 1430浏览量
  • 学习总结

    层序遍历:每一层从左到右访问每一个算法复杂度分析时间复杂度:空间复杂度:算法题数组链表两两翻转链表树二叉树的序列化和反序列化排序递归广度(BFS)深度(DFS)优先搜索广度优先算法的核心思想是: 从初始节点开始...
    文章 2022-03-17 126浏览量
  • 后端架构师技术图谱

    《广度优先搜索BFS和深度优先搜索DFS》 贪心算法 《算法:贪婪算法基础》 《常见算法及问题场景——贪心算法》 回溯算法 《五大常用算法之四:回溯法》 剪枝算法 《α-β剪枝算法》 动态规划 《详解动态规划——邹博...
    文章 2018-05-07 6647浏览量
  • 《精通python设计模式》读书笔记之——行为型设计模式

    单向链表不允许双向地遍历元素,双向链表则是允许的。这种链式组织方式大有用处:可以解耦发送方(客户端)和接收方(处理元素) 现实生活的例子: ATM机以及及一般而言用于接收/返回钞票或硬币的任意类型机器(比如...
    文章 2018-10-23 1699浏览量
  • 学习总结

    文件系统和数据库系统中常用的B/B&43;树&xff0c;他通过对每个节点存储个数的扩展&xff0c;使得对连续的数据能够进行较快的定位和访问&xff0c;能够有效减少查找时间&xff0c;提高存储的空间局部性从而减少IO操作。他广泛...
    文章 2022-03-17 87浏览量
  • Nosql大家族介绍

    非关系数据库世界的终极向导-Nosql定义:下一代数据库大多专注于这几点:非关系型、分布式的、开源并且可以横向扩展。原意图是成为新式的网络级数据库。这场运动开始于2009年早期,并快速成长。...
    文章 2015-05-05 5243浏览量

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化