分布式计算

首页 标签 分布式计算
# 分布式计算 #
关注
37780内容
DKhadoop安装配置步骤教程与常见问题解决
DKHadoop安装是总体很简单,跟大家所了解的hadoop版本安装差异比较大,这个是发行版是已经做了深度集成,基本可以“一键傻瓜式安装”,当然,更为具体的、详细的安装也有分享过文章的,可以在系列文章里看一下的
MapReduce实现手机上网流量分析(业务逻辑)
一、问题背景   现在的移动刚一通话就可以在网站上看自己的通话记录,以前是本月只能看上一个月。不过流量仍然是只能看上一月的。   目的就是找到用户在一段时间内的上网流量。   本文并没有对时间分组。
Spark入门到精通视频学习资料--第八章:项目实战(2讲)
项目实战主要以数据处理为整体方向,总体的处理流程如下所示: 数据源-->存储(HDFS)-->计算(MR/SPARK/MPI)-->计算结果(Mysql/HBase/Redis)-->查询接口(WEB/报表) 按照这样的思路来讲解项目实战,具体请看视频: 《项目架构与案例(上).
大数据和大数据平台的内在联系,大数据的实用价值是什么?
大数据根基于互联网,数据仓库、数据挖掘、云计算等互联网技术的发展为大数据的应用奠定了基础。
Hadoop-2.6.2集群配置安装
Hadoop-2.6.2集群安装 Hadoop-262集群安装 环境说明 基础环境搭建 CentOS 7安装 新建用户hadoop 配置hosts 关闭防火墙 安装jdk180_40 ssh配置 安装配置...
显示当前Hadoop集群节点上启动的进程
#!/bin/sh #查看hadoop的运行状态 function hadoopState(){ COUNT=1 while [ ${COUNT} -le ${NUM} ] do echo "**********查看hadoop${COUNT}上hadoop的运行状态********" #连接远程主机查看运行状态 ssh -t -p 22 hadoop${COUNT} "
上:Spark VS Flink – 下一代大数据计算引擎之争,谁主沉浮?
本文对 Spark 和 Flink 的技术与场景进行了全面分析与对比,且看下一代大数据计算引擎之争,谁主沉浮?
免费试用