AI 助理
备案控制台

Hadoop

首页 标签 Hadoop
# Hadoop #
关注
11263内容
最新 热门 文章 问答 视频 课程
t-1668087624-9-27543
|
博文
|
来自： 云原生
微服务想用好，先把分布式和微服务之间的关系搞清楚
微服务想用好，先把分布式和微服务之间的关系搞清楚
# 存储 # 分布式计算 # Kubernetes # 架构师 # Java # Hadoop # Docker # 微服务 # 容器 # Spring
热烈的马
|
博文
【大数据技术Hadoop+Spark】MapReduce概要、思想、编程模型组件、工作原理详解（超详细）
【大数据技术Hadoop+Spark】MapReduce概要、思想、编程模型组件、工作原理详解（超详细）
# 云原生大数据计算服务 MaxCompute # 存储 # 分布式计算 # 负载均衡 # 大数据 # Hadoop
遇见的昨天
|
博文
Windows运行Hadoop时报错：Could not locate executablenull\bin\winutils.exe in the Hadoo
Windows运行Hadoop时报错：Could not locate executable null\bin\winutils.exe in the Hadoop binaries 从标题报错中就可以看到，不能定位到winutils.exe，在hadoop中
# 分布式计算 # Hadoop # Linux # Windows
涂作权
|
博文
Hive简介、什么是Hive、为什么使用Hive、Hive的特点、Hive架构图、Hive基本组成、Hive与Hadoop的关系、Hive与传统数据库对比、Hive数据存储（来自学习资料）
1.1 Hive简介 1.1.1   什么是Hive Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能。 1.1.2   为什么使用Hive Ø  直接使用hadoop所面临的问题 人员学习成本太高 项目周期要求太短 MapReduce实现复杂查询逻辑开发难度太大   Ø  为什么要使用Hive 操作接口采用类SQ
# SQL # 存储 # 数据库 # HIVE # 索引 # 分布式计算 # Hadoop # 数据格式 # 数据库连接 # Java
听风de歌
|
博文
Hadoop节点网络性能测试
【4月更文挑战第21天】
# 性能测试 # 分布式计算 # 安全 # Hadoop # 测试技术
栈江湖
|
博文
大数据时代的引擎：大数据架构随记
大数据架构通常分为四层：数据采集层、数据存储层、数据计算层和数据应用层。数据采集层负责从各种源采集、清洗和转换数据，常用技术包括Flume、Sqoop和Logstash+Filebeat。数据存储层管理数据的持久性和组织，常用技术有Hadoop HDFS、HBase和Elasticsearch。数据计算层处理大规模数据集，支持离线和在线计算，如Spark SQL、Flink等。数据应用层将结果可视化或提供给第三方应用，常用工具为Tableau、Zeppelin和Superset。
# 云原生大数据计算服务 MaxCompute # 云原生数据库 PolarDB # 日志服务 # 存储 # SQL # 分布式计算 # 大数据 # Hadoop
极客李华
|
博文
什么是Hive？请简要解释其作用和用途。
什么是Hive？请简要解释其作用和用途。
# SQL # 存储 # 分布式计算 # Hadoop # HIVE
4yva5hg3m356w
|
博文
Flink最全的集群部署攻略（推荐yarn实现企业级部署）
🍅程序员小王的博客：程序员小王的博客 🍅 欢迎点赞 👍 收藏 ⭐留言 📝 🍅 如有编辑错误联系作者，如果有比较好的文章欢迎分享给我，我会取其精华去其糟粕
# 实时计算 Flink版 # 资源管理 # 微服务引擎 # 容器服务Kubernetes版 # 资源调度 # 分布式计算 # Kubernetes # 前端开发 # Hadoop # 调度 # 流计算 # Spark # 容器 # API
xleesf
|
博文
一文了解Apache Hudi架构、工具和最佳实践
一文了解Apache Hudi架构、工具和最佳实践
# 存储 # 分布式计算 # Hadoop # Apache # Spark
Redamancy
|
博文
Hadoop中的MapReduce概述、优缺点、核心思想、编程规范、进程、官方WordCount源码、提交到集群测试、常用数据序列化类型、WordCount案例实操
优点：易于编程、良好的扩展性、高容错性、适合PB级以上海量数据的离线处理、缺点：不擅长实时计算、不擅长流式计算、不擅长DAG（有向无环图）计算、MapReduce核心功能是将`用户编写的业务逻辑代码`和`自带默认组件`整合成一个完整的分布式运算程序，并发运行在一个Hadoop集群上。MapReduce是一个分布式运算程序的编程框架，是用户开发“基于Hadoop的数据分析应用”的核心框架。（1）分布式的运算程序往往需要分成至少2个阶段。（2）第一个阶段的MapTask并发实例，完全并行运行，互不相干。（3）第
# 分布式计算 # 资源调度 # Hadoop # Java # 数据挖掘 # 数据处理 # Maven # 图计算 # 流计算 # Windows
免费试用