【Hadoop Summit Tokyo 2016】Hadoop Common与HDFS中有什么新特性?

简介: 本讲义出自Tsuyoshi Ozawa在Hadoop Summit Tokyo 2016上的演讲,主要分享了Hadoop 3 Common与HDFS出现的新特性,因为新版本的Hadoop运行在JDK8上,在应用构建的过程中,所以需要使用JDK8编译源代码,并且新版本的Hadoop具有更好的库管理,并且支持Azure数据湖泊存储,最后还分享了关于脚本重写与Apache Kafka的metrics2插件的相关内容。

本讲义出自Tsuyoshi Ozawa在Hadoop Summit Tokyo 2016上的演讲,主要分享了Hadoop 3 Common与HDFS出现的新特性,因为新版本的Hadoop运行在JDK8上,在应用构建的过程中,所以需要使用JDK8编译源代码,并且新版本的Hadoop具有更好的库管理,并且支持Azure数据湖泊存储,最后还分享了关于脚本重写与Apache Kafka的metrics2插件的相关内容。

6ceacffa309d3dc7329f6013c90ad93f6aaf45fb6ceacffa309d3dc7329f6013c90ad93f6aaf45fb

ef99bfb89fcf286f8cea6d78711dfbddd7106440

4a2ec0ceb05106f4ee19e0667a203136c82411f0

350e79e42def4963fe970f75667ed7b26dc35645

a6451ef37cb262e9dd35e90727929276baa773ae

61d5c0297b99dedf7db1b255491a13c47d4703ce

73b3cd68f2a2dd5b8d2e258ab69ab4f0863f3f15

2c4ceb0cc0f77e5632e664cb6193f513e25df629

a7e540d7523d75a100bb81696c669ad30b5fd88b

0ea87a4f8adaff550e669b0ba39f1a889a263b5c

b7fb3ba536b736092bda7f5e93c87d6fdefe6174

3892ef9270812ebed54da7f7b9d9b1c29d909f7e

11577820147a8fd2a163cc9c79a670e6b935f796

f12486dd16f8a53db9815e33cd184f92a6b89540

d5649a9f440cefb62d33dc4e42de9555a9c9c11e

a75c6d61f2a15da155965affb65dc9d292d3e4eb

1a1135091871c87c0c876679507a8cd3bc8052d6

09234a118302309ed5e42575041ee9dcb9f3ddfd

0ae2cb8709761b6849595415582ab497ab777e29

ba5a3b23e93ac30b5ced42221b4d8e817a5e9904

6ecd03f22c25ae366644f06cc0df8259d9158202

dc17268a5b30d9ef532b38c094cd2bb2891da0a8

b50d2c7a487dfe0b988c595ba3321762d51cdb52

5acb3a96cef6c86e60cc821bca34494004ffc637

423b34b30d404ceb1f2622d44f6e5222b1f949b6

3a2a710d52a3bebacd9404634309d3d5d1df31c9

9fe093dd71f3a0c3184e8f8c5dcbb79defef6e20

ab26cebccfa23f33d7c17b0e92c5d174d093b05a

相关文章
|
4月前
|
存储 分布式计算 Hadoop
Hadoop系列HDFS详解
Hadoop系列HDFS详解
40 0
|
4天前
|
分布式计算 Hadoop 测试技术
Hadoop【基础知识 05】【HDFS的JavaAPI】(集成及测试)
【4月更文挑战第5天】Hadoop【基础知识 05】【HDFS的JavaAPI】(集成及测试)
28 8
|
4天前
|
分布式计算 资源调度 Hadoop
Hadoop【基础知识 03+04】【Hadoop集群资源管理器yarn】(图片来源于网络)(hadoop fs + hadoop dfs + hdfs dfs 使用举例)
【4月更文挑战第5天】Hadoop【基础知识 03】【Hadoop集群资源管理器yarn】(图片来源于网络)Hadoop【基础知识 04】【HDFS常用shell命令】(hadoop fs + hadoop dfs + hdfs dfs 使用举例)
29 9
|
6天前
|
分布式计算 Hadoop Shell
Hadoop【基础知识 04】【HDFS常用shell命令】(hadoop fs + hadoop dfs + hdfs dfs 使用举例)
【4月更文挑战第4天】Hadoop【基础知识 04】【HDFS常用shell命令】(hadoop fs + hadoop dfs + hdfs dfs 使用举例)
18 5
|
8天前
|
存储 分布式计算 Hadoop
【Hadoop】HDFS 读写流程
【4月更文挑战第9天】【Hadoop】HDFS 读写流程
|
3月前
|
存储 分布式计算 Hadoop
Hadoop的Secondary NameNode在HDFS中的作用是什么?
Hadoop的Secondary NameNode在HDFS中的作用是什么?
36 0
|
4月前
|
存储 分布式计算 资源调度
[hadoop3.x]HDFS中的内存存储支持(七)概述
[hadoop3.x]HDFS中的内存存储支持(七)概述
50 0
|
4月前
|
SQL 分布式计算 Hadoop
[AIGC ~大数据] 深入理解Hadoop、HDFS、Hive和Spark:Java大师的大数据研究之旅
[AIGC ~大数据] 深入理解Hadoop、HDFS、Hive和Spark:Java大师的大数据研究之旅
|
4月前
|
存储 SQL 分布式计算
Hadoop(HDFS+MapReduce+Hive+数仓基础概念)学习笔记(自用)
Hadoop(HDFS+MapReduce+Hive+数仓基础概念)学习笔记(自用)
251 0
|
4月前
|
分布式计算 Hadoop 大数据
大数据成长之路-- hadoop集群的部署(3)HDFS新增节点
大数据成长之路-- hadoop集群的部署(3)HDFS新增节点
66 0

相关实验场景

更多