AI 助理
备案控制台
开发者社区 大数据 文章 正文

Hadoop 2.x本地库native lib及如何源码编译

2018-02-06 995
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 执行命令bin/hdfs dfs -ls报错image.png报错原因运行的代码与natvie中的代码版本不一致造成image.

执行命令bin/hdfs dfs -ls报错

image.png

报错原因

运行的代码与natvie中的代码版本不一致造成

image.png

下载源码

image.png

上传源码到服务器

image.png

把原理的代码备份重新命名

image.png

解压下载的源码

tar -zxvf /opt/modules/hadoop-2.5.0-src.tar.gz -C /opt/modules/

查看源码中的BUIDING.TXT

image.png

根据此文件的提示,一步一步进行操作即可.

文章标签：
分布式计算
Hadoop
关键词：
hadoop编译
hadoop源码
hadoop库
hadoop源码编译
突突修
目录
相关文章
热烈的马
|
6月前
|
Java Shell 分布式数据库
【大数据技术Hadoop+Spark】HBase数据模型、Shell操作、Java API示例程序讲解（附源码 超详细）
【大数据技术Hadoop+Spark】HBase数据模型、Shell操作、Java API示例程序讲解（附源码 超详细）
热烈的马
157 0
热烈的马
|
6月前
|
分布式计算 Java 大数据
【大数据技术Hadoop+Spark】HDFS Shell常用命令及HDFS Java API详解及实战（超详细 附源码）
【大数据技术Hadoop+Spark】HDFS Shell常用命令及HDFS Java API详解及实战（超详细 附源码）
热烈的马
694 0
愿天堂没有BUG（公众号同名）
|
分布式计算 Hadoop 大数据
字节跳动面试问到Hadoop源码，拿40K进大厂的Java程序员必备技能
大数据由于数据量庞大、数据类型复杂等特点，特别是非结构化或半结构化数据远远多于结构化数据，导致传统关系型数据库让企业面临巨大的成本压力。而 Hadoop 能够很好的提供解决大数据问题的技术手段。因此，Hadoop 技术在大数据中占据着举足轻重的作用，也很受企业的青睐。
愿天堂没有BUG（公众号同名）
70 0
热烈的马
|
6月前
|
分布式计算 大数据 Scala
【大数据技术Hadoop+Spark】Spark RDD创建、操作及词频统计、倒排索引实战（超详细 附源码）
【大数据技术Hadoop+Spark】Spark RDD创建、操作及词频统计、倒排索引实战（超详细 附源码）
热烈的马
288 1
敏叔V587
|
6月前
|
分布式计算 Hadoop Java
hadoop的基础设施-protobuf-2.5.0编译和安装
hadoop的基础设施-protobuf-2.5.0编译和安装
敏叔V587
50 0
星光下的赶路人
|
数据采集 分布式计算 搜索推荐
Hadoop学习---7、OutputFormat数据输出、MapReduce内核源码解析、Join应用、数据清洗、MapReduce开发总结（一）
Hadoop学习---7、OutputFormat数据输出、MapReduce内核源码解析、Join应用、数据清洗、MapReduce开发总结（一）
星光下的赶路人
181 0
热烈的马
|
6月前
|
分布式计算 Hadoop 大数据
【云计算与大数据计算】Hadoop MapReduce实战之统计每个单词出现次数、单词平均长度、Grep（附源码 ）
【云计算与大数据计算】Hadoop MapReduce实战之统计每个单词出现次数、单词平均长度、Grep（附源码 ）
热烈的马
272 1
愿天堂没有BUG（公众号同名）
|
6月前
|
分布式计算 Hadoop 大数据
字节跳动面试问到Hadoop源码，拿40K进大厂的Java程序员必备技能
大数据由于数据量庞大、数据类型复杂等特点，特别是非结构化或半结构化数据远远多于结构化数据，导致传统关系型数据库让企业面临巨大的成本压力。而 Hadoop 能够很好的提供解决大数据问题的技术手段。因此，Hadoop 技术在大数据中占据着举足轻重的作用，也很受企业的青睐。
愿天堂没有BUG（公众号同名）
54 0
热烈的马
|
6月前
|
存储 分布式计算 搜索推荐
【大数据技术Hadoop+Spark】MapReduce之单词计数和倒排索引实战（附源码和数据集 超详细）
【大数据技术Hadoop+Spark】MapReduce之单词计数和倒排索引实战（附源码和数据集 超详细）
热烈的马
195 0
阿甘兄
|
11月前
|
分布式计算 资源调度 Hadoop
从一个简单的命令阅读hadoop源码（下）
从一个简单的命令阅读hadoop源码（下）
阿甘兄
53 0

热门文章

最新文章

  • 1
    会声会影2023视频编辑软件免费序列号永久
  • 2
    Hadoop迁移MaxCompute神器之DataX-On-Hadoop使用指南
  • 3
    苹果电脑 Mac OS X 系统上防止误按 command+Q 退出软件
  • 4
    Flutter之禅 内存优化篇
  • 5
    用户密码以BCrypt加密的方式来防范被破解
  • 6
    spark 3.1.x支持（兼容）hive 1.2.x以及hadoop cdh版本的尝试
  • 7
    最新版本——Hadoop3.3.6单机版完全部署指南
  • 8
    linux下安装hadoop步骤
  • 9
    【centos6.5 hadoop2.7 _64位一键安装脚本】有问题加我Q直接问
  • 10
    hadoop安装小记
  • 1
    安装hadoop学习笔记
    66
  • 2
    Hadoop的HDFS问题
    75
  • 3
    Hadoop防火墙问题
    80
  • 4
    Hadoop配置
    67
  • 5
    Hadoop网络问题
    118
  • 6
    Hadoop常见问题
    63
  • 7
    java与大数据：Hadoop与MapReduce
    58
  • 8
    在Hadoop节点线缆连接检查中线缆长度
    32
  • 9
    在Hadoop节点线缆连接检查中线缆类型
    39
  • 10
    在Hadoop节点线缆连接检查中物理检查
    34

    • 相关课程

    更多
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第四阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第五阶段
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第六阶段
  • 大数据Hadoop快速入门
  • Hadoop快速入门
  • Hadoop企业优化及扩展案例

    • 相关电子书

    更多
  • 《构建Hadoop生态批流一体的实时数仓》
  • 零基础实现hadoop 迁移 MaxCompute 之 数据
  • CIO 指南:如何在SAP软件架构中使用Hadoop

    • 相关实验场景

    更多
  • 搭建Hadoop环境
    • 下一篇
    阿里云OSS设置跨域访问