AI 助理
备案控制台
开发者社区 大数据 文章 正文

Hadoop 2.x本地库native lib及如何源码编译

2018-02-06 987
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 执行命令bin/hdfs dfs -ls报错image.png报错原因运行的代码与natvie中的代码版本不一致造成image.

执行命令bin/hdfs dfs -ls报错

image.png

报错原因

运行的代码与natvie中的代码版本不一致造成

image.png

下载源码

image.png

上传源码到服务器

image.png

把原理的代码备份重新命名

image.png

解压下载的源码

tar -zxvf /opt/modules/hadoop-2.5.0-src.tar.gz -C /opt/modules/

查看源码中的BUIDING.TXT

image.png

根据此文件的提示,一步一步进行操作即可.

文章标签：
分布式计算
Hadoop
关键词：
hadoop编译
hadoop源码
hadoop库
hadoop源码编译
突突修
目录
相关文章
热烈的马
|
6月前
|
Java Shell 分布式数据库
【大数据技术Hadoop+Spark】HBase数据模型、Shell操作、Java API示例程序讲解（附源码 超详细）
【大数据技术Hadoop+Spark】HBase数据模型、Shell操作、Java API示例程序讲解（附源码 超详细）
热烈的马
148 0
热烈的马
|
6月前
|
分布式计算 Java 大数据
【大数据技术Hadoop+Spark】HDFS Shell常用命令及HDFS Java API详解及实战（超详细 附源码）
【大数据技术Hadoop+Spark】HDFS Shell常用命令及HDFS Java API详解及实战（超详细 附源码）
热烈的马
668 0
愿天堂没有BUG（公众号同名）
|
分布式计算 Hadoop 大数据
字节跳动面试问到Hadoop源码，拿40K进大厂的Java程序员必备技能
大数据由于数据量庞大、数据类型复杂等特点，特别是非结构化或半结构化数据远远多于结构化数据，导致传统关系型数据库让企业面临巨大的成本压力。而 Hadoop 能够很好的提供解决大数据问题的技术手段。因此，Hadoop 技术在大数据中占据着举足轻重的作用，也很受企业的青睐。
愿天堂没有BUG（公众号同名）
70 0
热烈的马
|
6月前
|
分布式计算 大数据 Scala
【大数据技术Hadoop+Spark】Spark RDD创建、操作及词频统计、倒排索引实战（超详细 附源码）
【大数据技术Hadoop+Spark】Spark RDD创建、操作及词频统计、倒排索引实战（超详细 附源码）
热烈的马
247 1
敏叔V587
|
6月前
|
分布式计算 Hadoop Java
hadoop的基础设施-protobuf-2.5.0编译和安装
hadoop的基础设施-protobuf-2.5.0编译和安装
敏叔V587
48 0
星光下的赶路人
|
数据采集 分布式计算 搜索推荐
Hadoop学习---7、OutputFormat数据输出、MapReduce内核源码解析、Join应用、数据清洗、MapReduce开发总结（一）
Hadoop学习---7、OutputFormat数据输出、MapReduce内核源码解析、Join应用、数据清洗、MapReduce开发总结（一）
星光下的赶路人
176 0
热烈的马
|
6月前
|
分布式计算 Hadoop 大数据
【云计算与大数据计算】Hadoop MapReduce实战之统计每个单词出现次数、单词平均长度、Grep（附源码 ）
【云计算与大数据计算】Hadoop MapReduce实战之统计每个单词出现次数、单词平均长度、Grep（附源码 ）
热烈的马
244 1
愿天堂没有BUG（公众号同名）
|
6月前
|
分布式计算 Hadoop 大数据
字节跳动面试问到Hadoop源码，拿40K进大厂的Java程序员必备技能
大数据由于数据量庞大、数据类型复杂等特点，特别是非结构化或半结构化数据远远多于结构化数据，导致传统关系型数据库让企业面临巨大的成本压力。而 Hadoop 能够很好的提供解决大数据问题的技术手段。因此，Hadoop 技术在大数据中占据着举足轻重的作用，也很受企业的青睐。
愿天堂没有BUG（公众号同名）
54 0
热烈的马
|
6月前
|
存储 分布式计算 搜索推荐
【大数据技术Hadoop+Spark】MapReduce之单词计数和倒排索引实战（附源码和数据集 超详细）
【大数据技术Hadoop+Spark】MapReduce之单词计数和倒排索引实战（附源码和数据集 超详细）
热烈的马
177 0
阿甘兄
|
11月前
|
分布式计算 资源调度 Hadoop
从一个简单的命令阅读hadoop源码（下）
从一个简单的命令阅读hadoop源码（下）
阿甘兄
48 0

热门文章

最新文章

  • 1
    Hadoop迁移MaxCompute神器之DataX-On-Hadoop使用指南
  • 2
    阿里Java代码规约插件即将全球首发，邀您来发布仪式现场
  • 3
    淘宝 NPM 镜像
  • 4
    MySQL数据表生成ER图
  • 5
    Object reference not set to an instance of an object.
  • 6
    Hadoop-No.13之数据源系统以及数据结构
  • 7
    spark-2.2.0-bin-hadoop2.6和spark-1.6.1-bin-hadoop2.6发行包自带案例全面详解（java、python、r和scala）之Basic包下的SparkPi.scala（图文详解）
  • 8
    CDH5.4.7安装Hadoop集群安装主机失败
  • 9
    通过java api提交自定义hadoop 作业
  • 10
    linux下安装hadoop步骤
  • 1
    大数据Hadoop生态圈体系视频课程
    51
  • 2
    Apache Hadoop YARN基本架构
    85
  • 3
    hadoop模块
    62
  • 4
    使用Hadoop和Nutch构建音频爬虫：实现数据收集与分析
    91
  • 5
    Hadoop快速入门——第一章、认识Hadoop与创建伪分布式模式(Hadoop3.1.3版本配置)
    139
  • 6
    百度搜索：蓝易云【Ubuntu搭建全分布式Hadoop】
    56
  • 7
    hadoop升级流程
    171
  • 8
    使用Sqoop将数据从Hadoop导出到关系型数据库
    228
  • 9
    使用Sqoop将数据导入Hadoop的详细教程
    319
  • 10
    Hadoop和Hive中的数据倾斜问题及其解决方案
    103

    • 相关课程

    更多
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第一阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第二阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第三阶段
  • 大数据Hadoop快速入门
  • Hadoop快速入门
  • Hadoop企业优化及扩展案例

    • 相关电子书

    更多
  • 《构建Hadoop生态批流一体的实时数仓》
  • 零基础实现hadoop 迁移 MaxCompute 之 数据
  • CIO 指南:如何在SAP软件架构中使用Hadoop

    • 相关实验场景

    更多
  • 搭建Hadoop环境
    • 下一篇
    阿里云无影云电脑免费试用，最长可试用3个月