AI 助理
备案控制台
开发者社区 大数据 文章 正文

Hadoop 2.x本地库native lib及如何源码编译

2018-02-06 986
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 执行命令bin/hdfs dfs -ls报错image.png报错原因运行的代码与natvie中的代码版本不一致造成image.

执行命令bin/hdfs dfs -ls报错

image.png

报错原因

运行的代码与natvie中的代码版本不一致造成

image.png

下载源码

image.png

上传源码到服务器

image.png

把原理的代码备份重新命名

image.png

解压下载的源码

tar -zxvf /opt/modules/hadoop-2.5.0-src.tar.gz -C /opt/modules/

查看源码中的BUIDING.TXT

image.png

根据此文件的提示,一步一步进行操作即可.

文章标签：
分布式计算
Hadoop
关键词：
hadoop编译
hadoop源码
hadoop库
hadoop源码编译
突突修
目录
相关文章
热烈的马
|
6月前
|
Java Shell 分布式数据库
【大数据技术Hadoop+Spark】HBase数据模型、Shell操作、Java API示例程序讲解（附源码 超详细）
【大数据技术Hadoop+Spark】HBase数据模型、Shell操作、Java API示例程序讲解（附源码 超详细）
热烈的马
148 0
热烈的马
|
6月前
|
分布式计算 Java 大数据
【大数据技术Hadoop+Spark】HDFS Shell常用命令及HDFS Java API详解及实战（超详细 附源码）
【大数据技术Hadoop+Spark】HDFS Shell常用命令及HDFS Java API详解及实战（超详细 附源码）
热烈的马
656 0
愿天堂没有BUG（公众号同名）
|
分布式计算 Hadoop 大数据
字节跳动面试问到Hadoop源码，拿40K进大厂的Java程序员必备技能
大数据由于数据量庞大、数据类型复杂等特点，特别是非结构化或半结构化数据远远多于结构化数据，导致传统关系型数据库让企业面临巨大的成本压力。而 Hadoop 能够很好的提供解决大数据问题的技术手段。因此，Hadoop 技术在大数据中占据着举足轻重的作用，也很受企业的青睐。
愿天堂没有BUG（公众号同名）
69 0
热烈的马
|
6月前
|
分布式计算 大数据 Scala
【大数据技术Hadoop+Spark】Spark RDD创建、操作及词频统计、倒排索引实战（超详细 附源码）
【大数据技术Hadoop+Spark】Spark RDD创建、操作及词频统计、倒排索引实战（超详细 附源码）
热烈的马
238 1
敏叔V587
|
6月前
|
分布式计算 Hadoop Java
hadoop的基础设施-protobuf-2.5.0编译和安装
hadoop的基础设施-protobuf-2.5.0编译和安装
敏叔V587
48 0
星光下的赶路人
|
数据采集 分布式计算 搜索推荐
Hadoop学习---7、OutputFormat数据输出、MapReduce内核源码解析、Join应用、数据清洗、MapReduce开发总结（一）
Hadoop学习---7、OutputFormat数据输出、MapReduce内核源码解析、Join应用、数据清洗、MapReduce开发总结（一）
星光下的赶路人
176 0
热烈的马
|
6月前
|
分布式计算 Hadoop 大数据
【云计算与大数据计算】Hadoop MapReduce实战之统计每个单词出现次数、单词平均长度、Grep（附源码 ）
【云计算与大数据计算】Hadoop MapReduce实战之统计每个单词出现次数、单词平均长度、Grep（附源码 ）
热烈的马
242 1
愿天堂没有BUG（公众号同名）
|
6月前
|
分布式计算 Hadoop 大数据
字节跳动面试问到Hadoop源码，拿40K进大厂的Java程序员必备技能
大数据由于数据量庞大、数据类型复杂等特点，特别是非结构化或半结构化数据远远多于结构化数据，导致传统关系型数据库让企业面临巨大的成本压力。而 Hadoop 能够很好的提供解决大数据问题的技术手段。因此，Hadoop 技术在大数据中占据着举足轻重的作用，也很受企业的青睐。
愿天堂没有BUG（公众号同名）
54 0
热烈的马
|
6月前
|
存储 分布式计算 搜索推荐
【大数据技术Hadoop+Spark】MapReduce之单词计数和倒排索引实战（附源码和数据集 超详细）
【大数据技术Hadoop+Spark】MapReduce之单词计数和倒排索引实战（附源码和数据集 超详细）
热烈的马
172 0
阿甘兄
|
11月前
|
分布式计算 资源调度 Hadoop
从一个简单的命令阅读hadoop源码（下）
从一个简单的命令阅读hadoop源码（下）
阿甘兄
48 0

热门文章

最新文章

  • 1
    阿里云服务器更换公网IP地址教程（两种情况）
  • 2
    Hadoop迁移MaxCompute神器之DataX-On-Hadoop使用指南
  • 3
    ECS 打造云端开发/协同办公 “军火库”
  • 4
    PostgreSQL flashback(闪回) 功能实现与介绍
  • 5
    Hadoop-No.13之数据源系统以及数据结构
  • 6
    spark-2.2.0-bin-hadoop2.6和spark-1.6.1-bin-hadoop2.6发行包自带案例全面详解（java、python、r和scala）之Basic包下的SparkPi.scala（图文详解）
  • 7
    hadoop命令——hdfs
  • 8
    CDH5.4.7安装Hadoop集群安装主机失败
  • 9
    通过java api提交自定义hadoop 作业
  • 10
    hadoop hive 手记
  • 1
    java与大数据：Hadoop与MapReduce
    51
  • 2
    在Hadoop节点线缆连接检查中线缆长度
    28
  • 3
    在Hadoop节点线缆连接检查中线缆类型
    35
  • 4
    在Hadoop节点线缆连接检查中物理检查
    31
  • 5
    Hadoop节点IP地址和子网掩码
    77
  • 6
    Hadoop节点线缆连接检查
    40
  • 7
    Hadoop节点网络硬件检查
    52
  • 8
    Hadoop节点IP地址和子网掩码配置
    87
  • 9
    Hadoop节点检查线缆连接
    45
  • 10
    Hadoop节点检查网络交换机、路由器和网线
    79

    • 相关课程

    更多
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第三阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第五阶段
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第七阶段
  • 大数据Hadoop快速入门
  • Hadoop快速入门
  • Hadoop企业优化及扩展案例

    • 相关电子书

    更多
  • 《构建Hadoop生态批流一体的实时数仓》
  • 零基础实现hadoop 迁移 MaxCompute 之 数据
  • CIO 指南:如何在SAP软件架构中使用Hadoop

    • 相关实验场景

    更多
  • 搭建Hadoop环境
    • 下一篇
    AI助理直击要害，从繁复中提炼精华——使用CDN加速访问OSS存储的图片