Cloudera 软件分发管理

简介: Cloudera Manager的主要功能是安装和升级Cloudera Runtime和其他托管服务。Cloudera Manager支持两种软件分发格式:package和parcel。

Cloudera Manager的主要功能是安装和升级Cloudera Runtime和其他托管服务。Cloudera Manager支持两种软件分发格式:package和parcel。

package 是包含了编译的代码和元信息的二进制分发格式,其中元数据包括诸如 package 描述、版本、和依赖。程序包管理系统评估此元信息,以允许程序包搜索,执行对较新版本的升级并确保满足程序包的所有依赖关系。Cloudera Manager 对每个受支持的 OS 使用原生的系统软件包管理器来安装和升级 Cloudera Manager。


Parcel 是包含程序文件的二进制分发格式,与由 Cloudera 的管理器使用的附加元数据。parcel 具有以下优点:

  • parcel 是独立的,并安装在版本目录中,这意味着可以并行安装给定 parcel 的多个版本。然后,您可以将这些已安装版本之一指定为活动版本。使用软件 package 时,一次只能安装一个软件 package,因此在安装内容和活动内容之间没有区别。
  • 滚动升级需要 parcel。
  • 您可以在文件系统中的任何位置安装 parcel。它们默认安装在中/opt/cloudera/parcels。相反,软件 package 安装在中/usr/lib。
  • 从 parcel 安装时页面上,Cloudera Manager 会自动为群集中每个主机上运行的操作系统下载、分发和激活正确的 parcel。组成逻辑集群的所有 Cloudera Runtime 主机必须在相同的主要OS版本上运行,才能被 Cloudera 支持覆盖。Cloudera Manager 必须与其所管理的至少一个 Cloudera Runtime 集群在相同的主要OS版本上运行,才能被 Cloudera 支持所涵盖。运行不同的次要操作系统版本引起的问题风险被认为低于运行不同的次要操作系统版本引起的风险。Cloudera 建议运行相同的次要发行版跨集群,因为它可以简化问题跟踪和可支持性。

image.png

由于其独特的属性,与 package 相比,parcel 具有以下优点:

  • 将 Cloudera Runtime 分发为单个对象-将 parcel 作为单个对象分发,而不是为 Cloudera Runtime 的每个组件都具有单独的 package。这样可以更轻松地将软件分发到未连接到 Internet 的群集。
  • 内部一致性-所有 Cloudera Runtime 组件都匹配,从而消除了从不同 Cloudera Runtime 版本安装组件的可能性。
  • /usr之外安装-在某些环境中,Hadoop 管理员没有安装系统软件包的特权。有了 parcel,管理员可以安装到 /opt或其他任何地方。


注意

使用 parcel,Cloudera Runtime 库的路径/opt/cloudera/parcels/Cloudera Runtime/lib 不是通常的 /usr/lib。不要将 /usr/lib/ 元素链接到 parcel 部署的路径,因为链接会导致无法区分两个路径的脚本。

  • 不使用 sudo 命令就可以安装 Cloudera Runtime。parcel 的安装由以 root 或另一个用户身份运行的 Cloudera Manager Agent 处理,因此您可以不带 sudo。
  • 分发与激活脱钩-通过并行安装功能,您可以在切换到集群之前在集群中暂存新版本的 Cloudera Runtime。这样可以在不影响群集操作的情况下提前完成升级中最耗时的部分,从而减少停机时间。
  • 滚动升级-使用软件包要求您关闭旧进程,升级软件 package,然后启动新进程。错误可能很难恢复,升级需要与程序包管理系统进行广泛集成才能无缝运行。使用 parcel,并排暂存新版本时,您可以通过简单地更改重新启动每个进程时使用的Cloudera Runtime 版本来切换到新的次要版本。然后,您可以通过滚动重新启动来执行升级,其中以正确的顺序重新启动服务角色,以最小的服务中断切换到新版本。在整个群集中暂存新版本时,您的群集可以继续在现有已安装的组件上运行,不会影响您目前的运营。主要版本升级(例如,从 CDH5到 Cloudera Runtime 7)需要重新启动所有服务,因为版本之间存在重大变化。最后,您可以同时升级单个 parcel 或多个 parcel。
  • 升级管理-Cloudera Manager 管理 Cloudera Runtime 集群升级中的所有步骤。
  • 其他组件-parcel 不局限于 Cloudera Runtime。LZO 和附加服务的 parcel 也可以使用。
  • 与其他分发工具的兼容性-Cloudera Manager 与您用于下载和分发的其他工具(例如Puppet)一起使用。或者,如果您的集群没有 Internet 连接,则可以手动将parcel 下载到 Cloudera Manager Server,然后让 Cloudera Manager 将 parcel 分发到集群。




点击链接参与阿里云CDP限时免费测试啦~

https://survey.aliyun.com/apps/zhiliao/owtTaIQU3


钉钉扫描下方二维码加入阿里云 Cloudera 企业数据云交流群一起参与讨论吧!

d0ac74ecbea740db9424e2c277fae75d.jpg

相关文章
|
缓存 移动开发 网络协议
WebSocket 协议原理抓包分析
WebSocket 协议原理抓包分析
1969 0
|
缓存 网络协议 应用服务中间件
NATAPP - 连不上 / 错误信息等问题解决汇总
NATAPP - 连不上 / 错误信息等问题解决汇总
5206 0
NATAPP - 连不上 / 错误信息等问题解决汇总
|
JavaScript
NATAPP使用教程(内网穿透)
NATAPP使用教程(内网穿透)
3842 0
|
3月前
|
缓存 监控 API
🧱《1688 API收费模型:免费额度+资源包+按量付费三层架构与购买攻略》(附Python源码)
1688开放平台采用“L1基础免费(QPS硬限:搜索10/s、订单20/s)+ L2年包提频/高级库存(980~2980元/年)+ L3极少触发的按量超包(≈0.001~0.01元/次)”三层计费模式。商品同步、订单回流、物流查询零调用费,但防超卖、多SKU监控、跨境增强等刚需功能必须购买资源包。
|
5月前
|
人工智能 网络安全 新制造
孟庆涛:AI 为什么会 “说谎”?GEO 给出了终极答案
生成式AI时代,“幻觉危机”正威胁品牌真实——Gartner指出品牌信息错误率高达37%。辽宁粤穗孟庆涛首创“生成式引擎优化(GEO)”,以权威信源布局、可溯源数据嵌入、交叉验证结构、虚假信息对冲四大技术,让品牌成为AI信赖的“高优先级食材”,筑牢信任护城河。(239字)
359 0
|
8月前
|
人工智能 弹性计算 Ubuntu
OpenClaw+Ollama v0.18.1 联网搜索全攻略:阿里云+本地三系统部署+千问/Coding Plan配置及问题排查
2026年,本地AI智能体已进入实用化阶段,OpenClaw(原Clawdbot/Moltbot)凭借强大的插件生态与多渠道接入能力,成为主流开源AI助手框架。Ollama v0.18.1版本带来工具调用优化、云模型无缝直连、结构化输出等核心升级,搭配@ollama/openclaw-web-search官方联网插件,可让OpenClaw突破本地模型知识截止日期限制,实现实时联网检索、信息整理、数据追踪等能力。本文基于最新版本,完整覆盖Windows11/MacOS/Linux本地部署、阿里云ECS云端部署、Ollama v0.18.1对接、联网搜索插件配置、阿里云千问API与免费Coding
3576 19
|
存储 BI 网络安全
等保合规日志 “暗礁” 识别:5 个常见错误 + 规避方法
等保合规日志常陷五大误区:设备日志分散、存储周期短、格式不统一、易篡改、报表难生成。本文揭示常见“暗礁”并提供实用规避方案,结合工具实现日志统一采集、标准化解析、防篡改存储与一键合规报表,助力企业将日志管理从“补作业”升级为“日常控”,夯实安全合规基石。(238字)
485 2
|
11月前
|
SQL 存储 NoSQL
简述关系型与非关系型数据库的区别
关系型数据库基于表结构,支持SQL和事务,易于维护但读写性能差、灵活性不足;非关系型数据库格式灵活、速度快、成本低,适用于高并发场景,但缺乏SQL支持与事务机制,复杂查询较弱。
|
网络安全 开发工具 数据安全/隐私保护
自建内网穿透服务器
本文介绍了如何使用FRP实现内网穿透。首先准备一台具有公网IP的云服务器和一台内网服务器,接着在云服务器上安装Docker和FRP服务端,配置`frps.ini`文件并启动服务。在内网服务器上手动安装FRP客户端,配置`frpc.ini`文件并启动服务。最后通过FRP控制台验证连接状态,确保可以通过公网IP访问内网服务。
6522 10
自建内网穿透服务器
Threejs制作骨骼模型
这篇文章详细介绍了在Three.js中创建骨骼动画的过程,包括骨骼节点的创建、权重设置以及控制骨骼关节实现动态效果的步骤,并通过一个具体的圆柱体模型演示了如何添加和控制骨骼动画。
804 2

热门文章

最新文章