Cloudera CDP PvC Base的新功能

简介: 如果您是CDH或HDP用户,则除了从CDH和HDP版本转移到CDP的功能之外,还可以查看CDP PvC Base中可用的新功能。

如果您是CDH或HDP用户,则除了从CDH和HDP版本转移到CDP的功能之外,还可以查看CDP私有云基础版中可用的新功能。

1.从CDH到CDP的新功能

1.1.Ranger2.0

·     动态行过滤和列屏蔽

·     基于属性的访问控制和SparkSQL细粒度访问控制

·     Sentry到Ranger迁移工具

·     新的RMS提供HDFS ACL同步

1.2.Atlas2.0

·     通过提供实体模型扩展来支持业务元数据

·     批量导入业务元数据属性关联和词汇表术语

·     增强的基本搜索和过滤搜索

·     多租户支持并通过增强的UI简化了管理

·     数据血缘和监管链

·     先进的数据发现和业务词汇表

·     Navigator到Atlas的迁移

·     改进的性能和可伸缩性

·     将Ozone与Apache Atlas集成

1.3.Hive3

·     Hive-on-Tez提供更好的ETL性能

·     支持原子性、一致性、隔离性和持久性(ACID)事务

·     全面的ANSI 2016 SQL覆盖

·     支持重大性能改进

·     查询结果缓存

·     代理键

·     物化视图

·     预定查询,使用SQL自动重建物化视图

·     自动翻译Spark-Hive读取,无需HWC会话

·     Hive Warehouse Connector Spark直接读取

·     从Spark授权外部文件写入

·     改进的CBO和矢量化覆盖率

1.4.Ozone

·     HDFS的10倍可扩展性

·     支持十亿个对象和S3原生支持

·     支持密集数据节点

·     快速重启,易于维护

1.5.HBase

·     HBase-Spark连接器

·     重新设计中等大小的对象(MOB),以实现更好的压缩和性能

1.6.Hue

·     使用Knox的基于网关的SSO

·     支持Ranger KMS-Key Trustee集成

1.7.Kudu

·     使用Ranger进行细粒度的授权

·     支持Knox

·     通过滚动重启和自动重新平衡来增强操作

·     大量改进可用性

·     添加了新的数据类型,如DATE,VARCHAR和对HybridClock时间戳的支持

1.8.Yarn

·     新的Yarn队列管理器

·     放置规则使您无需指定队列名称即可提交作业

·     Capacity Scheduler利用延迟调度来满足任务位置约束

·     抢占允许优先级较高的应用程序抢占优先级较低的应用程序

·     不同层次结构下的相同队列名称

·     在队列之间移动应用程序

·     Yarn绝对模式支持

这是CDH堆栈中组件的通用服务级别体系结构。“ Cloudera Applications”,“ Operations and Management”和 “ Encryption”框中的组件在CDH Cluster Services周界中定义的群集包络之外运行。

标有红色“ X”的组件将被弃用并删除,或者用CDP中的备用组件替换。CDP群集体系结构幻灯片中记录了这些更改。

Graphical user interface, application

Description automatically generated

1.9.服务变更

从CDH到CDP的服务更改为:

·      Flume 到 Cloudera Data Flow

·      Navigator 到 Ranger/Atlas

·      Sentry 到 Ranger

·      KeytrusteeKMS到RangerKMS

·      HSM KMS到Key HSM

·      Hive-on-Spark/MR到Hive-on-Tez

·      YARN Fairshare到YARN Capacity

·      Spark 1.6到Spark 2.4

·      NavOpt到WorkloadXM

·      Pig到Hive or Spark

Graphical user interface, application

Description automatically generated

2.从HDP到CDP的新功能

2.1.ClouderaManager

·     虚拟私有集群

·     自动传输加密设置

·     管理员的基于角色的细粒度访问控制(RBAC)

·     简化的维护工作流程

2.2.Solr8.4

·     在非结构化数据(文本,pdf,.jpg等)上基于相关性的文本搜索

2.3.Impala

·     更适合Data Mart迁移用例(交互式,BI样式查询)

·     能够查询大型集群中的大量数据(“大数据”)

·     集群环境中的分布式查询,方便扩展

·     与Kudu集成以获取快速数据,与Ranger集成以获取授权策略

·     快速BI查询支持使用单个系统进行大数据处理和分析,因此客户避免了昂贵的建模和ETL将分析添加到数据湖中。

2.4.Hue

·     内置SQL编辑器,可自动完成智能查询

·     共享查询,图表结果并下载任何数据库

·     轻松搜索,浏览和导入数据集或作业

2.5.Kudu

·     更好的提取和查询性能,可快速更改/更新数据。通过Kudu和Impala更新支持报告

·     带有Kudu + Spark的实时和流式应用程序

·     时间序列分析,事件分析和实时数据仓库以最智能的自动完成功能提供最佳的查询体验

2.6.Yarn

·     过渡到Capacity Scheduler的工具

·     新的Yarn队列管理器

·     Capacity Scheduler利用延迟调度来满足任务位置约束

·     抢占允许优先级较高的应用程序抢占优先级较低的应用程序

·     不同层次结构下的相同队列名称

·     在队列之间移动应用程序

·     Yarn的绝对模式支持

2.7.加密

·     自动TLS功能可自动执行启用TLS加密所需的所有步骤

·     Ranger KMS与Key Trustee Server集成以提供附加的密钥提供程序存储

·     使用NavEncrypt进行静态加密

原文链接:https://docs.cloudera.com/cdp-private-cloud/latest/upgrade/topics/cdpdc_cdp_pvcbase_new_features.html

目录
相关文章
|
存储 大数据 Apache
大数据治理系统框架Apache Atlas实践
大数据元数据和数据管理框架 Apache Atlas实践 今天技术小伙伴占卫同学分享了Apache Atlas元数据管理实践,被atlas的强大的血缘关系管理能力震撼,以下为本次分享内容: •Apache Atlas简介 •Apache Atlas架构 ...
10724 0
|
存储 监控 druid
Druid、ClickHouse、Doris、StarRocks 的区别与分析
本文对比了 Druid、ClickHouse、Doris 和 StarRocks 四款大数据分析引擎。它们均为 OLAP 引擎,采用列式存储和分布式架构,适用于海量数据分析。Druid 擅长实时分析与高并发查询;ClickHouse 以超高性能著称,适合复杂查询;Doris 提供易用的 SQL 接口,性能均衡;StarRocks 则以其极速查询和实时更新能力脱颖而出。各引擎在数据模型、查询性能、数据更新和存储方面存在差异,适用于不同的业务场景。选择时需根据具体需求综合考虑。
8618 20
|
SQL 消息中间件 Kafka
atlas 集成cdh
atlas 集成cdh
atlas 集成cdh
|
6天前
|
Linux Go 开发工具
手机上跑 DeepSeek 智能体:开源安卓客户端 DSH Go 安装与使用指南
DSH Go 是一款开源安卓客户端,将 DeepSeek Harness 智能体引擎装进手机:免 Root、免 Termux,一键安装即用;支持本机运行(内置 Ubuntu+Node.js)或远程接管电脑会话;具备插话打断、过程折叠、屏幕操控、端到端加密分享等特色功能,真正实现智能体“口袋化”。
8300 19
|
6天前
|
弹性计算 人工智能 API
Codex超详细入门指南(下载·安装·登录·上手,全版本覆盖,2026最新版)
建议收藏本教程,2026 全年各版本更新随时回来查阅。如果你在搭建过程中遇到任何问题,欢迎结合 阿里云工单系统 提交技术支持请求,或在 阿里云开发者社区 搜索 Codex 相关话题交流。 祝你编码愉快,效率翻倍!
2547 12
|
1天前
|
人工智能 安全 应用服务中间件
NGINX 爆出两处高危漏洞 可导致未经身份验证的远程代码执行
NGINX曝出两个高危漏洞(CVE-2026-123633和CVE-2026-123007),CVSS 9.2分,均属HTTP/2内存安全缺陷,无需认证即可远程执行代码。影响自2015年起的多个版本,静态站点亦受威胁。修复版本为开源版1.30.7/1.31.9。(239字)
1248 0
NGINX 爆出两处高危漏洞 可导致未经身份验证的远程代码执行
|
4天前
|
传感器 安全 区块链
Windows 电脑运行安卓应用教程:开源工具 ApkStart 双击 APK 即装、独立窗口运行
ApkStart 是一款开源Windows工具,让安卓APP像原生软件一样运行:双击APK即安装、生成真实图标、独立窗口启动、开始菜单可搜索。无需传统模拟器,内置QEMU运行时,支持数据互通、ARM兼容与命令行操作。(239字)
|
9天前
|
人工智能 前端开发 API
阿里云Qwen4-Max 大模型详解:定位、特征、能力、适用场景与相对Qwen3-Max差异解析
2026年11月11日,阿里发布第四代旗舰模型Qwen4-Max预览版,首发千问AI平台Token Plan并接入千问办公、Qoder等入口。该版本聚焦知识理解、世界感知、编程与Agentic四项升级,主打复杂编程、专业办公、前端设计与专业软件操作等真实任务。预览期为11月11日10:00至11月25日24:00,仅支持Token Plan调用,到期后模型标识下线;限时2折、新用户再享5折,最低1折可体验。
|
9天前
|
JSON 前端开发 API
阿里云最新Qwen4-Max大模型介绍:模型定位、特征、能力、适用场景解析
2026 年 11 月 11 日,阿里发布第四代旗舰模型Qwen4-Max预览版,首发千问 AI 平台 Token Plan,并同步接入千问办公、Qoder 等入口。该版本聚焦知识理解、世界感知、编程与 Agentic 四项升级,主打复杂编程、专业办公、前端设计与专业软件操作。预览期至 11 月 25 日 24:00,到期后模型标识下线;限时 2 折、新用户再享 5 折,最低 1 折可体验。
|
22天前
|
Linux 开发工具 iOS开发
Codex保姆级教程(下载+安装+登录+使用,含所有版本,2026最新)
Codex是OpenAI推出的开源AI编程智能体,本地运行,可理解整个代码库,支持自然语言指令改代码、执行命令、跑测试、修Bug,兼容Win/macOS/Linux。(239字)
10708 59

热门文章

最新文章