【阿里云 CDP 公开课】 第四讲:如何访问CDP集群

简介: Cloudera 和阿里云进行深度合作推出了基于阿里云部署的 Cloudera 企业数据云平台,即 CDP 平台。本文主要介绍集群访问Web-UI的方式。

本期导读 :【阿里云 CDP 公开课】第四讲


主题:如何访问 CDP 集群

讲师:佳亮,阿里云计算平台事业部生态技术


内容框架:

  • 前提条件
  • 使用 SSH 隧道方式访问 WEB 服务
  • 使用 Knox代理方式访问 WEB 服务



直播回放链接:(第4讲)

https://developer.aliyun.com/live/248263


前提条件

  • CDP 集群已经成功拉起来了以后
  • 成功添加安全组白名单,并可以成功访问 CM 管控。


使用 SSH 隧道方式访问 WEB 服务

创建从本地服务器开放端口到集群主节点的 SSH 隧道,并运行侦听该端口的本地 SOCKS 代理服务器,端口的数据会由 SSH 隧道转发到集群主节点


创建 SSH 隧道

  • 密钥的方式
ssh-i<密钥文件路径>-N-D8157root@<主节点公网IP地址>
  • 密码的方式
ssh-N-D8157root@<主节点公网IP地址>

相关参数描述如下:

  • 8157:本地服务器端口以8157为例,实际配置时,您可使用本地服务器未被使用的任意一个端口。
  • -D:使用动态端口转发,启动 SOCKS 代理进程并侦听用户本地端口。
  • <主节点公网IP地址>:获取方式请参见获取主节点的公网IP地址。
  • <密钥文件路径>:密钥文件保存的路径。


配置浏览器

完成动态转发配置以后,您可以从以下两种方式中选择一种来进行浏览器配置。


方式1--Chrome 浏览器命令行方式

  1. 打开命令行窗口,进入本地 Google Chrome 浏览器客户端的安装目录。

操作系统不同,Chrome 浏览器的默认安装目录不同。


操作系统

Chrome默认安装路径

Mac OS X

"/Applications/Google Chrome.app/Contents/MacOS/Google Chrome" \

--user-data-dir="$HOME/chrome-with-proxy" \

--proxy-server="socks5://localhost:8157"

Linux

/usr/bin/google-chrome \ --user-data-dir="$HOME/chrome-with-proxy" \ --proxy-server="socks5://localhost:8157"

Windows

"C:\Program Files (x86)\Google\Chrome\Application\chrome.exe" ^ --user-data-dir="%USERPROFILE%\chrome-with-proxy" ^ --proxy-server="socks5://localhost:8157"

  • 8157:本地服务器端口以8157为例,实际配置时,您可使用本地服务器未被使用的任意一个端口。


在此 Chrome 会话中,您就可以通过内网访问 Cloudera Manager 和其他 Web UI 了。比如:http://cdp-master-1.xxxx.cn-hangzhou.cdp.aliyuncs.com:9870/dfshealth.html#tab-overview

image.png


方式2--配置代理扩展程序的方式

代理扩展程序可以帮助您更加轻松地在浏览器中管理和使用代理,确保网页浏览和集群 Web UI 访问互不干扰。

image.png

  • 安装完成以后,单击 SwitchyOmega 插件,然后在弹出框中选择选项进行配置。
  • 单击新建情景模式,输入情景模式名称(例如SSH pac),情景模式类型选择 PAC 情景模式。
  • 在 PAC 脚本中配置以下内容。
functionregExpMatch(url, pattern) {    
try { returnnewRegExp(pattern).test(url); } catch(ex) { returnfalse; }    
}
functionFindProxyForURL(url, host) {
// Important: replace 172.31 below with the proper prefix for your VPC subnetif (shExpMatch(url, "*localhost*")) return"SOCKS5 localhost:8157";
if (shExpMatch(url, "*cdp-*")) return"SOCKS5 localhost:8157";
return'DIRECT';
}
  • 完成上述参数配置后,在左侧导航栏中单击应用选项。
  • 打开 Chrome 浏览器,在 Chrome 中单击 SwitchyOmega 插件,切换到之前创建的 SSH tunnel 情景模式下。

image.png

  • 登录 CDP 管控,访问相应服务的 Web UI。 例如:访问 Ranger 页面

image.png


使用 Knox 代理方式访问 WEB 服务

登录到 Knox 所在节点,执行如下命令:

  • 先创建用户 test, 并设置 test 的密码:
1. 先创建用户 test, 并设置test的密码:
> useradd test
> passwd test
  • 将用户 knox 添加到 admin 用户组中:
> usermod -a -G test knox
  • 创建 shadow 组,将 knox 添加到 shadow 组中
# 创建group shadow
> groupadd shadow
# 将root添加到shadow组里
> usermod -a -G shadow root
# 将knox添加到shadow组里
> usermod -a -G shadow knox
# 将文件/etc/shadow的group修改为 shadow
> chgrp shadow /etc/shadow
# 添加/etc/shadow文件 组的读权限:
> chmod g+r /etc/shadow
groupadd shadow
usermod -a -G shadow root
usermod -a -G shadow knox
chgrp shadow /etc/shadow
chmod g+r /etc/shadow

knox 登录页面:https://{ip}:8443/gateway/homepage/home/


使用 admin 用户名+ 密码成功登陆

image.png

image.png


备注--Knox 匹配规则:

^.*$;^https?:(.+\.cdp\.aliyun\.com):[0-9]+?.*$




image.png

大家如果对产品感兴趣,欢迎加入到阿里云 Cloudera 企业数据云交流群。对产品有任何疑问都可以在交流群里咨询。


以下是产品的链接,有需要的用户可以直接点击链接访问和使用产品。


阿里云官网:https://ac.aliyun.com/application/cloudera

或直接访问:https://market.aliyun.com/products/201190008/cmgj00047952.html

免费测试申请:https://survey.aliyun.com/apps/zhiliao/owtTaIQU3




相关文章
|
存储 SQL 分布式计算
【阿里云 CDP 公开课】 第三讲:CDP 集群管理
Cloudera 和阿里云进行深度合作推出了基于阿里云部署的 Cloudera 企业数据云平台,即 CDP 平台。本文的主要内容是关于CDP的集群管理。Cloudera Manager 是全功能企业级集群管理平台,提供最佳的系统利用率并满足 SLA 承诺,覆盖集群所有资源与服务的统一配置、管理、监控、诊断等管理功能。
【阿里云 CDP 公开课】 第三讲:CDP 集群管理
|
JSON 前端开发 API
Gin第五天---数据解析和绑定
Gin第五天---数据解析和绑定
345 0
Gin第五天---数据解析和绑定
|
6天前
|
Linux Go 开发工具
手机上跑 DeepSeek 智能体:开源安卓客户端 DSH Go 安装与使用指南
DSH Go 是一款开源安卓客户端,将 DeepSeek Harness 智能体引擎装进手机:免 Root、免 Termux,一键安装即用;支持本机运行(内置 Ubuntu+Node.js)或远程接管电脑会话;具备插话打断、过程折叠、屏幕操控、端到端加密分享等特色功能,真正实现智能体“口袋化”。
8300 19
|
6天前
|
弹性计算 人工智能 API
Codex超详细入门指南(下载·安装·登录·上手,全版本覆盖,2026最新版)
建议收藏本教程,2026 全年各版本更新随时回来查阅。如果你在搭建过程中遇到任何问题,欢迎结合 阿里云工单系统 提交技术支持请求,或在 阿里云开发者社区 搜索 Codex 相关话题交流。 祝你编码愉快,效率翻倍!
2547 12
|
1天前
|
人工智能 安全 应用服务中间件
NGINX 爆出两处高危漏洞 可导致未经身份验证的远程代码执行
NGINX曝出两个高危漏洞(CVE-2026-123633和CVE-2026-123007),CVSS 9.2分,均属HTTP/2内存安全缺陷,无需认证即可远程执行代码。影响自2015年起的多个版本,静态站点亦受威胁。修复版本为开源版1.30.7/1.31.9。(239字)
1248 0
NGINX 爆出两处高危漏洞 可导致未经身份验证的远程代码执行
|
4天前
|
传感器 安全 区块链
Windows 电脑运行安卓应用教程:开源工具 ApkStart 双击 APK 即装、独立窗口运行
ApkStart 是一款开源Windows工具,让安卓APP像原生软件一样运行:双击APK即安装、生成真实图标、独立窗口启动、开始菜单可搜索。无需传统模拟器,内置QEMU运行时,支持数据互通、ARM兼容与命令行操作。(239字)
|
9天前
|
人工智能 前端开发 API
阿里云Qwen4-Max 大模型详解:定位、特征、能力、适用场景与相对Qwen3-Max差异解析
2026年11月11日,阿里发布第四代旗舰模型Qwen4-Max预览版,首发千问AI平台Token Plan并接入千问办公、Qoder等入口。该版本聚焦知识理解、世界感知、编程与Agentic四项升级,主打复杂编程、专业办公、前端设计与专业软件操作等真实任务。预览期为11月11日10:00至11月25日24:00,仅支持Token Plan调用,到期后模型标识下线;限时2折、新用户再享5折,最低1折可体验。
|
9天前
|
JSON 前端开发 API
阿里云最新Qwen4-Max大模型介绍:模型定位、特征、能力、适用场景解析
2026 年 11 月 11 日,阿里发布第四代旗舰模型Qwen4-Max预览版,首发千问 AI 平台 Token Plan,并同步接入千问办公、Qoder 等入口。该版本聚焦知识理解、世界感知、编程与 Agentic 四项升级,主打复杂编程、专业办公、前端设计与专业软件操作。预览期至 11 月 25 日 24:00,到期后模型标识下线;限时 2 折、新用户再享 5 折,最低 1 折可体验。
|
22天前
|
Linux 开发工具 iOS开发
Codex保姆级教程(下载+安装+登录+使用,含所有版本,2026最新)
Codex是OpenAI推出的开源AI编程智能体,本地运行,可理解整个代码库,支持自然语言指令改代码、执行命令、跑测试、修Bug,兼容Win/macOS/Linux。(239字)
10708 59

热门文章

最新文章