Notebook支持归档查询、多表数据分析

简介: DMS Notebook支持查询OSS、专属存储及托管数据库的归档数据,替代原逻辑数仓功能。操作三步:创建工作空间并开通资源→创建Notebook文件与会话(需授权OSS)→用SQL/Python执行跨源查询与分析。(239字)

Dms的Notebook支持查询归档到 专属存储、Oss存储的数据查询,以及数据库实例的数据查询(原逻辑数仓里查询归档数据,后续下线之后,可以通过Notebook来查归档的数据)

开始Notebook的数据分析查询,大致有这几个步骤

  1. 创建工作空间,开通Notebook资源
  2. Notebook查询: sql、python
  3. 分析数据

创建工作空间

进入dms首页,找到 【快捷菜单】 -> 【工作空间】

创建完之后,点击工作空间名称进入工作空间

创建Notebook文件

进入工作空间之后,整个工作空间的布局是个常见的编辑器布局,快速创建一个Notebook文件

创建Notebook会话

这里需要注意,在配置 保存之后,会出现一个授权按钮,根据提示授权oss,之后工作空间的notebook就可以访问这个oss的数据了

执行notebook查询

在完成notebook会话的创建之后,就可以正式查询数据了

查询oss归档的数据

如上挂载的oss,在授权了oss的权限之后,通过notebook里的sql cell 就可以完成数据查询了

查询的路径除了使用挂载路径, 还可以直接使用oss://${bucket}/xxxx 的方式(前提还是需要授权oss给当前这个工作空间):

这样就能查询归档到oss里的数据了。

上面的这个oss路径如何获取呢?可以在归档页面上直接复制到一段:

复制的是一个相对路径,需要根据挂载情况、或者 oss bucket的路径 拼接,拼接之后即可查询

查询dms托管的实例数据

要查询托管在dms的数据库实例,需要先将实例添加到工作空间:

然后在notebook文件中加入查询sql的cell:

在更复杂的情况下,需要查询多个实例、db的数据并做交叉计算,这种情况在notebook里和可以比较轻松的实现:

你可以选择用python代码、或者duckdb的sql来处理异构数据源的数据

查询专属存储归档的数据

专属存储的归档数据当前还不能直接查询,等归档里的专属存储迁移上线之后,迁移工具可将归档的数据迁移到您的私有oss中:

之后的查询,和oss归档数据查询类似,参考上面的章节。

目录
相关文章
|
人工智能 弹性计算 运维
阿里云 MCP Server 开箱即用!
本文介绍了如何通过alibaba-cloud-ops-mcp-server和MCP(Model Context Protocol)实现AI助手对阿里云资源的复杂任务操作。内容涵盖背景、准备步骤(如使用VS Code与Cline配置MCP Server)、示例场景(包括创建实例、监控实例、运行命令、启停实例等),以及支持的工具列表和参考文档。借助这些工具,用户可通过自然语言与AI助手交互,完成ECS实例管理、VPC查询、云监控数据获取等运维任务,实现高效“掌上运维”。
|
机器学习/深度学习 人工智能 自然语言处理
构建企业级数据分析助手:Data Agent 开发实践
本篇将介绍DMS的一款数据分析智能体(Data Agent for Analytics )产品的技术思考和实践。Data Agent for Analytics 定位为一款企业级数据分析智能体, 基于Agentic AI 技术,帮助用户查数据、做分析、生成报告、深入洞察。由于不同产品的演进路径,背景都不一样,所以只介绍最核心的部分,来深入剖析如何构建企业级数据分析助手:能力边界定义,技术内核,企业级能力。希望既能作为Data Agent for Analytics产品的技术核心介绍,也能作为读者的开发实践的参考。
2694 3
构建企业级数据分析助手:Data Agent 开发实践
|
人工智能 安全 Dubbo
Spring AI 智能体通过 MCP 集成本地文件数据
MCP 作为一款开放协议,直接规范了应用程序如何向 LLM 提供上下文。MCP 就像是面向 AI 应用程序的 USB-C 端口,正如 USB-C 提供了一种将设备连接到各种外围设备和配件的标准化方式一样,MCP 提供了一个将 AI 模型连接到不同数据源和工具的标准化方法。
10371 121
|
Java Shell 应用服务中间件
Mac系统下配置环境变量:Javajdk、maven、tomcat 环境变量配置及对应配置文件
这篇文章介绍了如何在Mac系统下配置Java JDK、Maven和Tomcat的环境变量,包括配置文件的选择、解决环境变量在zsh shell中无效的问题、查看和设置系统环境变量的方法,以及JDK和Maven的下载、配置和测试步骤。
7274 1
Mac系统下配置环境变量:Javajdk、maven、tomcat 环境变量配置及对应配置文件
|
人工智能 算法 IDE
IDEA中通义灵码的使用技巧
大家好,我是 V 哥。在日常开发中,我常用通义灵码辅助编程,尤其在解释代码和生成单元测试方面表现优异。本文将详细介绍通义灵码的安装、使用方法及优化建议功能,帮助你提升开发效率。关注威哥爱编程,编码路上我们一起前行。
11329 7

热门文章

最新文章