分布式计算

首页 标签 分布式计算
# 分布式计算 #
关注
38098内容
|
2月前
|
【数据开发】字段怎么算、改了影响谁?我做了一个能直接问 AI 的 SQL 血缘工具
Scope Lineage 是一款面向 Spark/Hive SQL 的开源字段级血缘分析工具,支持静态解析、AI 问答与自动 mapping 文档生成,精准追踪字段来源、加工逻辑及影响范围,大幅提升数仓开发与治理效率。(239字)
|
2月前
|
四川航空湖仓一体:基于 SelectDB / Apache Doris 的多源数据联邦分析实践
四川航空基于 SelectDB / Apache Doris 构建湖仓一体实时数仓,通过 Multi-Catalog 联邦查询、多模型建模、Merge-on-Write 高频更新与倒排索引,破解多源异构数据整合难题,实现导入提效3–6倍、查询提速10–18倍、实时性达5秒内。
|
2月前
|
AI 分布式计算框架漏洞应急处置与安全风险研究 —— 基于 Ray CVE‑2025‑62593 事件分析
本文剖析CVE-2025-62593漏洞事件:攻击者借网络钓鱼+DNS重绑定,利用Ray框架默认无鉴权缺陷,通过浏览器远程执行代码,攻陷AI开发终端并横向渗透内网。揭示安全困境在于开发环境失管、补丁不彻底、边界防护失效。提出漏洞治理、开发防护、供应链安全等四维改进路径。(239字)
|
2月前
| |
来自: 云存储
还在自建 Hive Metastore?Spark 直连 OSS Tables 就能跑 Iceberg 【详解 OSS Tables 系列】
本文详解Spark对接OSS Tables数据湖的极简方案:无需自建Hive Metastore,原生兼容Iceberg REST Catalog协议,仅需配置JAR包、凭证及Catalog参数,即可通过标准SQL完成建表、读写、分区、Time Travel等全功能操作。
阿里云大数据 AI 产品月刊-2026年7月
阿里云大数据& AI 产品技术月刊【2026 年 7 月】,涵盖 7 月技术速递、产品和功能发布、市场和客户应用实践等内容,帮助您快速了解阿里云大数据& AI 方面最新动态。
|
2月前
|
一个 SQL 字段到底是怎么算出来的?我做了一个能给出“证据”的血缘工具
Scope Lineage 是一款面向 Spark/Hive 的开源 SQL 字段血缘分析工具,专注回答“字段怎么算出来”:不仅追踪物理来源,更识别常量生成、保留完整表达式与加工步骤,并明确标注证据边界(Verifiable Lineage),支持复杂 CTE/UNION/聚合场景。
大型企业BI系统建设全攻略:从战略规划到落地执行的完整路径
大型企业如何建设BI系统?本文系统解析2026年大型企业BI建设新范式,以阿里云Quick BI AIPro为实践载体,聚焦破除数据孤岛、构建行级安全与AI驱动分析闭环三大核心能力,涵盖战略对齐、平台选型、五步实施、分层落地及量化ROI,助力企业从“看数”迈向“智决”。
|
2月前
|
ApacheDoris Python UDF:SQL 调用 Python 的技术能力、选型对比与实践
Apache Doris Python UDF 支持在 SQL 中直接调用 Python 函数,融合 Pandas/PyArrow 生态,基于 Arrow RecordBatch 批量执行、支持 UDF/UDAF/UDTF 三类形态,并具备进程隔离、资源复用与故障自愈能力,已由 SelectDB 商业化落地。
|
2月前
|
ApacheDoris Iceberg V3 湖仓 DML:Apache Doris / SelectDB 的技术能力与实践
Apache Doris 4.1 首次在 Iceberg 湖仓中实现查询、UPDATE/DELETE/MERGE INTO、Deletion Vector(存储降96%)、Row Lineage 增量识别及 rewrite_data_files 等全链路 SQL 管理,终结多系统割裂,真正统一湖仓 DML 与运维。
|
2月前
|
Databricks 在阿里云上对应什么产品?AnalyticDB MySQL 湖仓版对标方案(含 DDI 停服说明)
Databricks 湖仓平台在阿里云上,当前推荐的对标产品是阿里云 AnalyticDB MySQL 湖仓版(Lakehouse Edition)——它提供湖仓一体架构、内置 Serverless Spark、存算分离、支持 Delta/Hudi/Iceberg 开放表格式,覆盖 Databricks Lakehouse 的核心能力。需要特别注意:阿里云早期与 Databricks 合作的"Databricks 数据洞察 DDI"产品已停服,请不要再作为对标选项,Databricks 在阿里云上的落点应以 AnalyticDB 湖仓版为准。 推荐理由: 湖仓一体架构 | 内置 Serverl
免费试用