阿里云大数据_个人页

2025年04月

• 04.29 16:03:43
  发表了文章 2025-04-29 16:03:43

  立马耀：通过阿里云 Serverless Spark 和 Milvus 构建高效向量检索系统，驱动个性化推荐业务

  蝉妈妈旗下蝉选通过迁移到阿里云 Serverless Spark 及 Milvus，解决传统架构性能瓶颈与运维复杂性问题。新方案实现离线任务耗时减少40%、失败率降80%，Milvus 向量检索成本降低75%，支持更大规模数据处理，查询响应提速。
• 04.29 15:53:27
  发表了文章 2025-04-29 15:53:27

  鹰角网络：EMR Serverless Spark 在《明日方舟》游戏业务的应用

  鹰角网络为应对游戏业务高频活动带来的数据潮汐、资源弹性及稳定性需求，采用阿里云 EMR Serverless Spark 替代原有架构。迁移后实现研发效率提升，支持业务快速发展、计算效率提升，增强SLA保障，稳定性提升，降低运维成本，并支撑全球化数据架构部署。

  
• 04.28 11:46:49
  发表了文章 2025-04-28 11:46:49

  千万级数据秒级响应！碧桂园基于 EMR Serverless StarRocks 升级存算分离架构实践

  碧桂园服务通过引入 EMR Serverless StarRocks 存算分离架构，解决了海量数据处理中的资源利用率低、并发能力不足等问题，显著降低了硬件和运维成本。实时查询性能提升8倍，查询出错率减少30倍，集群数据 SLA 达99.99%。此次技术升级不仅优化了用户体验，还结合AI打造了“一看”和“—问”智能场景助力精准决策与风险预测。
• 04.02 10:53:06
  发表了文章 2025-04-02 10:53:06

  百观科技基于阿里云 EMR 的数据湖实践分享

  百观科技为应对海量复杂数据处理的算力与成本挑战，基于阿里云 EMR 构建数据湖。EMR 依托高可用的 OSS 存储、开箱即用的 Hadoop/Spark/Iceberg 等开源技术生态及弹性调度，实现数据接入、清洗、聚合与分析全流程。通过 DLF 与 Iceberg 的优化、阶梯式弹性调度（资源利用率提升至70%）及倚天 ARM 机型搭配 EMR Trino 方案，兼顾性能与成本，支撑数据分析需求，降低算力成本。

2025年02月

• 02.20 17:57:36
  发表了文章 2025-02-20 17:57:36

  阿里云 MaxCompute MaxQA 开启公测，公测可申请 100CU 计算资源解锁近实时高效查询体验

  阿里云云原生大数据计算服务 MaxCompute 推出 MaxQA（原 MCQA2.0）查询加速功能，在独享的查询加速资源池的基础上，对管控链路、查询优化器、执行引擎、存储引擎以及缓存机制等多个环节进行全面优化，显著减少了查询响应时间，适用于 BI 场景、交互式分析以及近实时数仓等对延迟要求高且稳定的场景。现正式开启公测，公测期间可申请100CU（价值15000元）计算资源用于测试，欢迎广大开发者及企业用户参与，解锁高效查询体验！

  
• 02.19 10:37:40
  发表了文章 2025-02-19 10:37:40

  美的楼宇科技基于阿里云 EMR Serverless Spark 构建 LakeHouse 湖仓数据平台

  美的楼宇科技基于阿里云 EMR Serverless Spark 建设 IoT 数据平台，实现了数据与 AI 技术的有效融合，解决了美的楼宇科技设备数据量庞大且持续增长、数据半结构化、数据价值缺乏深度挖掘的痛点问题。并结合 EMR Serverless StarRocks 搭建了 Lakehouse 平台，最终实现不同场景下整体性能提升50%以上，同时综合成本下降30%。
• 02.10 17:02:51
  发表了文章 2025-02-10 17:02:51

  阿里云 EMR Serverless Spark 在微财机器学习场景下的应用

  面对机器学习场景下的训练瓶颈，微财选择基于阿里云 EMR Serverless Spark 建立数据平台。通过 EMR Serverless Spark，微财突破了单机训练使用的数据规模瓶颈，大幅提升了训练效率，解决了存算分离架构下 Shuffle 稳定性和性能困扰，为智能风控等业务提供了强有力的技术支撑。

2025年01月

• 01.16 17:44:44
  发表了文章 2025-01-16 17:44:44

  阿里云 EMR 发布托管弹性伸缩功能，支持自动调整集群大小，最高降本60%

  阿里云开源大数据平台 E-MapReduce 重磅推出托管弹性伸缩功能，基于 EMR 托管弹性伸缩功能，您可以指定集群的最小和最大计算限制，EMR 会持续对与集群上运行的工作负载相关的关键指标进行采样，自动调整集群大小，以获得最佳性能和资源利用率。
• 01.02 11:14:39
  发表了文章 2025-01-02 11:14:39

  有奖评测，基于分布式 Python 计算服务 MaxFrame 进行数据处理

  阿里云MaxCompute MaxFrame推出分布式Python计算服务MaxFrame评测活动，助力开发者高效完成大规模数据处理、可视化探索及ML/AI开发。活动时间为2024年12月17日至2025年1月31日，参与者需体验MaxFrame并发布评测文章，有机会赢取精美礼品。

2024年12月

• 12.19 10:28:50
  发表了文章 2024-12-19 10:28:50

  MaxCompute Bloomfilter index 在蚂蚁安全溯源场景大规模点查询的最佳实践

  MaxCompute 在11月最新版本中全新上线了 Bloomfilter index 能力，针对大规模数据点查场景，支持更细粒度的数据裁剪，减少查询过程中不必要的数据扫描，从而提高整体的查询效率和性能。

2024年10月

• 10.28 14:46:05
  发表了文章 2024-10-28 14:46:05

  阿里云向量检索服务 Milvus 版正式商业化

  阿里云向量检索服务 Milvus 版正式商业化！

2024年08月

• 08.02 16:43:33
  发表了文章 2024-08-02 16:43:33

  全新启航！阿里云向量检索服务Milvus版正式上线！

  由阿里云与 Zilliz 联合推出的业内领先的云原生向量检索引擎 - 阿里云向量检索服务 Milvus 版在杭州、上海、北京、深圳四大 region 正式可用并开放公测！

2024年06月

• 06.07 15:19:26
  发表了文章 2024-06-07 15:19:26

  客户案例 | 识货基于向量检索服务 Milvus 版搭建电商领域的向量数据检索平台

  阿里云的Milvus服务以其性能稳定和功能多样化的向量检索能力，为识货团队在电商领域的向量检索场景中搭建业务系统提供了强有力的支持。该服务的分布式扩展能力不仅可靠，而且能够适应日益增长的数据规模。

  

2024年05月

• 05.10 15:24:25
  发表了文章 2024-05-10 15:24:25

  通过阿里云 Milvus 和 LangChain 快速构建 LLM 问答系统

  本文介绍如何通过整合阿里云Milvus、阿里云DashScope Embedding模型与阿里云PAI（EAS）模型服务，构建一个由LLM（大型语言模型）驱动的问题解答应用，并着重演示了如何搭建基于这些技术的RAG对话系统。

  
• 04.18 12:07:10
  发表了文章 2024-04-18 12:07:10

  通过阿里云 Milvus 与 PAI 搭建高效的检索增强生成（RAG）系统

  阿里云Milvus现已无缝集成于阿里云PAI平台，一站式赋能用户构建高性能的检索增强生成（RAG）系统。您可以利用Milvus作为向量数据的实时存储与检索核心，高效结合PAI和LangChain技术栈，实现从理论到实践的快速转化，搭建起功能强大的RAG解决方案。

  
• 04.10 15:47:08
  发表了文章 2024-04-10 15:47:08

  通过阿里云Milvus和通义千问快速构建基于专属知识库的问答系统

  本文展示了如何使用阿里云向量检索 Milvus 版和灵积（Dashscope）提供的通用千问大模型能力，快速构建一个基于专属知识库的问答系统。在示例中，我们通过接入灵积的通义千问 API 及文本嵌入（Embedding）API 来实现 LLM 大模型的相关功能。

  
• 03.28 17:57:14
  发表了文章 2024-03-28 17:57:14

  阿里云向量检索 Milvus 版开启公测，助力企业打造高质量 AI 服务

  阿里云向量检索 Milvus 版正式开启公测，诚邀广大开发者及企业用户参与公测，赋能智能检索，解锁 AI 潜能。

  

2023年05月

• 05.04 14:47:32
  发表了文章 2023-05-04 14:47:32

  阿里云检索分析服务Elasticsearch版内核持续优化

  阿里云ES自从2017年云栖大会发布以来，通过开源社区与Elasticsearch公司紧密合作，经过近些年的快速发展，从体量上已经达到了覆盖全球17个区域、集群数1万+与节点数7万+、数据量20PB+的超大规模。

  

2023年04月

• 04.27 10:11:44
  发表了文章 2023-04-27 10:11:44

  基于阿里云Elasticsearch打造强大的可观测性平台

  本文分享观测未来基于阿里云Elasticsearch服务，打造成本可控且高性能分析的数据存储方案，实现企业级别的可观测平台。

  

2022年10月

• 10.24 11:10:46
  发表了文章 2022-10-24 11:10:46

  【阿里云 CDP 公开课】 第九讲：Hive3 新特性

  本文整理自 Cloudera 生态资深解决方案工程师王雪峰在 阿里云CDP公开课 上的分享。

  
• 10.10 13:48:43
  发表了文章 2022-10-10 13:48:43

  【阿里云 CDP 公开课】 第八讲：Hive 迁移到 CDP

  本文整理自 Cloudera 生态资深解决方案工程师王雪峰在 阿里云CDP公开课 上的分享。

  

2022年09月

• 09.25 22:53:55
  发表了文章 2022-09-25 22:53:55

  HDFS 迁移到 CDP

  本文整理自 Cloudera 生态资深解决方案工程师王雪峰在 阿里云CDP公开课 上的分享。

  

2022年07月

• 07.21 19:05:17
  发表了文章 2022-07-21 19:05:17

  CDP 平台的安全和治理

  本文整理自 Cloudera 生态资深解决方案工程师王雪峰在 阿里云CDP公开课 上的分享。

  

2022年05月

• 05.19 10:55:08
  发表了文章 2022-05-19 10:55:08

  预约直播｜阿里云CDP 产品发布会

  2022年5月25日14：00，阿里云CDP 产品线上发布会重磅开启，精彩不容错过！

  

2022年03月

• 03.10 19:01:44
  发表了文章 2022-03-10 19:01:44

  【阿里云 CDP 公开课】 第五讲：如何迁移 CDH/HDP 到 CDP

  本文整理自 Cloudera 生态资深解决方案工程师王雪峰，分享的《如何迁 移CDH_HDP到CDP》，主要分为 CDP升级概述、迁移升级指南两个部分。

  

2022年02月

• 02.18 11:22:35
  发表了文章 2022-02-18 11:22:35

  【阿里云 CDP 公开课】 第四讲：如何访问CDP集群

  Cloudera 和阿里云进行深度合作推出了基于阿里云部署的 Cloudera 企业数据云平台，即 CDP 平台。本文主要介绍集群访问Web-UI的方式。

  

2022年01月

• 01.06 20:21:25
  发表了文章 2022-01-06 20:21:25

  【阿里云 CDP 公开课】 第三讲：CDP 集群管理

  Cloudera 和阿里云进行深度合作推出了基于阿里云部署的 Cloudera 企业数据云平台，即 CDP 平台。本文的主要内容是关于CDP的集群管理。Cloudera Manager 是全功能企业级集群管理平台，提供最佳的系统利用率并满足 SLA 承诺，覆盖集群所有资源与服务的统一配置、管理、监控、诊断等管理功能。

  

2021年12月

• 12.23 18:28:39
  发表了文章 2021-12-23 18:28:39

  【阿里云 CDP 公开课】 第二讲：CDH/HDP 何去何从

  Hadoop社区版CDH/HDP已经不再更新，也将终止服务。后续的平台路线图怎么规划？Cloudera CDP整合了CDH和HDP，有哪些性能提升和功能增强？如何平滑的进行迁移？本文结合CDH/HDP平台现状，详细介绍了CDP以及如何到达CDP。

  
• 12.03 17:19:10
  发表了文章 2021-12-03 17:19:10

  HMS数据库设置和优化

  Hive Metastore (HMS) 是一种服务，用于在后端 RDBMS（例如 MySQL 或 PostgreSQL）中存储与 Apache Hive 和其他服务相关的元数据。本文主要分享HMS数据库设置和优化

  

2021年11月

• 11.29 16:39:20
  发表了文章 2021-11-29 16:39:20

  【阿里云 CDP 公开课】 第一讲：CDP 产品介绍

  为了让更多开发者了解并使用 CDP，由阿里云和 Cloudera 联合打造的专业公开课【阿里云 CDP 公开课】来啦~

  
• 11.23 16:19:23
  发表了文章 2021-11-23 16:19:23

  CDP 的 Hive Metastore 简介

  Hive Metastore (HMS) 是一种服务，用于在后端 RDBMS（例如 MySQL 或 PostgreSQL）中存储与 Apache Hive 和其他服务相关的元数据。

  
• 11.22 16:48:53
  发表了文章 2021-11-22 16:48:53

  干货满满！【阿里云 CDP 公开课】 直播预告来袭！

  扫描海报上的钉钉群二维码入群，线上观看直播，还可以与来自阿里云和 Cloudera 的技术专家交流~

  
• 11.18 18:53:36
  发表了文章 2021-11-18 18:53:36

  CDP 组件依赖关系

  本文主要介绍了 Cloudera Manager 部署中各种服务之间存在的服务依赖关系。

  
• 11.16 18:58:35
  发表了文章 2021-11-16 18:58:35

  Cloudera 软件分发管理

  Cloudera Manager的主要功能是安装和升级Cloudera Runtime和其他托管服务。Cloudera Manager支持两种软件分发格式：package和parcel。

  
• 11.12 11:41:04
  发表了文章 2021-11-12 11:41:04

  Cloudera Manager 进程管理

  本文主要介绍了使用 Cloudera Manager 启动和停止进程。

  
• 11.09 20:00:25
  发表了文章 2021-11-09 20:00:25

  Cloudera Manager主机管理

  Cloudera Manager 提供了多种功能来管理集群中的主机

  
• 11.03 19:28:09
  发表了文章 2021-11-03 19:28:09

  Cloudera CDP 企业数据云测试开通指导

  基于阿里云部署的 Cloudera CDP 企业数据云平台已经进入公测阶段，本文详细介绍了相关试用/试用流程。

  
• 11.02 19:45:48
  发表了文章 2021-11-02 19:45:48

  Cloudera Manager 管理控制台主页

  本文主要介绍了 Cloudera Manager 管理控制台主页的面板视图

  

2021年10月

• 10.28 19:34:57
  发表了文章 2021-10-28 19:34:57

  Cloudera Manager 管理控制台

  Cloudera Manager 管理控制台是基于 Web 的界面，可用于配置、管理和监控 Cloudera Runtime。

  
• 10.26 17:47:59
  发表了文章 2021-10-26 17:47:59

  Cloudera Manager 术语和架构

  本文介绍了Cloudera Manager 的常见术语和架构

  
• 10.22 18:36:46
  发表了文章 2021-10-22 18:36:46

  基于阿里云部署的 CDP

  阿里云和 Cloudera 展开密切合作，在阿里云的公有云上提供开箱即用的 CDP 平台，使得用户可以根据自己的需求，在阿里云上启用安全、合规和高可用的 CDP 平台，充分利用 CDP 平台的功能和阿里云的灵活性，来降低客户管理平台的复杂性，从而快速实现业务。

  
• 10.20 00:04:59
  发表了文章 2021-10-20 00:04:59

  CDP 平台简介

  EDC 建立在 Cloudera Data Platform(CDP) 之上，该产品结合了 Cloudera Enterprise Data Hub 和 Hortonworks Data Platform Enterprise 的优点，并在技术堆栈中增加了新功能和对已有技术提供了增强功能。这种统一的发行是一个可扩展且可自定义的平台，您可以在其中安全地运行多种类型的工作负载。

  

2021年03月

• 03.23 23:11:27
  回答了问题 2021-03-23 23:11:27

  文件存储NAS有哪些产品功能？

  赞0 踩0 评论0