灵杰开发者_个人页

2024年07月

• 07.19 11:42:32
  发表了文章 2024-07-19 11:42:32

  参与开源大数据Workshop·杭州站，共探企业湖仓演进实践

  Apache Flink 诚邀您参加 7 月 27 日在杭州举办的阿里云开源大数据 Workshop，了解流式湖仓、湖仓一体架构的最近演进方向，共探企业云上湖仓实践案例。

  
• 07.18 17:14:48
  发表了文章 2024-07-18 17:14:48

  玳数科技集成 Flink CDC 3.0 的实践

  本文投稿自玳数科技工程师杨槐老师，介绍了 Flink CDC 3.0 与 ChunJun 框架在玳数科技的集成实践。

  
• 07.17 15:17:43
  发表了文章 2024-07-17 15:17:43

  解读阿里云搜索开发工作台如何快速搭建AI语义搜索及RAG链路

  本文介绍阿里云搜索开发工作台如何通过内置数据处理、查询分析、排序、效果测评、大模型等服务，结合阿里云搜索引擎及开源引擎，灵活打造AI语义搜索及RAG链路。
• 07.16 17:37:46
  发表了文章 2024-07-16 17:37:46

  Apache Paimon 在蚂蚁的应用

  本文整理自 Apache Paimon Committer 闵文俊老师在5月16日 Streaming Lakehouse Meetup · Online 上的分享。Apache Paimon 是一种实时数据湖格式，设计用于流批一体处理，支持实时更新和OLAP查询。它采用LSM Tree结构，提供多种Changelog Producer和Merge Engine，支持高效的数据合并。Paimon适用于流读、批读及时间旅行查询，与多种查询引擎兼容。在蚂蚁集团的应用中，Paimon降低了资源开销，提升了查询性能，简化了研发流程，特别是在去重、核对场景和离线查询加速方面表现突出。

  
• 07.11 18:21:39
  发表了文章 2024-07-11 18:21:39

  Flink CDC：基于 Apache Flink 的流式数据集成框架

  本文整理自阿里云 Flink SQL 团队研发工程师于喜千（yux）在 SECon 全球软件工程技术大会中数据集成专场沙龙的分享。

  
• 07.09 17:05:55
  发表了文章 2024-07-09 17:05:55

  Flink+Paimon在阿里云大数据云原生运维数仓的实践

  构建实时云原生运维数仓以提升大数据集群的运维能力，采用 Flink+Paimon 方案，解决资源审计、拓扑及趋势分析需求。

  
• 07.09 15:08:50
  发表了文章 2024-07-09 15:08:50

  Elastic & 阿里云邀您参加 AI 搜索 Tech Day

  探索AI搜索未来，7月27日一同见证AI搜索新篇章

  
• 07.09 14:17:14
  发表了文章 2024-07-09 14:17:14

  通过云上数据库三步构建RAG系统

  本文介绍了如何使用OpenSearch LLM智能问答版通过云上数据库一站式构建RAG系统。
• 07.04 18:00:06
  发表了文章 2024-07-04 18:00:06

  【邀请函】相约CommunityOverCode Asia 2024，共探Flink、Paimon、Celeborn开源新境界！

  相约 CommunityOverCode Asia 2024，共探 Flink、Paimon、Celeborn 开源新境界！让我们在技术的浩瀚星海中，携手航行，共创辉煌！

  
• 07.04 15:47:03
  发表了文章 2024-07-04 15:47:03

  DataWorks Copilot：大模型时代数据开发的新范式

  阿里云DataWorks是一站式数据开发治理平台，支持多种大数据引擎，助力企业构建数据仓库、湖仓一体架构。DataWorks现推出Copilot，致力于打造智能SQL助手和AI Agent，通过生成SQL、优化SQL、提供查询帮助、注释生成、错误修正等功能，帮助数据开发工程师和数据分析师提升SQL 开发和分析的效率和体验。目前，DataWorks Copilot正开放邀测，欢迎大家体验。
• 07.02 18:30:23
  发表了文章 2024-07-02 18:30:23

  探索 Apache Paimon 在阿里智能引擎的应用场景

  本文整理自Apache Yarn && Flink Contributor，阿里巴巴智能引擎事业部技术专家王伟骏（鸿历）老师在 5月16日 Streaming Lakehouse Meetup · Online 上的分享。

  

2024年06月

• 06.28 11:40:22
  发表了文章 2024-06-28 11:40:22

  DataFunCon 2024·北京站｜Apache Paimon 实时湖仓存储底座

  阿里云开源大数据表存储负责人李劲松老师，7 月 6 日 15:30-16:10 “实时洞察，湖仓之力”论坛将带来主题为《Apache Paimon 实时湖仓存储底座》的精彩内容。

  
• 06.26 17:46:37
  发表了文章 2024-06-26 17:46:37

  Paimon 在汽车之家的业务实践

  本文分享自汽车之家的王刚、范文、李乾⽼师。介绍了汽车之家基于 Paimon 的一些实践，和一些背景。

  
• 06.24 17:29:43
  发表了文章 2024-06-24 17:29:43

  贝壳找房基于Flink+Paimon进行全量数据实时分组排序的实践

  本文投稿自贝壳家装数仓团队，在结合家装业务场景下所探索出的一种基于 Flink+Paimon 的排序方案。这种方案可以在实时环境对全量数据进行准确的分组排序，同时减少对内存资源的消耗。在这一方案中，引入了“事件时间分段”的概念，以避免 Flink State 中冗余数据对排序结果的干扰，在保证排序结果准确性的同时，减少了对内存的消耗。并且基于数据湖组件 Paimon 的聚合模型和 Audit Log 数据在数据湖内构建了拉链表，为排序结果提供了灵活的历史数据基础。

  
• 06.18 17:17:17
  发表了文章 2024-06-18 17:17:17

  Apache Paimon统一大数据湖存储底座

  Apache Paimon，始于Flink Table Store，发展为独立的Apache顶级项目，专注流式数据湖存储。它提供统一存储底座，支持流、批、OLAP，优化了CDC入湖、流式链路构建和极速OLAP查询。Paimon社区快速增长，集成Flink、Spark等计算引擎，阿里巴巴在内部广泛应用，旨在打造统一湖存储，打通Serverless Flink、MaxCompute等，欢迎大家扫码参与体验阿里云上的 Flink+Paimon 的流批一体服务。

  
• 06.13 17:59:44
  发表了文章 2024-06-13 17:59:44

  Flink 流批一体场景应用及落地情况

  本文由阿里云 Flink 团队苏轩楠老师撰写，旨在介绍 Flink 流批一体在几个常见场景下的应用。

  
• 06.13 11:36:33
  发表了文章 2024-06-13 11:36:33

  DataWorks重磅推出Serverless资源组，实现低成本灵活付费和动态平滑扩缩容

  DataWorks资源组2.0上线，提供低成本、动态扩缩容的数据计算资源服务。

  
• 06.11 17:23:50
  发表了文章 2024-06-11 17:23:50

  湖仓一体全面开启实时化时代

  本文整理自阿里云开源大数据平台负责人王峰（莫问）老师在5月16日 Streaming Lakehouse Meetup · Online 上的分享，主要介绍在新一代湖仓架构上如何进行实时化大数据分析。

  
• 06.06 18:06:24
  发表了文章 2024-06-06 18:06:24

  Flink⼤状态作业调优实践指南：状态报错与启停慢篇

  本文整理自俞航翔、陈婧敏、黄鹏程老师所撰写的大状态作业调优实践指南。由于内容丰富，本文分享终篇状态报错与启停慢篇.

  
• 06.05 16:12:25
  发表了文章 2024-06-05 16:12:25

  10分钟学会构建端到端的图片搜索服务

  本文介绍在没有向量数据的情况下，怎样通过OpenSearch-向量检索版快速从零搭建图像搜索服务。
• 06.04 18:06:14
  发表了文章 2024-06-04 18:06:14

  Flink⼤状态作业调优实践指南：Flink SQL 作业篇

  本文整理自俞航翔、陈婧敏、黄鹏程老师所撰写的大状态作业调优实践指南。由于内容丰富，本文中篇内容分享 Flink SQL 作业大状态导致反压的调优原理与方法。

  
• 06.04 10:54:24
  发表了文章 2024-06-04 10:54:24

  阿里云 OpenSearch RAG 应用实践

  本文介绍了阿里云OpenSearch在过去一年中在RAG方面的应用和探索。

  
• 06.03 17:57:35
  发表了文章 2024-06-03 17:57:35

  Flink⼤状态作业调优实践指南：Datastream 作业篇

  本文整理自俞航翔、陈婧敏、黄鹏程老师所撰写的大状态作业调优实践指南。

  

2024年05月

• 05.30 17:11:34
  发表了文章 2024-05-30 17:11:34

  活动预告｜6月13日Apache Flink Meetup·香港站

  Apache Flink 香港 Meetup 来啦！

  
• 05.29 11:52:29
  发表了文章 2024-05-29 11:52:29

  流批一体技术简介

  本文由阿里云 Flink 团队苏轩楠老师撰写，旨在向 Flink 用户整体介绍 Flink 流批一体的技术和挑战。

  
• 05.28 14:49:43
  发表了文章 2024-05-28 14:49:43

  阿里云Elasticsearch Serverless助力某电商平台公司实现商品订单数据的实时写入查询

  某电商平台公司采用阿里云Elasticsearch Serverless解决方案，实现商品、订单和其他关键信息的写入和查询的实时响应。
• 05.27 17:03:31
  发表了文章 2024-05-27 17:03:31

  阿里云Elasticsearch Serverless帮助某视觉科技公司平稳应对流量激增

  某视觉科技公司借助阿里云Elasticsearch Serverless应对创意资源平台的流量激增，通过服务自动扩缩容，确保流量高峰时的快速响应，降低至少50%的成本。同时，它提供弹性数据容量支持，简化运维，提升开发效率，并保证高精确度的搜索体验。
• 05.23 17:27:24
  发表了文章 2024-05-23 17:27:24

  Apache Flink CDC 3.1.0 发布公告

  Apache Flink 社区很高兴地宣布发布 Flink CDC 3.1.0！

  
• 05.23 15:13:43
  发表了文章 2024-05-23 15:13:43

  阿里云Elasticsearch Serverless助力医疗科技企业实现业务提效和加速创新

  通过采用阿里云Elasticsearch Serverless服务，某医疗科技企业解决了大规模智能床垫数据存储和分析的挑战。Serverless架构帮助客户降低50%以上的成本，实现资源弹性伸缩，免去运维负担，提高业务弹性和稳定性，企业能更专注于产品创新和用户体验优化。
• 05.22 16:12:40
  发表了文章 2024-05-22 16:12:40

  阿里云Elasticsearch Serverless助力大型企业咨询公司大幅提升效能

  阿里云Elasticsearch Serverless服务，提升了某大型企业咨询公司的数据查询速度和准确性，在实现成本可控的同时，帮助提高了企业效能并加强了客户服务能力。
• 05.14 18:32:28
  发表了文章 2024-05-14 18:32:28

  倒计时3天 | 5月16日 Streaming Lakehouse Meetup · Online

  倒计时3天！！！

  
• 05.10 14:45:06
  发表了文章 2024-05-10 14:45:06

  OpenSearch LLM智能问答版全新升级

  阿里云OpenSearch LLM智能问答版近期全新升级，新增最新版开源大模型、多模态模型、切片策略升级等产品能力。
• 05.08 18:03:32
  发表了文章 2024-05-08 18:03:32

  基于OceanBase+Flink CDC，云粒智慧实时数仓演进之路

  本文讲述了其数据中台在传统数仓技术框架下做的一系列努力后，跨进 FlinkCDC 结合 OceanBase 的实时数仓演进过程。

  
• 05.06 18:18:45
  发表了文章 2024-05-06 18:18:45

  活动预告 | 5月16日 Streaming Lakehouse Meetup · Online 与你相约！

  5月16日 Streaming Lakehouse Meetup · Online 与你相约！

  
• 04.28 16:43:54
  发表了文章 2024-04-28 16:43:54

  Flink DataStream API 批处理能力演进之路

  本文由阿里云 Flink 团队郭伟杰老师撰写，旨在向 Flink Batch 社区用户介绍 Flink DataStream API 批处理能力的演进之路。

  
• 04.25 15:19:09
  发表了文章 2024-04-25 15:19:09

  阿里巴巴瓴羊基于 Flink 实时计算的优化和实践

  本⽂整理⾃阿里云智能集团技术专家王柳焮⽼师在 Flink Forward Asia 2023 中平台建设专场的分享。

  
• 04.22 18:16:11
  发表了文章 2024-04-22 18:16:11

  友盟+｜如何通过阿里云Flink+Paimon实现流式湖仓落地方案

  本文主要分享友盟+ U-App 整体的技术架构，以及在实时和离线计算上面的优化方案。

  
• 04.17 16:59:06
  发表了文章 2024-04-17 16:59:06

  官宣｜Apache Paimon 毕业成为顶级项目，数据湖步入实时新篇章！

  Apache Paimon 在构建实时数据湖与流批处理技术领域取得了重大突破，数据湖步入实时新篇章！

  
• 04.15 15:40:45
  发表了文章 2024-04-15 15:40:45

  Flink CDC在阿里云DataWorks数据集成应用实践

  本文整理自阿里云 DataWorks 数据集成团队的高级技术专家 王明亚（云时）老师在 Flink Forward Asia 2023 中数据集成专场的分享。

  
• 04.11 16:55:24
  发表了文章 2024-04-11 16:55:24

  Flink+Paimon+Hologres 构建实时湖仓数据分析

  本文整理自阿里云高级专家喻良，在 Flink Forward Asia 2023 主会场的分享。

  
• 04.02 17:37:43
  发表了文章 2024-04-02 17:37:43

  Flink 流批一体在模型特征场景的使用

  本文整理自B站资深开发工程师张杨老师在 Flink Forward Asia 2023 中 AI 特征工程专场中的分享。

  
• 03.28 17:48:45
  发表了文章 2024-03-28 17:48:45

  阿里云实时计算Flink的产品化思考与实践【下】

  本文整理自阿里云高级产品专家黄鹏程和阿里云技术专家陈婧敏在 FFA 2023 平台建设专场中的分享。

  
• 03.26 17:22:58
  发表了文章 2024-03-26 17:22:58

  阿里云实时计算Flink的产品化思考与实践【上】

  本文整理自阿里云高级产品专家黄鹏程和阿里云技术专家陈婧敏在 FFA 2023 平台建设专场中的分享。

  
• 03.20 18:28:56
  发表了文章 2024-03-20 18:28:56

  官宣｜阿里巴巴捐赠的 Flink CDC 项目正式加入 Apache 基金会

  本文整理自阿里云开源大数据平台徐榜江 (雪尽)，关于阿里巴巴捐赠的 Flink CDC 项目正式加入 Apache 基金会。

  
• 03.18 16:58:24
  发表了文章 2024-03-18 16:58:24

  官宣｜Apache Flink 1.19 发布公告

  Apache Flink PMC（项目管理委员）很高兴地宣布发布 Apache Flink 1.19.0。

  
• 03.14 17:14:41
  发表了文章 2024-03-14 17:14:41

  如何高效接入 Flink： Connecter / Catalog API 核心设计与社区进展

  本文整理自阿里云实时计算团队 Apache Flink Committer 和 PMC Member 任庆盛在 FFA 2023 核心技术专场（二）中的分享。

  
• 03.11 17:21:16
  发表了文章 2024-03-11 17:21:16

  新一代实时数据集成框架 Flink CDC 3.0 —— 核心技术架构解析

  本文整理自阿里云开源大数据平台吕宴全关于新一代实时数据集成框架 Flink CDC 3.0 的核心技术架构解析。

  
• 03.08 11:19:09
  发表了文章 2024-03-08 11:19:09

  阿里云OpenSearch RAG混合检索Embedding模型荣获C-MTEB榜单第一

  阿里云OpenSearch引擎通过Dense和Sparse混合检索技术，在中文Embedding模型C-MTEB榜单上拿到第一名，超越Baichuan和众多开源模型，尤其在Retrieval任务上大幅提升。