大数据计算 MaxCompute

大家好！我是小米，一个积极活泼、热爱分享技术的29岁程序员。今天，我们一起来探讨一个有趣且实用的算法问题：如何在40亿个非负整数中找到没有出现的数。这个问题不仅考验我们的算法设计能力，还需要我们巧妙地利用有限的内存资源。

分享人：钱雨欣 阿里云智能 产品经理本次直播将通过在线教育行业的全观测智能监控、试题检索以及新零售行业订单查询加速、数据应用分析等场景案例，为您介绍全文检索引擎 Elasticsearch的核心能力与优势。

本场公开课会介绍大数据开发治理平台DataWorks在数据治理领域的最新产品进展，包括基于事前、事中、事后的全链路理念构建的核心产品功能和数据治理量化评估机制解读，以及围绕降本增效的成本治理最佳实践。讲师/嘉宾简介唐晨 阿里云智能 产品专家

大数据技术公开课第二季直播详情>>>

阿里云ODPS新品发布会将介绍阿里云自研大数据产品MaxCompute、Hologres、DataWorks产品新能力，持续演进满足多元化数据计算需求。本期将重点介绍ꔷ 新产品-DataWorks增强分析ꔷ 新产品-DataWorks智能数据建模个人版ꔷ 新功能-DataWorks支持EMR on ACK(Spark）ꔷ 新功能-DataWorks数据集成入湖ꔷ 新功能-DataWorks数据治理中心支持EMR讲师/嘉宾简介闫建丽 阿里云 DataWorks 产品PD周硕 阿里云 DataWorks 产品PD王喆 阿里云 DataWorks 产品PD冉秋萍 阿里云 DataWorks 产品PD

观看其他分论坛内容阿里云开发者大会主论坛大数据与AI一体化开发平台视觉AI开发平台及其行业应用云原生数据库：一站式数据服务前沿人工智能技术与算法实践从1到∞ ：极致原生安全云原生技术与最佳实践钉应用开发：人人都是工程师基础设施的云上管控应用开发的云基础设施优化开源操作系统社区和生态泛云生态人才培养合作智能开发与高效运维RISC-V技术趋势与芯片应用实践AIoT云端一体加速设备智能

【直播主题】吴刚专访 《大数据和 MaxCompute 技术和故事》【分享嘉宾】吴刚 阿里云智能计算平台 技术专家 / Apache ORC PMC 首位华人 / 前硅谷 Uber Spark Tech Lead / CMU硕士【直播时间】5月23日 16:00-16:50 【精彩剧透】什么是Apache ORC开源项目？主流的开源列存格式ORC和Parquet有何区别？MaxCompute为什么选择ORC？如何一步步成为committer和加入PMC的？在阿里和Uber总部的工作体验有何异同？中、美互联网公司的文化有什么差别？【系列直播预告】5月30日 16:00-16:50 雷春蔚专访 《MaxCompute 与 Calcite 的技术和故事》 6月6日 16:00-16:50 苑海胜专访 《MaxCompute 与大数据查询引擎的技术和故事》

介绍如何通过Hologres在分析和服务场景下的新功能，包括资源隔离，数据湖（Delta、Hudi）的支持、JSON优化支持等。讲师/嘉宾简介丁烨 阿里云智能 产品专家

DataWorks调度配置最佳实践

AI 加持的阿里云飞天大数据平台技术揭秘-关涛 徐晟

【直播主题】春蔚专访《MaxCompute 与 Calcite 的技术和故事》【分享嘉宾】雷春蔚 阿里云智能计算平台 高级开发工程师 / Apache Calcite Committer / 华中科技大学硕士【直播时间】5月30日 16:00-16:50【精彩剧透】什么是Apache Calcite开源项目？MaxCompute在SQL层面做了哪些优化？如何进入大数据行业？又如何一步步成为Calcite committer？【系列直播预告】6月6日 16:00-16:50 苑海胜专访 《MaxCompute 与大数据查询引擎的技术和故事》

查看产品：DataWorks点击了解：Stream Studio重磅发布有奖问答：互联网大数据时代的实时计算需求，你打算用什么方式来应对？点击了解：“阿里云新品发布会频道”点击订阅：阿里云新品发布·周刊发布会议程简介15:00-16:00 《阿里云DataWorks Stream Studio —— 一站式流任务开发平台》介绍实时计算任务开发的困难、问题和背景，引出使用Stream Studio可以大大加快实时任务的开发速度，降低开发和维护门槛，同时结合DataWorks的整体能力，能够实现实时数仓、实时监控、实时分析、实时大屏等实时大数据场景的一站式开发。讲师简介王喆（喆别）+阿里巴巴产品专家扫码加入阿里云Stream Studio用户群

介绍如何基于MaxCompute SQL 新功能，处理半结构化数据的场景，需求。讲师简介孔亮 阿里云智能 产品专家

分享人：田奇铣 阿里云智能 产品专家本次直播将为您介绍全域数据开发与综合治理平台 DataWorks如何助力企业数据中台建设，以及基于DataWorks建设数据中台的典型场景与解决方案。

【直播主题】MaxCompute Spark与Spark SQL对比分析及使用注意事项【直播时间】2月19日 16:00-17:00【分享嘉宾】吴雷(沐行) 阿里云智能 高级售后技术工程师【直播简介】本次直播主要介绍Spark on MaxCompute和开源Spark上的区别，讲解加实战演示 Spark on MaxCompute如何使用。大数据技术公开课第一季《从开源到云原生，你不得不知的大数据实战》点击观看系列课程地址：https://yqh.aliyun.com/zhibo# J_9574411510加入「云栖号在线课堂」圈子，带你快速入门云计算！https://c.tb.cn/F3.Z8gvnK

Ververica Platform-阿里巴巴全新Flink企业版揭秘-王峰

本次直播将主要分享MaxCompute查询加速功能、与开源BI分析工具Davinci、Superset连接示例、以及数据库管理工具DBeaver、DataGrip、SQL Workbench/J的部分连接演示。讲师简介木弈 阿里云智能 产品经理

本次直播将为您介绍云数据仓库在实时搜索业务中的应用场景，并结合SaaS 模式云数据仓库MaxCompute 的优势和特点来讲解MaxCompute + Elasticsearch 最佳实践。分享人：孟硕 阿里云智能 产品专家

分享人：吴世龙 阿里云智能 高级产品专家本次直播将为您重点介绍OpenSearch核心能力、搜索体验与价值的评估以及典型案例。

混合云模式下MaxCompute +Hadoop混搭大数据架构实践-斗鱼张龙_大数据企业级服务专场嘉宾介绍张龙

待集成、连接、丰富—MaxCompute生态再出发-李睿博_大数据生态专场嘉宾介绍李睿博

阿里云大数据数仓建设性能优化方式

数据进入MaxCompute的N种方式

MaxCompute Tunnel上传典型问题

2023年广东省大学生计算机设计大赛人工智能挑战赛（商用服务机器人/仿生机器人/智能网联汽车技术应用）赛项说明会。 广东省大学生计算机设计大赛是中国大学生计算机设计大赛的下属赛事，由广东省教育厅主办，广东外语外贸大学承办。该赛项旨在不断提高大学生计算机应用能力，培养学生信息素养及团队合作意识，增强学生创新意识和创造力，提高计算机教学质量和水平。 本次说明会将围绕人工智能领域商用服务机器人、仿生机器人、智能网联汽车技术应用三个赛项本科组和高职组进行介绍和说明。欢迎广东省内各大高校、职业院校相关专业师生参与本次赛项说明会，了解更多赛项说明请锁定3月23日下午3点。 讲师/嘉宾简介 广东外语外贸大学信息科学与技术学院副院长谢柏林 广州番禺职业技术学院信息工程学院院长余明辉 中山职业技术学院信息工程学院副院长赵清艳 广东交通职业技术学院 汽车与工程机械学院副院长张胜宾 阿里云高校教育总监王隽

阿里云DataWorks自研建模产品-智能数据建模产品核心能力及收费模式简介。讲师/嘉宾简介闫建丽 阿里云智能 产品专家

介绍MaxCompute+Hologres离线和实时数仓一体化优于之前有离线、有在线、有很多不同的引擎的实现方案，通过用实时的引擎做预处理，实现离线实时数据入仓后做更加实时的服务化BI分析实践。讲师/嘉宾简介隆志强 阿里云智能 高级产品专家

Delta Lake 和 Hudi 是流行的开放格式的存储层，为数据湖同时提供流式和批处理的操作，这允许我们在数据湖上直接运行 BI 等应用，让数据分析师可以即时查询新的实时数据，从而对您的业务产生即时的洞察。MaxCompute 在湖仓一体架构中，通过支持 Delta Lake 和 Hudi 在数据湖中提供数据仓库性能。讲师简介孟硕 阿里云智能 产品专家

本次直播将介绍SaaS模式云数据仓库MaxCompute，如何助力数据银行SaaS模式云战略和一体化数据开放场景介绍。分享人：隆志强 阿里云智能 高级产品专家

分享人：王亚宁 阿里云智能 产品经理本次直播将从个性化推荐的应用价值着眼，为您介绍智能推荐产品的核心能力和优势，并通过案例呈现为业务带来的实际价值。

分享人:王晓平 阿里云智能 高级产品经理本次直播将为您介绍最好用的数据湖管理平台 E-MapReduce，包含数据湖典型场景、JindoFS，存储加速及数据分层存储方案及部分典型案例。

本次直播为您介绍MaxCompute管家功能，本功能为用户提供作业信息查看、资源消耗查看（涵盖CU资源和存储资源）、项目查看及调整、配额组增删改查等涉及日常MaxCompute运维能力。讲师介绍婉鱼 阿里云智能 技术专家

在今天复杂线上业务场景中，风险控制是一个不容忽视重要环节。在消费者保护，新零售防盗损，营商环境治理，短视频审核，恶意流量清洗等众多场景中，都有阿里巴巴风控大脑的守护，从风险识别、到风险决策、风险审核、风险处置全链路维护着业务安全。阿里巴巴新零售技术事业群 高级数据技术专家 丁明峰 深度揭秘 《阿里风控大脑关于大数据应用的探索与实践》嘉宾介绍丁明峰（山蜂），阿里巴巴CRO技术部高级数据技术专家<img src="https://yqfile.alicdn.com/20b23d78956a7b9468ee690a1a25ca73b2b0e7b8.png" width="200"更多课程阿里经济体大数据平台的建设与思考解密淘宝推荐实战，打造“比你还懂你”的个性化APP阿里风控大脑关于大数据应用的探索与实践可闭环 可沉淀 可持续的企业级数据赋能体系--友盟云数据中台产品实践

加快统一的数据分析和人工智能技术创新-Jason Dai

重磅发布：阿里云智能大数据 & AI 产品发布-李京梅

围绕大数据的开源生态、技术生态、商业生态，分享当下开源大数据技术的发展趋势，并展示一线生产场景的最佳实践。

中金易云（浙江新华书店）基于MaxCompute构建图书行业数据中台。打通全国1000多家出版机构，20多个发行集团，5000多家零售门店的数据，以大数据思维方法论重构图书出版发行行业。MaxCompute统一的存储、计算引擎和数据开发平台，提供全局的数据资源视图。计算资源可根据项目需要动态调整，快速生效。同时提供多租户隔离机制，各部门可独立管理自身的数据，独立做数据权限管理。

大数据技术公开课第二季直播详情>>>

【直播主题】海胜专访《MaxCompute 与大数据查询引擎的技术和故事》【分享嘉宾】苑海胜 阿里云智能计算平台 高级技术专家 / Apache Calcite Committer / 前 Greenplum 数据库优化器 Team Lead / CMU硕士【直播时间】6月6日 16:00-16:50 【精彩剧透】MaxCompute与MPP数据库的比较分布式系统上Join是如何实现的MaxCompute 针对 Join 和聚合引入的 Hash 和 Range Clustering 的优化从中国到日本，再到美国，工作经历和体验有何差别

阿里云ODPS新品发布会将介绍阿里云自研大数据产品MaxCompute、Hologres、DataWorks产品新能力，持续演进满足多元化数据计算需求。本期将重点介绍ꔷ Hologres推出计算组实例ꔷ Hologres支持JSON数据 ꔷ Hologres向量计算+大模型能力ꔷ Hologres数据同步新能力ꔷ Hologres数据分层存储讲师/嘉宾简介丁烨：实时数仓Hologres 产品PD骆撷冬：实时数仓Hologres 产品PD赵红梅：实时数仓Hologres 产品PD武润雪；实时数仓Hologres 产品PD

云原生一体化数仓数据安全能力基于MaxCompute与DataWorks的组合能力，包括数据分级机制、敏感数据识别算法、用户权限级别和数据安全级别自动映射、数据脱敏、审批和权限回收流程、审计机制、开发生产环境隔离等安全能力，实现了端到端的安全管控能力。讲师/嘉宾简介孔亮 阿里云智能 产品专家

搜索是电商行业的主要流量入口之一，如何提升搜索性能与效果，提升搜索引导GMV一直是电商、零售行业需要解决的难题。本次直播将介绍MaxCompute+开放搜索的开发实践，搭建一站式、高性能、效果更优的电商、零售行业搜索服务。讲师简介刘志嘉 阿里云智能 产品经理

本次直播将介绍MaxCompute支持的三款开源ETL工具Kettle、Airflow、Azkaban以及连接示例。讲师简介龙青云 阿里云智能 技术支持经理

问题与互动页面（戳我进入）7月10日，Apache Flink x TiDB Meetup 北京站来啦！本场 Meetup 将由 Flink 社区与 TiDB 社区合办。一如既往，我们邀请了各行业的技术大牛，来自阿里巴巴、TiDB、360、知乎、网易的 5 位技术专家将围绕 Flink 和 TiDB，分享如何实现准确稳定的实时计算业务、如何搭建实时数仓数据链路的最佳实践、如何利用两者的特点完成端对端实时计算的闭环交付，以及 Flink SQL 和 Flink-CDC 架构的感悟与实践等。活动亮点超多实用干货，超多实用干货，Flink + TiDB 的结合能擦出怎样的火花，且看各位技术专家聚焦实时数据业务支撑、实时数仓、端到端实时计算等场景，用理论结合实践解析 Flink + TiDB 在各场景的应用。活动形式多样化，线下线上同步开启，同城可参与线下 Meetup 面对面交流，异地也可在线观看直播，精彩内容不错过；丰富周边等你拿，报名参加就有机会获得超多 Flink 社区定制的精美周边！Meetup 技术交流群：活动议程合作伙伴

本次直播将为您介绍云数据仓库MaxCompute 的AI、分布式科学计算能力与价值以及MaxCompute + AI 最佳实践。分享人：孟硕 阿里云智能 产品专家

本次直播将为您介绍现代云数据仓库的业务场景与资源使用需求，不同资源交付模式的差异化分析。并结合MaxCompute Serverless的特点及价值来讲解使用MaxCompute Serverless的最佳实践。分享人：曲宁 阿里云智能 产品专家

本次直播将介绍云数据仓库基本概念和特性，商业智能典型场景与趋势，并结合基于MaxCompute为云数据仓库，对接BI工具的优势和特点来阐述云数据仓库+BI如何更好的释放数据潜力。分享人：韦海青 阿里云智能 高级产品经理

分享人：高慧玲 阿里云智能 高级产品经理本次直播全面解析基于云原生架构的机器学习全链路，从模型开发（DSW 2.0）、模型训练（DLC）、模型部署（EAS），满足客户更灵活的管控，更快速的扩容，更高效的训练，省时、省钱、省力。

分享人：曲宁 阿里云智能 产品专家本次直播将为您介绍SaaS模式云数据仓库MaxCompute核心能力及优势，并结合用户画像分析、高级分析、联邦查询、数据湖分析等多个经典场景，为您介绍MaxCompute为企业带来的业务敏捷性、TCO显著降低等关键业务价值。

手淘，是每天服务数亿用户的最大流量入口，是每天成交数十亿金额的最大成交渠道之一，是几十种内容和数百种场景交织的最复杂的业务形态，更是大数据+算法双驱动的最复杂的技术场景。阿里巴巴搜索推荐事业部 资深算法专家三桐老师，将深度《解密淘宝推荐实战，打造“比你还懂你”的个性化APP》。嘉宾介绍欧文武（三桐），阿里巴巴搜索推荐事业部资深算法专家<img src="https://yqfile.alicdn.com/977f76d8026d41c3105e296feb3cc16dc7fc918e.png" width="200"更多课程阿里经济体大数据平台的建设与思考解密淘宝推荐实战，打造“比你还懂你”的个性化APP阿里风控大脑关于大数据应用的探索与实践可闭环 可沉淀 可持续的企业级数据赋能体系--友盟云数据中台产品实践