Flink CDC Meetup

活动介绍:为了促进 Flink CDC 技术的交流和发展,我们将于 5 月 21 日在线举办 Flink CDC Meetup。本次 Meetup 由阿里巴巴技术专家,Apache Flink PMC Member & Committer 伍翀 (云邪) 作为出品人,邀请了来自阿里巴巴、XTransfer、顺丰、OceanBase、大健云仓的大咖分享 Flink CDC 在各场景中的最佳实践、生产经验、技术原理等。嘉宾简介:伍翀(云邪)- 阿里巴巴技术专家,Apache Flink PMC Member & Committer徐榜江(雪尽)- 阿里巴巴高级开发工程师,Apache Flink Committer & Flink CDC Maintainer孙家宝 - XTransfer 资深 Java 开发工程师,Flink CDC Maintainer覃立辉 - 顺丰大数据研发工程师王赫(川粉)- OceanBase 技术专家龚中强 - 大健云仓基础架构部负责人

2161 0
来自: 实时计算 Flink  版块

使用Databricks和MLflow进行机器学习模型训练和部署的应用实践【Databricks 数据洞察公开课】

本期课介绍如何使用DDI和MLflow搭建机器学习生命周期管理平台,实现从数据准备、模型训练、参数和性能指标追踪、以及模型部署的全流程。讲师/嘉宾简介李锦桂--阿里云开源大数据平台开发工程师

1239 0

Flink Forward Asia 2021 Hackathon

首届 Flink Forward Asia Hackathon,本次比赛由 Apache Flink 社区联手阿里云 ACE、 Pravega 社区、DELL 联合举办。本次比赛为开放式命题,以实时计算为主题,以 Flink 为工具,解决大家日常学习和工作中遇到的实际问题。可以是气象预测、城市交通管理、金融交易监察这样关乎国计民生的选题;也可以是提升购物体验、增强游戏互动性、个人运动管理、社交等改善生活中琐碎点滴的选题;还可以是对 Flink 本身的创新和改进。选手需要使用(但不仅限于使用)Flink 生态里的各种工具,包括统计分析、机器学习、复杂事件处理、各类 connector,StatefulFunction 等等来完成自己的选题。共计 29 支队伍进入决赛

4358 0
来自: 实时计算 Flink  版块

Flink Forward Asia 2021 生产实践

本专场集结阿里巴巴、腾讯、快手、小米、美团的技术专家探讨超大规模Flink集群运维与大规模作业稳定性优化实践等议题。讲师/嘉宾简介1.《阿里超大规模 Flink 集群运维体系介绍》王华 - 阿里云实时计算高级运维专家2.《Flink 引擎在快手的深度优化与生产实践》刘建刚 - 快手实时计算团队技术专家3.《大规模作业的稳定性优化实践》邱从贤 - 腾讯数据平台高级开发工程师,Apache Flink Committer4.《小米基于 Flink 的稳定性优化与实践》张蛟 - 小米大数据部高级软件工程师,Apache Flink Contributor5.《美团 Flink 大作业部署与状态稳定性优化实践》冯斐 - 美团数据平台计算引擎组工程师王非凡 - 美团数据平台计算引擎工程师,Apache Flink Contributor

6152 0
来自: 实时计算 Flink  版块

Flink Forward Asia 2021 流批一体

字节跳动、美团、京东、小米的技术专家分享流批一体的生产实践,另有来自阿里巴巴的技术专家手把手教你如何构建流批一体数仓。讲师/嘉宾简介1.《Flink 流批一体在字节推荐系统的实践》胡家煊 - 字节跳动推荐架构基础服务研发工程师2.《美团基于流批一体构建增量数仓生产实践》刘迪珊 - 美团数据平台工程师3.《流批一体在京东的探索与实践》韩飞 - 京东高级技术专家,Apache Flink Contributor4.《基于 Flink Dynamic Table 构建流批一体数仓》李劲松 - 阿里巴巴技术专家,Apache Flink & Iceberg Committer5.《Flink 流批一体在小米的探索和实践》金风 - 小米软件开发工程师

9389 0
来自: 实时计算 Flink  版块

Flink Forward Asia 2021 实时数仓 2

实时数仓专场邀请腾讯、快手、美团、科大讯飞、理想汽车、蚂蚁金服、SmartNews、智慧芽、十荟团等多位数仓技术专家分析实时数仓的应用实践及平台智能化的探索与思考。讲师/嘉宾简介1.《蚂蚁实时数仓体系升级实践》马年圣 - 蚂蚁金服实时数仓架构师2.《Flink 在讯飞 AI 营销业务实时数仓实践》汪李之 - 科大讯飞中级大数据工程师3.《SmartNews 基于 Flink 的实时数仓建设》袁尤军 - SmartNews 数据平台首席架构师4.《十荟团基于 Flink SQL 与 Zeppelin 构建实时数仓的实践》康琪 - 十荟团高级大数据研发工程师、实时计算团队负责人,Apache Flink Contributor5.《TiDB X Flink|HTAP 为实时数据服务插上翅膀》曲明星 - 智慧芽数据仓库架构师

4592 0
来自: 实时计算 Flink  版块

Flink Forward Asia 2021 核心技术 2

核心技术专场,由 Apache Flink 核心贡献者与来自阿里巴巴、字节跳动、快手、美团等一线技术专家解析 Flink 技术动向与应用实践。讲师/嘉宾简介1.《Flink 新一代流计算和容错 - 阶段总结和展望》梅源 - 阿里巴巴开源大数据架构师,Apache Flink 引擎架构师,Apache Flink Committer2.《Improvements of Job Scheduler and Query Execution on Flink OLAP》方勇 - 字节跳动基础架构工程师3.《面向流批一体的 Flink Runtime 新进展》高赟 - 阿里巴巴技术专家,Apache Flink Committer4.《Trisk:在 Flink 上实现以 task 为中心的流处理动态 reconfiguration 的 control plane》毛言粲 - 新加坡国立大学

17252 2
来自: 实时计算 Flink  版块

SaaS模式云数据仓库 MaxCompute 应用场景实践——基于 MaxCompute SQL 的半结构化数据处理实践

介绍如何基于MaxCompute SQL 新功能,处理半结构化数据的场景,需求。讲师简介孔亮 阿里云智能 产品专家

777 0
来自: 大数据计算 MaxCompute  版块

如何快速搭建云原生企业级数据湖架构及实践分享

众所周知,数据湖技术在大数据领域炙手可热,随着在云上的广泛部署和应用,其业务价值逐渐获得业界共识。如何快搭建数据湖架构被越来越多的企业探讨。本次演讲主要分享快速搭建云原生企业级数据湖架构及实践分享。讲师简介王震 -- 阿里云计算平台事业部 开源大数据平台 技术专家

1325 0

开源大数据社区 & 阿里云 E-MapReduce 系列直播 第12期

此次课程是继上一节“ Spark 大数据处理最佳实践 ” 课后,大数据最佳实践课程的第二课。主要讲一下 flink 流计算的最佳实践。讲师根据自己多年经验总结的方法论,从 flink 学习框架入手,配合一些非常落地的最佳实践,带你有章法的学习 flink ,摆脱技术小白称号!讲师简介简锋 阿里云 EMR 数据开发平台 负责人

1040 0

外部工具连接SaaS模式云数仓MaxCompute — 商业BI分析工具篇

本次直播将介绍SaaS模式云数据仓库MaxCompute的产品整体生态,包括外部BI分析工具、数据库管理工具、ETL工具以及MaxCompute自身开放生态、阿里云产品解决方案生态和数据应用生态。重点会介绍MaxComput支持的QuickBI、Tableau、FineBI、FineReport、Yonghong Desktop、商业BI分析工具,同时进行部分连接示例演示。讲师简介木弈 阿里云智能 产品经理

1518 2
来自: 大数据计算 MaxCompute  版块

Hologres系列课程(四)RAM账号快速入门

在实践场景中,开发人员更多的是使用RAM子账号进行开发,通常主账号需要给相应的子账号授予相关产品的权限,子账号才能正常使用产品。本期课程主要介绍阿里云主账号在Hologres中给RAM子账号授权最佳实践,使其能快速使用Hologres。讲师简介史韵(闻笛) 阿里巴巴测试专家,长期从事Hologres引擎测试工作

2027 51
来自: 实时数仓 Hologres  版块

Hologres系列课程(六)透明加速MaxCompute最佳实践

MaxCompute 是面向分析的企业级 SaaS 模式云数据仓库,以 Serverless 架构提供快速、全托管的在线数据仓库服务。Hologres与MaxCompute高度融合,能以外表方式加速查询MaxCompute数据。本次主要介绍加速查询MaxCompute原理,以及如何建外表加速查询,导入内表最佳实践。讲师简介王奇(慧青),阿里巴巴技术专家,长期从事Hologres引擎开发工作

3304 2
来自: 实时数仓 Hologres  版块

Hologres系列课程(七)离线数仓加速之云原生加速OSS最佳实践

对象存储服务OSS是一种海量、安全、低成本、高可靠的云存储服务,适合存放任意类型的文件。Hologres通过与OSS打通,支持通过创建外部表的方式,无需导入导出就能直接加速查询OSS的数据。本次主要介绍Hologres加速查询OSS原理,以及如何建外表加速查询OSS不同的文件格式(CSV、ORC等)讲师简介张露(雪胤),阿里巴巴技术专家,长期从事Hologres引擎开发工作

1759 0
来自: 实时数仓 Hologres  版块

Hologres系列课程(九)实时数仓实时写入之Flink实时写入

本次主要介绍Flink高性能写入Hologres原理,以及Flink如何订阅Hologres源表、维表,实现一站式实时数仓讲师简介王华峰(继儒),阿里巴巴技术专家, 长期从事Hologres引擎开发工作。

2247 2
来自: 实时数仓 Hologres  版块

Hologres系列课程(十三)Datahub实时写入Hologres最佳实践

本次主要介绍Datahub写入Hologres原理,并实操演示数据从DTS到Datahub再写入Hologres的最佳实践讲师简介胡一博(上唐),阿里巴巴技术专家, 长期从事Hologres数据集成生态开发工作。

3375 1
来自: 实时数仓 Hologres  版块

Hologres系列课程(十一)DataWorks数据集成实时写入Hologres最佳实践

本次主要介绍如何通过DataWorks数据集成实现多种异构数据源实时写入至Hologres,并以MySQL为例,端到端详解写入最佳实践讲师简介胡一博(上唐),阿里巴巴技术专家, 长期从事Hologres数据集成生态开发工作。

2197 2
来自: 实时数仓 Hologres  版块

Hologres系列课程(十四)基于TPCH性能测试介绍

本次主要介绍在Hologres中如何基于TPCH数据集做性能测试,并提供官方测试结果以供参考。讲师简介丁烨(昆吾),阿里巴巴产品专家,Hologres产品经理

1885 0
来自: 实时数仓 Hologres  版块

Hologres系列课程(十五)性能调优之如何查看执行计划

本次主要介绍在Hologres中如何查看执行计划,并通过执行计划定位性能瓶颈,从而自助化性能调优,提升系统整体性能,实现资源更高效使用讲师简介余骏(清芬),阿里巴巴技术专家,多年分布式系统经历,对系统调优有丰富的经验

2056 0
来自: 实时数仓 Hologres  版块

Hologres系列课程(十六)性能调优手段总结

本次主要介绍在Hologres中外表、内表常用的性能调优手段,提升自助化调优能力,实现资源更高效利用讲师简介余骏(清芬),阿里巴巴技术专家,多年分布式系统经历,对系统调优有丰富的经验

2217 1
来自: 实时数仓 Hologres  版块

Hologres系列课程(十七)可视化分析最佳实践

本次主要介绍Hologres支持的可视化分析工具生态,并通过实操演示如何将Hologres数据直接对接BI工具,满足企业级可视化展示要求讲师简介丁烨(昆吾),阿里巴巴产品专家,Hologres产品经理

1561 0
来自: 实时数仓 Hologres  版块

【周二开源日第十四期】基于Flink的机器学习平台Alink

【开发者优惠来了】全网最低价,阿里云爆款服务器低至8.1元/月,更有针对学生的专享福利全面升级,戳:http://click.aliyun.com/m/1000188819/Alink 开源项目地址:https://github.com/alibaba/Alink【周二开源日系列直播】是阿里云开发者社区集结阿里巴巴各开源产品负责人,每周二19:00-20:00为大家带来阿里巴巴开源的最新最佳实践、社区参与等新鲜内容的直播栏目。戳我前往专题页看更多精彩内内容,更有阿里入职机会提供哦本期直播时间:2020-12-22 19:00-20:00直播主题:基于Flink的机器学习平台Alink直播简介:本次直播分享Alink如何帮助数据分析和应用开发人员从数据处理、特征工程、模型训练、预测, 端到端地完成整个流程。戳我观看《基于Flink的机器学习平台Alink介绍(二)》讲师简介:品一阿里云机器学习团队高级算法专家。

38906 105
来自: 人工智能平台PAI  版块

第二节课:EMR 产品入门

本节主要内容有 EMR 核心组件简介和使用、常用引擎使用示例、数据开发等讲师:孙大鹏,花名诚历,阿里巴巴 EMR 技术专家,Apache Sentry PMC,Apache Commons Committer,目前从事开源大数据存储和优化方面的工作。

1053 0

云数据仓库+数据银行 — 持续定义SaaS模式云数据仓库MaxCompute

本次直播将介绍SaaS模式云数据仓库MaxCompute,如何助力数据银行SaaS模式云战略和一体化数据开放场景介绍。分享人:隆志强 阿里云智能 高级产品专家

2570 2
来自: 大数据计算 MaxCompute  版块

云数据仓库+Serverless — 持续定义SaaS模式云数据仓库

本次直播将为您介绍现代云数据仓库的业务场景与资源使用需求,不同资源交付模式的差异化分析。并结合MaxCompute Serverless的特点及价值来讲解使用MaxCompute Serverless的最佳实践。分享人:曲宁 阿里云智能 产品专家

2806 2
来自: 大数据计算 MaxCompute  版块

云数据仓库+实时分析 — 持续定义SaaS模式云数据仓库MaxCompute

从实时分析的价值、场景和数据流程,以及用户对平台能力要求展开,讲述云数据仓库MaxCompute的产品能力优势 ,面对实时分析场景的能力演进要求。进而以实时分析典型场景的全数据流程处理、建模和分析的最佳实践,讲解MaxCompute+Hologres的解决方案,展现强强组合的能力优势。分享人:孔亮 阿里云智能 产品专家

1909 2
来自: 大数据计算 MaxCompute  版块

通过LLVM加速SparkSQL时间窗口计算

讲师介绍:王太泽第四范式特征工程数据库负责人曾在百度担任资深研发工程师一直致力于解决机器学习模型从离线到在线特征一致性问题和性能问题。议题简介为什么要优化spark时间窗口未加速前面临问题为什么要使用llvm加速而不是继续优化jvm codegen实现介绍-llvm 版本sql引擎设计如何与spark集成benchmark数据 vs spark3.0

1517 0

飞天大数据产品价值解读 — 一站式云原生AI平台

分享人:高慧玲 阿里云智能 高级产品经理本次直播全面解析基于云原生架构的机器学习全链路,从模型开发(DSW 2.0)、模型训练(DLC)、模型部署(EAS),满足客户更灵活的管控,更快速的扩容,更高效的训练,省时、省钱、省力。

1349 56
来自: 大数据计算 MaxCompute  版块

飞天大数据产品价值解读 — 最佳流批一体引擎实时计算

分享人:高旸 阿里云智能 高级产品专家本次直播为您带来流批一体引擎实时计算Ververica Platform全托管服务的介绍,以及基于Ververica Platform的实时ETL、实时机器学习、实时数仓等主要场景的介绍和部分Demo。

4834 0
来自: 大数据计算 MaxCompute  版块

Analytics Zoo上的分布式TensorFlow训练AI玩FIFA足球游戏

近年来,由于对通用人工智能研究的潜在价值,训练AI玩游戏一直是一个火热的研究领域。FIFA实时视频游戏场景复杂,需要结合图像,强化学习等多种不同的AI技术,同时也要求agents响应有实时性,因此是一个非常好的试验场,可以用来探索不同类型的AI技术。本次分享主要介绍我们在训练AI玩FIFA视频游戏方面的一些工作。有兴趣的同学,可以提前关注此开源项目:https://github.com/intel-analytics/analytics-zoo讲师介绍:喻杉,Intel大数据分析团队机器学习工程师。她目前专注于在analytics-zoo大数据和人工智能平台上开发针对时间序列分析的自动机器学习组件。在加入intel前,她在浙江大学获得了学士和硕士学位。

1894 0

MaxCompute Information Schema 详解

MaxCompute为用户提供了开放的元数据服务Information Schema。通过Information Schema用户可以对MaxCompute中管理的对象使用SQL进行全局分析,可以分析用户数据访问行为等,也可以利用这些数据构建自己的内部的元数据管理系统。本次直播将为您系统讲解Information Schema简介,安装使用,使用限制,常用场景以及使用建议。讲师介绍龙舟 阿里云智能 技术专家

2304 40
来自: 大数据计算 MaxCompute  版块

【Elasticsearch入门公开课 】01 | 课程介绍Elasticsearch核心技术与实战

Elasticsearch 是一款非常强大的开源搜索及分析引擎,在 Search Engine 分类中长期位列第一。而Elasticsearch 除了搜索以外,结合生态 Kibana、Logstash和Beats,Elasticsearch还被广泛运用在大数据近实时分析场景中,包括日志分析、运维监控、信息安全等多个领域。本次入门课程主要帮大家从概念入手,并穿插底层技术讲解及教学实操,让您更深入的了解并如何运用Elasticsearch。为了让更多用户能够跟着教程边学边做,阿里云开发者社区为大家准备了阿里云Elasticsearch 3节点1核2G,1个月的免费实验环境。本节课主要为您讲解产品特征及发展历史公司愿景与商业模式【新用户开通】阿里云Elasticsearch 3节点1核2G免费1个月开通条件:新注册用户付费模式:包年包月服务选择:商业通用版,3节点1核2G版本【讲师简介】阮一鸣,eBay Pronto 平台技术负责人。极客时间《Elasticsearch 核心技术与实战》课程讲师Pronto平台目前管理了eBay 内部上百个Elasticsearch 集群,包括4000多个数据节点。这些集群目前被广泛使用在 eBay 的生产环境中。涵盖了网站搜索,商品推荐,日志管理,风险控制,IT运维,安全监控等多个领域钉钉扫码加入ES交流群,获取课程资料【课程收益】1、从概念到实操,轻松入门2、灵活运用ELK进行搜索与大数据分析3、阿里云开发者社区免费提供云ES(3节点1核2G )1个月免费实战环境课程目录3月03日 周二 19:30——20:30【01 | 课程介绍Elasticsearch核心技术与实战】3月03日 周二 19:45——20:00【02 | 内容综述及学习建议】3月03日 周二 20:00——20:15【03 | Elasticsearch简介及其发展历史】3月03日 周二 20:15——20:30【04 | Elastic Stack家族成员及其应用场景】3月04 周三 19:30——20:00【05 | Elasticsearch的安装与简单配置】3月05日 周四 19:30——20:00【06 | Kibanan的安装与界面快速浏览】3月09日 周一 19:30——20:00【07 | 在Docker容器中运行Elasticsearch Kibana和 Cerebro】3月10日 周二 19:30——20:00【08 | Logstash安装与导入数据】3月11日 周三 19:30——20:00【09 | 基本概念:索引、文档和REST API】3月12日 周四 19:30——20:00【10 | 基本概念:节点、集群、分片及副本】3月16日 周一 19:30——20:00【11 | 文档的基本CRUD与批量操作】3月17日 周二 19:30——20:00【12 | 倒排索引介绍】3月18日 周三 19:30——20:00【13 | 通过Analyzer进行分词】3月19日 周四 19:30——20:00【14 | Search API概览】3月23日 周一 19:30——20:00【15 | URI Search详解】3月24日 周二 19:30——20:00【16 | Request Body与Query DSL简介】3月25日 周三 19:30——20:00【17 | Query String&Simple Query String查询】3月26日 周四 19:30——20:00【18 | Dynamic Mapping和常见字段类型】3月30日 周一 19:30——20:00【19 | 显式Mapping设置与常见参数介绍】3月31日 周二 19:30——20:00【20 | 多字段特性及Mapping中配置自定义Analyzer】4月01日 周三 19:30——20:00【21 | Index Template和Dynamic Template】4月02日 周四 19:30——20:00【22 | Elasticsearch聚合分析简介】4月06日 周一 19:30——20:00【23 | 课程总结】

11342 51

基于 Apache Pulsar 和 Apache Flink 进行批流一体的弹性数据处理 | 开源大数据生态专场

开源大数据生态专场”数据爆炸“时代下如何进行有效地大规模数据处理问题?大量数据处理技术与软件应运而生,形成当前百花齐放的开源大数据生态。本专场将围绕大数据开源生态、技术生态、商业生态探讨当下开源大数据的发展趋势与未来动向,并展现大数据相关技术在一线生产场景的优秀实践。讲师介绍申毅杰,StreamNative资深工程师更多直播信息开源大数据生态专场专场>>>YuniKorn 对Flink on K8s 的调度优化 | 开源大数据生态专场流处理基准测试 | 开源大数据生态专场Apache Flink and the Apache Way | 开源大数据生态专场Delivering stream data reliably with Pravega | 开源大数据生态专场Deep dive into Pyflink & integration with Zeppelin | 开源大数据生态专场Apache Flink 与 Apache Hive 的集成 | 开源大数据生态专场趣头条基于 Apache Flink+ClickHouse 构建实时数据分析平台 | 开源大数据生态专场基于 Apache Pulsar 和 Apache Flink 进行批流一体的弹性数据处理 | 开源大数据生态专场The integretion of Apache Flink SQL and Apache Calcite | 开源大数据生态专场

2192 2
来自: 实时计算 Flink  版块

Apache Flink 与 Apache Hive 的集成 | 开源大数据生态专场

开源大数据生态专场”数据爆炸“时代下如何进行有效地大规模数据处理问题?大量数据处理技术与软件应运而生,形成当前百花齐放的开源大数据生态。本专场将围绕大数据开源生态、技术生态、商业生态探讨当下开源大数据的发展趋势与未来动向,并展现大数据相关技术在一线生产场景的优秀实践。讲师介绍李锐,Apache Hive PMC,Apache Flink Contributor,阿里巴巴技术专家王刚,阿里巴巴高级开发工程师更多直播信息开源大数据生态专场专场>>>YuniKorn 对Flink on K8s 的调度优化 | 开源大数据生态专场流处理基准测试 | 开源大数据生态专场Apache Flink and the Apache Way | 开源大数据生态专场Delivering stream data reliably with Pravega | 开源大数据生态专场Deep dive into Pyflink & integration with Zeppelin | 开源大数据生态专场Apache Flink 与 Apache Hive 的集成 | 开源大数据生态专场趣头条基于 Apache Flink+ClickHouse 构建实时数据分析平台 | 开源大数据生态专场基于 Apache Pulsar 和 Apache Flink 进行批流一体的弹性数据处理 | 开源大数据生态专场The integretion of Apache Flink SQL and Apache Calcite | 开源大数据生态专场

1430 0
来自: 实时计算 Flink  版块

Apache Flink在中国农业银行的探索和实践 | 企业实践专场

企业实践专场企业实践专场将邀请知名企业一线技术专家,分享大数据及人工智能最新技术进展和实践,详细解读Apache Flink在各行业的应用与落地,包括应用场景、业务痛点、面临挑战、如何破局等宝贵经验,并就大数据与人工智能等技术的发展趋势进行探讨和展望。讲师介绍侯鑫磊,中国农业银行研发中心高级研发工程师更多直播信息企业实践专场>>>Apache Flink 在字节跳动的实践与优化 | 企业实践专场Apache Flink在快手实时多维分析场景的应用 | 企业实践专场bilibili 实时平台的架构与实践 | 企业实践专场Apache Flink在滴滴的应用与实践 | 企业实践专场Apache Flink 在网易的实践 | 企业实践专场Apache Flink在中国农业银行的探索和实践 | 企业实践专场基于Apache Flink的爱奇艺实时计算平台建设实践 | 企业实践专场实时计算在贝壳的实践 | 企业实践专场基于Flink构建CEP引擎的挑战和实践 | 企业实践专场

2573 0
来自: 实时计算 Flink  版块

Using Apache Flink as a Unified Data Processing Platform | Apache Flink 核心技术专场

Apache Flink核心技术专场数据的价值在于数据分析,而数据分析的挑战之一在于支撑大数据处理的平台技术。深度技术专题将邀请下一代大数据计算引擎Apache Flink创始团队及业界资深专家解析Flink技术动向,并回归技术本质,打造Flink全方位技术盛宴。讲师介绍崔星灿,Apache Flink Committer,York University 博士后更多直播信息Apache Flink 核心技术专场>>>Pluggable Shuffle Service and Unaligned Checkpoint | Apache Flink 核心技术专场New Source API – Make it Easy! | Apache Flink 核心技术专场Stateful Functions | Apache Flink 核心技术专场Apache Flink新场景——OLAP引擎 | Apache Flink 核心技术专场New Feature and Improvements on State Backends in Flink 1.10 | Apache Flink 核心技术专场阿里巴巴在 Apache Flink 大规模持久化存储的实践之道 | Apache Flink 核心技术专场深入探索 Apache Flink SQL 流批统一的查询引擎与最佳实践 | Apache Flink 核心技术专场Using Apache Flink as a Unified Data Processing Platform | Apache Flink 核心技术专场Apache Flink 流批一体的资源管理与任务调度 | Apache Flink 核心技术专场

1114 0
来自: 实时计算 Flink  版块

流处理基准测试 | 开源大数据生态专场

开源大数据生态专场”数据爆炸“时代下如何进行有效地大规模数据处理问题?大量数据处理技术与软件应运而生,形成当前百花齐放的开源大数据生态。本专场将围绕大数据开源生态、技术生态、商业生态探讨当下开源大数据的发展趋势与未来动向,并展现大数据相关技术在一线生产场景的优秀实践。讲师介绍金浩,英特尔软件工程师更多直播信息开源大数据生态专场专场>>>YuniKorn 对Flink on K8s 的调度优化 | 开源大数据生态专场流处理基准测试 | 开源大数据生态专场Apache Flink and the Apache Way | 开源大数据生态专场Delivering stream data reliably with Pravega | 开源大数据生态专场Deep dive into Pyflink & integration with Zeppelin | 开源大数据生态专场Apache Flink 与 Apache Hive 的集成 | 开源大数据生态专场趣头条基于 Apache Flink+ClickHouse 构建实时数据分析平台 | 开源大数据生态专场基于 Apache Pulsar 和 Apache Flink 进行批流一体的弹性数据处理 | 开源大数据生态专场The integretion of Apache Flink SQL and Apache Calcite | 开源大数据生态专场

1254 0
来自: 实时计算 Flink  版块

OPPO基于Apache Flink 的实时数仓实践 | 实时数仓专场

实时数仓专场数据仓库的建设是“数据智能”必不可少的一环,也是大规模数据应用中必然面临的挑战。实时数仓专场将聚焦Flink实时数仓在数据链路中扮演的角色与在智能商业中的重要价值,由一线大厂大数据专家分享实时数仓的应用实践及平台智能化的探索与思考。讲师介绍张俊,Apache Flink Contributor,OPPO大数据平台研发负责人更多直播信息实时数仓专场>>>美团点评基于Apache Flink 的实时数仓平台实践 | 实时数仓专场小米流式平台架构演进与实践 | 实时数仓专场Netflix:Evolving Keystone to an Open Collaborative Real-time ETL Platform | 实时数仓专场菜鸟供应链实时数据技术架构的演进 | 实时数仓专场OPPO基于Apache Flink 的实时数仓实践 | 实时数仓专场

2148 0
来自: 实时计算 Flink  版块

菜鸟供应链实时数据技术架构的演进 | 实时数仓专场

实时数仓专场数据仓库的建设是“数据智能”必不可少的一环,也是大规模数据应用中必然面临的挑战。实时数仓专场将聚焦Flink实时数仓在数据链路中扮演的角色与在智能商业中的重要价值,由一线大厂大数据专家分享实时数仓的应用实践及平台智能化的探索与思考。讲师介绍贾元乔,菜鸟高级数据技术专家更多直播信息实时数仓专场>>>美团点评基于Apache Flink 的实时数仓平台实践 | 实时数仓专场小米流式平台架构演进与实践 | 实时数仓专场Netflix:Evolving Keystone to an Open Collaborative Real-time ETL Platform | 实时数仓专场菜鸟供应链实时数据技术架构的演进 | 实时数仓专场OPPO基于Apache Flink 的实时数仓实践 | 实时数仓专场

2299 0
来自: 实时计算 Flink  版块

小米流式平台架构演进与实践 | 实时数仓专场

实时数仓专场数据仓库的建设是“数据智能”必不可少的一环,也是大规模数据应用中必然面临的挑战。实时数仓专场将聚焦Flink实时数仓在数据链路中扮演的角色与在智能商业中的重要价值,由一线大厂大数据专家分享实时数仓的应用实践及平台智能化的探索与思考。讲师介绍夏军,小米流式平台负责人,高级研发工程师更多直播信息实时数仓专场>>>美团点评基于Apache Flink 的实时数仓平台实践 | 实时数仓专场小米流式平台架构演进与实践 | 实时数仓专场Netflix:Evolving Keystone to an Open Collaborative Real-time ETL Platform | 实时数仓专场菜鸟供应链实时数据技术架构的演进 | 实时数仓专场OPPO基于Apache Flink 的实时数仓实践 | 实时数仓专场

1907 0
来自: 实时计算 Flink  版块

Apache Flink在快手实时多维分析场景的应用 | 企业实践专场

企业实践专场企业实践专场将邀请知名企业一线技术专家,分享大数据及人工智能最新技术进展和实践,详细解读Apache Flink在各行业的应用与落地,包括应用场景、业务痛点、面临挑战、如何破局等宝贵经验,并就大数据与人工智能等技术的发展趋势进行探讨和展望。讲师介绍董亭亭,快手实时计算引擎团队负责人徐明,快手大数据架构研发工程师更多直播信息企业实践专场>>>Apache Flink 在字节跳动的实践与优化 | 企业实践专场Apache Flink在快手实时多维分析场景的应用 | 企业实践专场bilibili 实时平台的架构与实践 | 企业实践专场Apache Flink在滴滴的应用与实践 | 企业实践专场Apache Flink 在网易的实践 | 企业实践专场Apache Flink在中国农业银行的探索和实践 | 企业实践专场基于Apache Flink的爱奇艺实时计算平台建设实践 | 企业实践专场实时计算在贝壳的实践 | 企业实践专场基于Flink构建CEP引擎的挑战和实践 | 企业实践专场

2134 0
来自: 实时计算 Flink  版块

Apache Flink新场景——OLAP引擎 | Apache Flink 核心技术专场

Apache Flink核心技术专场数据的价值在于数据分析,而数据分析的挑战之一在于支撑大数据处理的平台技术。深度技术专题将邀请下一代大数据计算引擎Apache Flink创始团队及业界资深专家解析Flink技术动向,并回归技术本质,打造Flink全方位技术盛宴。讲师介绍贺小令,Apache Flink Contributor,阿里巴巴技术专家更多直播信息Apache Flink 核心技术专场>>>Pluggable Shuffle Service and Unaligned Checkpoint | Apache Flink 核心技术专场New Source API – Make it Easy! | Apache Flink 核心技术专场Stateful Functions | Apache Flink 核心技术专场Apache Flink新场景——OLAP引擎 | Apache Flink 核心技术专场New Feature and Improvements on State Backends in Flink 1.10 | Apache Flink 核心技术专场阿里巴巴在 Apache Flink 大规模持久化存储的实践之道 | Apache Flink 核心技术专场深入探索 Apache Flink SQL 流批统一的查询引擎与最佳实践 | Apache Flink 核心技术专场Using Apache Flink as a Unified Data Processing Platform | Apache Flink 核心技术专场Apache Flink 流批一体的资源管理与任务调度 | Apache Flink 核心技术专场

2338 0
来自: 实时计算 Flink  版块

Pluggable Shuffle Service and Unaligned Checkpoint | Apache Flink 核心技术专场

Apache Flink核心技术专场数据的价值在于数据分析,而数据分析的挑战之一在于支撑大数据处理的平台技术。深度技术专题将邀请下一代大数据计算引擎Apache Flink创始团队及业界资深专家解析Flink技术动向,并回归技术本质,打造Flink全方位技术盛宴。讲师介绍王治江,Apache Flink Committer,阿里巴巴高级技术专家更多直播信息Apache Flink 核心技术专场>>>Pluggable Shuffle Service and Unaligned Checkpoint | Apache Flink 核心技术专场New Source API – Make it Easy! | Apache Flink 核心技术专场Stateful Functions | Apache Flink 核心技术专场Apache Flink新场景——OLAP引擎 | Apache Flink 核心技术专场New Feature and Improvements on State Backends in Flink 1.10 | Apache Flink 核心技术专场阿里巴巴在 Apache Flink 大规模持久化存储的实践之道 | Apache Flink 核心技术专场深入探索 Apache Flink SQL 流批统一的查询引擎与最佳实践 | Apache Flink 核心技术专场Using Apache Flink as a Unified Data Processing Platform | Apache Flink 核心技术专场Apache Flink 流批一体的资源管理与任务调度 | Apache Flink 核心技术专场

1844 0
来自: 实时计算 Flink  版块

实时数仓建设以及典型场景应用

本次分享会介绍实时数仓的思路以及一些实践,包括SparkStreaming SQL引擎,以及对Delta/Kudu/Druid/阿里云多种存储组件的深度整合;同时会在这个基础上介绍一些典型案例应用讲师介绍宋军,花名嵩林 阿里云EMR高级技术专家。从事Spark内核优化,对SparkCore/SprakSQL有深入了解,Spark Contributor

2540 0

可闭环 可沉淀 可持续的企业级数据赋能体系--友盟云数据中台产品实践

友盟+首席产品官林鸣晖先生带来《可闭环 可沉淀 可持续的企业级数据赋能体系--友盟云的数据中台产品实践》嘉宾介绍林鸣晖 ,友盟+首席产品官<img src="https://yqfile.alicdn.com/2fb894bb46e54b37c73639f00bde26778e18043f.png" width="200"更多课程阿里经济体大数据平台的建设与思考解密淘宝推荐实战,打造“比你还懂你”的个性化APP阿里风控大脑关于大数据应用的探索与实践可闭环 可沉淀 可持续的企业级数据赋能体系--友盟云数据中台产品实践

5236 0
来自: 大数据计算 MaxCompute  版块

(第二部分)从Python 到Java ,Pyboot加速大数据和AI的融合

Python 代表机器学习生态,而以 Hadoop/Spark 为核心的开源大数据则以 Java 为主。前者拥有数不清的算法库和程序,后者承载着海量数据和大量的企业应用。除了 SQL 这个标准方式和各种五花八门的协议接口,还有没有更高效的一手数据通道,将两个生态对接起来,乃至深度融合?Pyboot 是我们在这个方向上的探索。有兴趣的同学欢迎现场观摩演示和技术交流。嘉宾介绍郑锴,花名铁杰,阿里巴巴高级技术专家,Apache Hadoop PMC,Apache Kerby 创立者。深耕分布式系统开发和开源大数据多年,目前专注于在阿里云上提供更好用更有弹性的 Hadoop/Spark 大数据平台;孙大鹏,花名诚历,阿里巴巴计算平台事业部 EMR 技术专家,Apache Sentry PMC,Apache Commons Committer,目前从事开源大数据存储和优化方面的工作;

1808 1

Tablestore结合Spark的云上流批一体大数据架构

传统Lambda架构组件多运维复杂,如何使用一套存储和一套计算来实现流批架构充分享受技术红利?以Delta Lake为代表的新型数据湖方案越来越流行,传统的Lambda架构如何向数据湖架构进行扩展?以及结构化数据结合Delta Lake的最佳解决方案是什么。本次分享将会结合理论讲解和实际场景为您一一解答。讲师介绍王卓然, 花名琸然 阿里云存储服务技术专家

1851 0

如何有效降低大数据平台的安全风险 | 大数据企业级服务专场

如何有效降低大数据平台的安全风险-李雪峰_大数据企业级服务专场嘉宾介绍李雪峰

1555 0
来自: 大数据计算 MaxCompute  版块

阿里巴巴大数据技术关键进展及展望 | 大数据技术专场

阿里巴巴大数据技术关键进展及展望-关涛_大数据技术专场嘉宾介绍关涛

1708 0
来自: 大数据计算 MaxCompute  版块

【Spark Relational Cache实现亚秒级响应的交互式分析】

2019杭州云栖大会大数据生态专场中的分享《Spark Relational Cache实现亚秒级响应的交互式分析》Apache Spark被广泛用于超大规模的数据分析处理,在交互式分析等时间敏感的场景中,超大规模数据量的处理时间可能无法满足用户快速响应的需求。通过数据的预组织和预计算,将频繁访问的数据和计算提前执行并保存在Relational Cache中,优化后续特定模式的查询,可以显著提高查询速度,实现亚秒级的响应。本议题主要介绍Spark Relational Cache的实现原理和使用场景。主讲人王道远(健身),阿里云EMR技术专家,Apache Spark活跃贡献者,主要关注大数据计算优化相关工作。

1618 0

大数据与机器学习

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

2
今日
69701
内容
128
活动
440013
关注
你好!
登录掌握更多精彩内容

相关产品

  • 大数据开发治理平台 DataWorks
  • 检索分析服务 Elasticsearch版
  • 日志服务