AI 助理
备案控制台
开发者社区 云原生 Serverless 文章 正文

9.24直播预告｜DLA Serverless Spark技术解析-让您的Spark弹起来

2020-09-22 1070
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
Serverless 应用引擎免费试用套餐包，4320000 CU，有效期3个月
函数计算FC，每月15万CU 3个月
简介： 本次分享将向您介绍Serverless Spark的架构实现，对OSS访问的内核加速，以及为何相比传统集群模式性价比提升的奥秘。

相约周四（9月24号）下午4点哦～

  • 本期直播主题：DLA Serverless Spark技术解析-让您的Spark弹起来
  • 直播时间：9月24号（周四）16:00-17:00
  • 直播讲师：明朔｜阿里云-数据库产品事业部-Data Lake Analytics
    专注大数据分布式计算数据库数据湖领域，9年分布式开发经验，先后从事Aliyun自研大数据引擎、大数据平台的研发工作以及对Hadoop、Spark等开源引擎做深度定制。目前为广大公有云用户提供专业的数据湖分析服务DLA Spark。
  • 直播简介：云原生数据湖分析DLA的Serverless Spark面向数据湖场景，采用全新多租户、弹性架构，实现细粒度弹性，免运维，快速上手，性价比相对于传统集群模式有大的提升。本次分享将向您介绍Serverless Spark的架构实现，对OSS访问的内核加速，以及为何相比传统集群模式性价比提升的奥秘。

参与方式：

钉钉扫描下方海报二维码进群观看直播
明朔-2.jpg

文章标签：
函数计算
云解析DNS
Cloud Native
分布式计算
运维
对象存储
Spark
Hadoop
Serverless
数据库
大数据
关键词：
函数计算spark
serverless apache spark
函数计算技术
技术云解析DNS
apache spark技术
来 源：
开发者社区 > 数据库 > 文章 > 正文
相关实践学习
【AI破次元壁合照】少年白马醉春风，函数计算一键部署AI绘画平台
本次实验基于阿里云函数计算产品能力开发AI绘画平台，可让您实现“破次元壁”与角色合照，为角色换背景效果，用AI绘图技术绘出属于自己的少年江湖。
从 0 入门函数计算
在函数计算的架构中，开发者只需要编写业务代码，并监控业务运行情况就可以了。这将开发者从繁重的运维工作中解放出来，将精力投入到更有意义的开发任务上。
Lulu66
目录
相关文章
阿里云大数据
|
5月前
|
SQL 分布式计算 Serverless
鹰角网络：EMR Serverless Spark 在《明日方舟》游戏业务的应用
鹰角网络为应对游戏业务高频活动带来的数据潮汐、资源弹性及稳定性需求，采用阿里云 EMR Serverless Spark 替代原有架构。迁移后实现研发效率提升，支持业务快速发展、计算效率提升，增强SLA保障，稳定性提升，降低运维成本，并支撑全球化数据架构部署。
阿里云大数据
447 56
鹰角网络：EMR Serverless Spark 在《明日方舟》游戏业务的应用
阿里云大数据
|
5月前
|
分布式计算 运维 搜索推荐
立马耀：通过阿里云 Serverless Spark 和 Milvus 构建高效向量检索系统，驱动个性化推荐业务
蝉妈妈旗下蝉选通过迁移到阿里云 Serverless Spark 及 Milvus，解决传统架构性能瓶颈与运维复杂性问题。新方案实现离线任务耗时减少40%、失败率降80%，Milvus 向量检索成本降低75%，支持更大规模数据处理，查询响应提速。
阿里云大数据
253 57
探索云世界
|
2月前
|
人工智能 分布式计算 Serverless
阿里云 EMR Serverless Spark：面向 Data+AI 的高性能 Lakehouse 产品
作者：玄橙 - 阿里云 EMR Serverless Spark 产品专家 EMR Serverless Spark 是一款面向 Data+AI 的高性能 Lakehouse 产品。它为企业提供了一站式的数据平台服务，包括任务开发、调试、调度和运维等，极大地简化了数据处理和模型训练的全流程。同时，它100%兼容开源 Spark 生态，能够无缝集成到客户现有的数据平台。使用 EMR Serverless Spark，企业可以更专注于数据处理分析和模型训练调优，提高工作效率。今天我将从业务痛点、产品定位、产品介绍以及客户案例四个部分详细介绍一下 EMR Serverless Spark 这款产品。
探索云世界
124 0
探索云世界
|
3月前
|
人工智能 分布式计算 DataWorks
一体系数据平台的进化：基于阿里云 EMR Serverless Spark 的持续演进
本文介绍了一体系汽配供应链平台如何借助阿里云EMR Serverless Spark实现从传统Hadoop平台向云原生架构的迁移。通过融合高质量零部件供应与创新互联网科技，一体系利用EMR Serverless Spark和DataWorks构建高效数据分析体系，解决大规模数据处理瓶颈。方案涵盖实时数据集成、Lakehouse搭建、数仓分层设计及BI/ML应用支持，显著提升数据处理性能与业务响应速度，降低运维成本，为数字化转型奠定基础。最终实现研发效率提升、运维压力减轻，并推动AI技术深度整合，迈向智能化云原生数据平台。
探索云世界
131 4
Echo_Wish
|
6月前
|
传感器 人工智能 物联网
穿戴科技新风尚：智能服装设计与技术全解析
穿戴科技新风尚：智能服装设计与技术全解析
Echo_Wish
489 85
探索云世界
|
3月前
|
分布式计算 运维 监控
Fusion 引擎赋能：流利说如何用阿里云 Serverless Spark 实现数仓计算加速
本文介绍了流利说与阿里云合作，利用EMR Serverless Spark优化数据处理的全过程。流利说是科技驱动的教育公司，通过AI技术提升用户英语水平。原有架构存在资源管理、成本和性能等痛点，采用EMR Serverless Spark后，实现弹性资源管理、按需计费及性能优化。方案涵盖数据采集、存储、计算到查询的完整能力，支持多种接入方式与高效调度。迁移后任务耗时减少40%，失败率降低80%，成本下降30%。未来将深化合作，探索更多行业解决方案。
探索云世界
139 1
Echo_Wish
|
6月前
|
存储 分布式计算 Hadoop
从“笨重大象”到“敏捷火花”：Hadoop与Spark的大数据技术进化之路
从“笨重大象”到“敏捷火花”：Hadoop与Spark的大数据技术进化之路
Echo_Wish
273 79
Serverless小助手
|
4月前
|
人工智能 Serverless API
MCP Server 之旅第 4 站: 长连接闲置计费最高降低87%成本的技术内幕
阿里云函数计算（FC）提供事件驱动的全托管计算服务，支持 MCP Server 场景优化。通过 [MCP Runtime](https://mp.weixin.qq.com/s/_DSMRovpr12kkiQUYDtAPA)，实现 Stdio MCP Server 一键托管，并借助亲和性调度解决 Session 保持问题。针对 MCP Server 的稀疏调用特性，函数计算引入长连接闲置计费机制，在毫秒级计费基础上，显著降低资源闲置成本（最高可达87%）。用户可通过控制台或 API 开启该功能，Websocket 长请求场景亦默认支持。此方案有效提升资源利用率，为用户提供灵活、经济的计算服务。
Serverless小助手
131 2
bruce_xiaowei
|
6月前
|
人工智能 API 语音技术
HarmonyOS Next～鸿蒙AI功能开发：Core Speech Kit与Core Vision Kit的技术解析与实践
本文深入解析鸿蒙操作系统（HarmonyOS）中的Core Speech Kit与Core Vision Kit，探讨其在AI功能开发中的核心能力与实践方法。Core Speech Kit聚焦语音交互，提供语音识别、合成等功能，支持多场景应用；Core Vision Kit专注视觉处理，涵盖人脸检测、OCR等技术。文章还分析了两者的协同应用及生态发展趋势，展望未来AI技术与鸿蒙系统结合带来的智能交互新阶段。
bruce_xiaowei
336 31
音视频牛哥
|
6月前
|
编解码 监控 网络协议
RTSP协议规范与SmartMediaKit播放器技术解析
RTSP协议是实时流媒体传输的重要规范，大牛直播SDK的rtsp播放器基于此构建，具备跨平台支持、超低延迟（100-300ms）、多实例播放、高效资源利用、音视频同步等优势。它广泛应用于安防监控、远程教学等领域，提供实时录像、快照等功能，优化网络传输与解码效率，并通过事件回调机制保障稳定性。作为高性能解决方案，它推动了实时流媒体技术的发展。
音视频牛哥
287 5
云原生

Serverless

热门文章

最新文章

  • 1
    首次揭秘：阿里巴巴中间件在 Serverless 技术领域的探索
  • 2
    浅析基于 Serverless 的前后端一体化框架 | 7月2号云栖夜读
  • 3
    快速搭建 Serverless 人脸识别离线服务
  • 4
    Installing a Dependency Library for Function Compute
  • 5
    Serverless Kubernetes 快速入门指南
  • 6
    轻松搭建基于 SpringBoot + Vue 的 Web 商城应用
  • 7
    Serverless 实战 —— 快速搭建 SpringBoot 应用
  • 8
    Aliyun Serverless VSCode Extension v1.7.0 发布
  • 9
    函数计算中使用 puppeteer 的过程分析
  • 10
    三分钟学会如何在函数计算中使用 puppeteer
  • 1
    基于函数计算FC构建 Browser Tool Sandbox 详解与实操
    21
  • 2
    FunctionAI 图像生成：简化从灵感到 API 调用的每一步
    50
  • 3
    《第四纪元》玩得轻松，构建也轻松 | 阿里云云原生 API 网关、函数计算助力 IGame 快速构建轻休闲游戏
    103
  • 4
    Function AI 助力用户自主开发 MCP 服务，一键上云高效部署
    93
  • 5
    Vibecoding 新体验：实测 Qwen3 Coder 代码生成效果
    424
  • 6
    全球首个搭载Kimi-K2&Qwen3-Coder的Serverless架构VibeCoding解决方案重磅来袭！
    207
  • 7
    阿里云 Serverless 重塑创蓝云智通信底座，引领行业变革
    86
  • 8
    MCP 如何构建企业级数据分析 Agent？
    218
  • 9
    0 代码，一键部署 Qwen3
    220
  • 10
    MCP Server 之旅第 7 站：助力 MCP 打破“黑盒困境”
    65

    • 相关产品

  • 函数计算
    文档详情 产品详情

    • 相关课程

    更多
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第一阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第二阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第三阶段
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第六阶段
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第七阶段
  • 大数据实时计算框架Spark快速入门

    • 相关电子书

    更多
  • Hybrid Cloud and Apache Spark
  • Scalable Deep Learning on Spark
  • Comparison of Spark SQL with Hive

    • 推荐镜像

    更多
  • DNS
    • 下一篇
    OSS存储类型概述