AI 助理
备案控制台
开发者社区 大数据与机器学习 开源大数据平台 E-MapReduce 文章 正文

6月23日 Spark 社区技术直播【半小时，将你的Spark SQL模型变为在线服务】

2020-06-22 700
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
EMR Serverless StarRocks，5000CU*H 48000GB*H
简介： SparkSQL在机器学习场景中应用模型从批量到实时面临的问题 - SparkSQL 转换成实时执行成本高 - 离线特征和在线特征保持一致困难 - 离线效果与在线效果差距大 我们是如何解决这些问题 相对传统实现方式我们优势 SparkSQL实时上线demo

讲师：

王太泽
第四范式特征工程数据库负责人
曾在百度担任资深研发工程师
一直致力于解决机器学习模型从离线到在线特征一致性问题和性能问题。

时间：

6月23日 19：00

观看直播方式：

扫描下方二维码入群，或届时进入直播间（回看链接）
https://developer.aliyun.com/live/43347?spm=a2c6h.12873587.0.0.127052c22xBiZl

直播介绍

SparkSQL在机器学习场景中应用模型从批量到实时面临的问题

  • SparkSQL 转换成实时执行成本高
  • 离线特征和在线特征保持一致困难
  • 离线效果与在线效果差距大

我们是如何解决这些问题
相对传统实现方式我们优势
SparkSQL实时上线demo

6月23.png

文章标签：
客服工作台
机器学习/深度学习
分布式计算
SQL
Spark
数据库
关键词：
apache spark SQL
SQL spark
社区apache spark
apache spark社区
客服工作台模型
阿里云E-MapReduce团队
目录
相关文章
wljslmz
|
7天前
|
SQL 存储 分布式计算
如何使用 Spark SQL 从 DataFrame 查询数据？
【8月更文挑战第13天】
wljslmz
16 4
Deephub
|
1月前
|
SQL 缓存 测试技术
DeepMind的新论文，长上下文的大语言模型能否取代RAG或者SQL这样的传统技术呢?
DeepMind的LOFT基准测试挑战了长上下文大型语言模型（LCLLMs）的效用，包括Gemini、GPT-4o和Claude 3 Opus。
Deephub
52 1
嘟嘟嘟嘟嘟嘟
|
1月前
|
SQL 分布式计算 DataWorks
DataWorks产品使用合集之怎么编写和执行Spark SQL
DataWorks作为一站式的数据开发与治理平台，提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案，帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述，涵盖数据处理的各个环节。
嘟嘟嘟嘟嘟嘟
43 1
屿小夏
|
1月前
|
SQL 安全 关系型数据库
【SQL】已解决：MySQL 服务无法启动
【SQL】已解决：MySQL 服务无法启动
屿小夏
282 1
1941623231718325
|
2月前
|
SQL 存储 NoSQL
SQL与NoSQL数据库的选择：技术与场景驱动下的决策
【6月更文挑战第16天】**SQL vs NoSQL数据库：技术与应用场景比较。SQL数据库以其关系模型、ACID特性、灵活查询及事务处理见长，适合结构化数据和强一致性场景。NoSQL则以数据模型灵活性、高可扩展性、高性能及低成本著称，适合大数据、高并发和快速迭代的需求。选择应基于业务需求、数据特性、系统架构和成本。**
1941623231718325
53 2
游客zn7mvnkypuy76
|
2月前
|
SQL 存储 数据库
技术好文：SQL查询语句基本练习
技术好文：SQL查询语句基本练习
游客zn7mvnkypuy76
23 0
游客zn7mvnkypuy76
|
2月前
|
SQL Oracle 关系型数据库
技术经验解读：【读书笔记】SQL语言基础
技术经验解读：【读书笔记】SQL语言基础
游客zn7mvnkypuy76
22 0
hnrk7epeorhrk
|
2月前
|
SQL 存储 关系型数据库
技术笔记：MYSQL常用基本SQL语句总结
技术笔记：MYSQL常用基本SQL语句总结
hnrk7epeorhrk
26 0
多多!
|
2月前
|
SQL Java 关系型数据库
Java与数据库连接技术JDBC关键核心之PreparedStatement以及SQL注入演示解决和原理
Java与数据库连接技术JDBC关键核心之PreparedStatement以及SQL注入演示解决和原理
多多!
25 0
最美的回忆
|
SQL 数据库
SQL Server 2005服务无法启动的解决方法
最美的回忆
1144 0
大数据与机器学习

开源大数据平台 E-MapReduce

热门文章

最新文章

  • 1
    阿里封神谈hadoop生态学习之路
  • 2
    分布式快照算法: Chandy-Lamport
  • 3
    现代流式计算的基石：Google DataFlow
  • 4
    如何使用Kafka Connect实现同步RDS binlog数据
  • 5
    Spark in action on Kubernetes - Playground搭建与架构浅析
  • 6
    梨视频：基于阿里云E-MapReduce搭建视频推荐系统的实践
  • 7
    JindoFS解析 - 云上大数据高性能数据湖存储方案
  • 8
    HIVE MapJoin异常问题处理总结
  • 9
    首次揭秘|为6.4亿人次出行提供无线网络的技术架构
  • 10
    阿里封神-大数据处理技术漫谈
  • 1
    EMR Serverless Spark 实践教程 | 通过 Apache Airflow 使用 Livy Operator 提交任务
    31
  • 2
    不是吧？这么好用的开源标注工具，竟然还有人不知道…
    16
  • 3
    迟来的EMR Serverless Spark评测报告
    182
  • 4
    DataWorks操作报错合集之在处理元数据存储时发生报错：ODPS-0010000，该如何处理
    74
  • 5
    EMR Serverless Spark 实践教程 | 通过 spark-submit 命令行工具提交 Spark 任务
    295
  • 6
    【报名中】阿里云 x StarRocks：极速湖仓第二季—上海站
    288
  • 7
    阿里云 EMR Serverless StarRocks OLAP 数据分析场景解析
    19107
  • 8
    E-MapReduce Serverless Spark体验评测
    232
  • 9
    EMR Serverless Spark 实践教程 | 通过 EMR Serverless Spark 提交 PySpark 流任务
    209
  • 10
    【综合能源】含氢气氨气综合能源系统优化调度【免费】
    84

    • 相关课程

    更多
  • 如何在 PolarDB-X 中优化慢 SQL
  • SQL完全自学手册
  • SQL Server on Linux入门教程
  • SQL入门与实践
  • 数据库及SQL/MySQL基础
  • SQL进阶及查询

    • 相关电子书

    更多
  • SQL Server 2017
  • GeoMesa on Spark SQL
  • 原生SQL on Hadoop引擎- Apache HAWQ 2.x最新技术解密malili

    • 相关实验场景

    更多
  • SQL的增删改查及函数应用
  • PolarDB MySQL自动SQL限流
  • 如何开通SQL Server的专属集群
  • 通过FastMR自动拉起大数据集群并运行TPCDS任务
  • 使用DAS实现数据库自动SQL优化
  • 使用DAS实现数据库自动SQL限流
    • 下一篇
    通义千问API入门教程