AI 助理
备案控制台

Spark

首页 标签 Spark
# Spark #
关注
9105内容
最新 热门 文章 问答 课程
阿里云实时计算Flink
|
博文
|
来自： 大数据与机器学习
FeatHub：流批一体的实时特征工程平台
本次分享中，将介绍 FeatHub，一个由阿里云自研并开源的实时特征平台。我们将介绍 FeatHub 的架构设计，已经完成的工作，以及近期的发展计划。
# 实时计算 Flink版 # 云消息队列 Kafka 版 # 云数据库 Tair（兼容 Redis） # 机器学习/深度学习 # 存储 # 消息中间件 # 分布式计算 # 监控 # Kafka # 开发工具 # 流计算 # Spark # Python
yuanzhengme
|
博文
Spark【基础知识 02】【弹性式数据集RDDs】（部分图片来源于网络）
【2月更文挑战第13天】Spark【基础知识 02】【弹性式数据集RDDs】（部分图片来源于网络）
# 存储 # 缓存 # 分布式计算 # Java # Spark
JavaPub
|
博文
Hadoop生态系统介绍(二)大数据技术Hadoop入门理论系列之一----hadoop生态圈介绍
Hadoop生态系统介绍(二)大数据技术Hadoop入门理论系列之一----hadoop生态圈介绍
# 云消息队列 Kafka 版 # 资源管理 # 云数据库HBase版 # 云原生大数据计算服务 MaxCompute # 日志服务 # 分布式计算 # Hadoop # 分布式数据库 # Apache # Spark
阿里云基础设施.
|
8月前
|
博文
月之暗面Kimi大模型海量数据预处理实践
加速大模型的训练迭代，在模型数据预处理方面，需要高性价比、弹性灵活的 CPU 和 GPU 算力满足模型迭代的业务实践。
# 数据采集 # 分布式计算 # 监控 # 对象存储 # Spark
gabrywu
|
博文
基于Spark Streaming预测股票走势的例子（二）
上一篇博客中，已经对股票预测的例子做了简单的讲解，下面对其中的几个关键的技术点再作一些总结。 1、updateStateByKey 　　由于在1.6版本中有一个替代函数，据说效率比较高，所以作者就顺便研究了一下该函数的用法。
# 分布式计算 # 流计算 # Spark
阿里云E-MapReduce团队
|
博文
|
来自： 大数据与机器学习
超详攻略！Databricks 数据洞察 - 企业级全托管 Spark 大数据分析平台及案例分析
5分钟读懂 Databricks 数据洞察 ~ 更多详细信息可登录 Databricks 数据洞察 产品链接：https://www.aliyun.com/product/bigdata/spark（当前产品提供￥599首购试用活动，欢迎试用！）
# 开源大数据平台 E-MapReduce # 云数据库 RDS MySQL 版 # 云原生大数据计算服务 MaxCompute # 对象存储 # 存储 # 机器学习/深度学习 # 人工智能 # 分布式计算 # 大数据 # 数据挖掘 # BI # 调度 # 对象存储 # Spark
周周的奇妙编程
|
博文
阿里云大数据ACA及ACP复习题（151~160）
本人备考阿里云大数据考试时自行收集准备的题库，纯手工整理的，能够覆盖到今年7月份，应该是目前最新的，发成文章希望大家能一起学习，不要花冤枉钱去买题库背了，也希望大家能够顺利通关ACA和ACP考试。
# 云原生大数据计算服务 MaxCompute # 数据集成 Data Integration # 云解析DNS # 存储 # 分布式计算 # Hadoop # 分布式数据库 # Spark
赵渝强老师
|
12月前
|
博文
|
来自： 大数据与机器学习
【赵渝强老师】大数据生态圈中的组件
本文介绍了大数据体系架构中的主要组件，包括Hadoop、Spark和Flink生态圈中的数据存储、计算和分析组件。数据存储组件包括HDFS、HBase、Hive和Kafka；计算组件包括MapReduce、Spark Core、Flink DataSet、Spark Streaming和Flink DataStream；分析组件包括Hive、Spark SQL和Flink SQL。文中还提供了相关组件的详细介绍和视频讲解。
# 云消息队列 Kafka 版 # 云数据库HBase版 # 云原生大数据计算服务 MaxCompute # 实时计算 Flink版 # SQL # 分布式计算 # 大数据 # Spark # 流计算
小Lee
|
12月前
|
博文
大数据数据倾斜处理
【11月更文挑战第4天】
# 云原生大数据计算服务 MaxCompute # 存储 # 分布式计算 # 监控 # 大数据 # Spark
扬流
|
博文
|
来自： 大数据与机器学习
深度解析数据湖存储方案Lakehouse架构【Databricks 数据洞察公开课】
从数据仓库、数据湖的优劣势，湖仓一体架构的应用和优势等多方面深度解析Lakehouse架构。
# 开源大数据平台 E-MapReduce # 对象存储 # 日志服务 # 云解析DNS # 存储 # 数据采集 # 机器学习/深度学习 # 分布式计算 # 大数据 # BI # 数据库 # 对象存储 # Spark # 数据格式
免费试用