AI 助理
备案控制台

开源大数据平台 E-MapReduce

首页 标签 开源大数据平台 E-MapReduce
# 开源大数据平台 E-MapReduce #
关注
1808内容
相关子社区
倚天
166内容 1活动 383关注
最新 热门 文章 问答 视频 电子书 训练营 活动
阿里云大数据Al技术
|
博文
|
来自： 大数据与机器学习
阿里云 EMR 基于 Apache DolphinScheduler 产品技术实践和社区贡献
本文整理自阿里云 EMR 数据开发团队负责人孙一凡（Evans 忆梵），在 Apache Spark & DS Meetup 的分享
# 开源大数据平台 E-MapReduce # 云原生大数据计算服务 MaxCompute # 存储 # 分布式计算 # Cloud Native # 数据可视化 # IDE # 大数据 # 测试技术 # 调度 # 开发工具 # Spark
bean_stalk
|
博文
|
来自： 大数据与机器学习
阿里云EMR Remote Shuffle Service在小米的实践，以及开源
阿里云EMR自2020年推出Remote Shuffle Service(RSS)以来，帮助了诸多客户解决Spark作业的性能、稳定性问题，并使得存算分离架构得以实施，与此同时RSS也在跟合作方小米的共建下不断演进。本文将介绍RSS的最新架构，在小米的实践，以及开源。
# 开源大数据平台 E-MapReduce # 弹性伸缩 # 对象存储 # 存储 # SQL # 缓存 # 分布式计算 # 固态存储 # 测试技术 # 对象存储 # HIVE # Spark # 流计算
开源大数据EMR
|
博文
|
来自： 大数据与机器学习
基于Alluxio系统的Spark DataFrame高效存储管理技术
介绍越来越多的公司和组织开始将Alluxio和Spark一起部署从而简化数据管理，提升数据访问性能。Qunar最近将Alluxio部署在他们的生产环境中，从而将Spark streaming作业的平均性能提升了15倍，峰值甚至达到300倍左右。
# 开源大数据平台 E-MapReduce # 存储 # 缓存 # 分布式计算 # 固态存储 # Spark
开源大数据EMR
|
博文
|
来自： 大数据与机器学习
SparkSQL DatasourceV2 之 Multiple Catalog
SparkSQL DatasourceV2作为Spark2.3引入的特性，在Spark 3.0 preview(2019/12/23)版本中又有了新的改进以更好的支持各类数据源。本文将从catalog角度，介绍新的数据源如何和Spark DatasourceV2进行集成。
# 开源大数据平台 E-MapReduce # 云解析DNS # SQL # 分布式计算 # 大数据 # 关系型数据库 # 数据挖掘 # Apache # 数据库 # HIVE # Spark # PostgreSQL
扬流
|
博文
|
来自： 大数据与机器学习
技术内幕 | 阿里云EMR StarRocks 极速数据湖分析
本文为作者在 StarRocks Summit Asia 2022 上的分享
# 开源大数据平台 E-MapReduce # 对象存储 # 存储 # SQL # 缓存 # Kubernetes # 数据挖掘 # Apache # 调度 # 对象存储 # HIVE # 容器
扬流
|
博文
|
来自： 大数据与机器学习
阿里云 EMR StarRocks VS 开源版本功能差异介绍
阿里云 E-MapReduce Serverless StarRocks 版是阿里云提供的 Serverless StarRocks 全托管服务，提供高性能、全场景、极速统一的数据分析体验，具备开箱即用、弹性扩展、监控管理、慢 SQL 诊断分析等全生命周期能力。内核 100% 兼容 StarRocks，性能比传统 OLAP 引擎提升 3-5 倍，助力企业高效构建大数据应用。本篇文章重点介绍阿里云 EMR StarRocks 与开源 StarRocks 的对比与客户案例。
# 实时计算 Flink版 # 函数计算 # 开源大数据平台 E-MapReduce # 云原生数据仓库AnalyticDB MySQL版 # SQL # 运维 # Serverless # OLAP # BI
我是搞电商ap接口的
|
博文
|
来自： 大数据与机器学习
小红书 API 接口使用指南：笔记详情数据接口的接入与使用
小红书是一款广受喜爱的生活方式分享社交平台，涵盖旅行、美食等领域。其API允许开发者批量获取笔记内容、图片链接及用户互动数据，助力内容分析与营销策略优化。要使用API，需先注册开发者账号并通过认证获取密钥；随后依据官方文档构建与发送HTTP请求，最后处理JSON格式响应数据。整个过程中，请务必遵循平台使用条款，尊重用户隐私权。
# 开源大数据平台 E-MapReduce # JSON # API # 开发者 # 数据格式 # Python
开发者说
|
博文
|
来自： 大数据与机器学习
限免首发 | Spark 企业级实战集锦，国内Spark开发者的进阶指南！
《Apache Spark 中文实战攻略》上下两册电子书重磅来袭，本书集结国内外顶级大厂技术专家，汇集多年实战经验，带你走进全球顶级开源社区之一 Apache Spark，探秘时下最流行的开源分布式内存式大数据处理引擎。
# 开源大数据平台 E-MapReduce # 容器服务Kubernetes版 # 云原生大数据计算服务 MaxCompute # 分布式计算 # Spark # Apache # 大数据 # 容器 # Kubernetes # 数据挖掘 # 机器学习/深度学习 # 算法框架/工具 # 知识图谱
扬流
|
博文
|
来自： 大数据与机器学习
猿辅导基于 EMR StarRocks 的 OLAP 演进之路
猿辅导大数据平台团队负责人申阳分享了猿辅导基于EMR StarRocks 的 OLAP 演进之路。
# 云原生数据仓库AnalyticDB MySQL版 # 云数据库 RDS MySQL 版 # 云原生大数据计算服务 MaxCompute # 开源大数据平台 E-MapReduce # SQL # 关系型数据库 # MySQL # BI # OLAP # 存储 # 分布式计算 # 监控 # druid # HIVE
建站专业户
|
24天前
|
博文
|
来自： 大数据与机器学习
0 基础建站？PageAdmin CMS 10 分钟搞定，源码免费拿！
PageAdmin CMS 为无编程基础用户提供高效建站方案。步骤包括：准备服务器、域名及源码；上传源码并配置数据库；通过安装向导完成基础设置；在后台创建栏目、填充内容；测试功能后上线。全程无需编程，简单操作即可搭建独立网站，支持后续维护与扩展。
# 开源大数据平台 E-MapReduce # 关系型数据库 # MySQL # PHP # 数据库 # 数据安全/隐私保护
免费试用