EMR Serverless StarRocks体验测评

本文涉及的产品
EMR Serverless StarRocks,5000CU*H 48000GB*H
简介: 【8月更文挑战第14天】EMR Serverless StarRocks体验测评

定义

EMR Serverless StarRocks,为了通俗易懂,需要进行拆分,EMR、Serverless StarRocks、EMR是云原生开源大数据平台E-MapReduce,Serverless StarRocks只是EMR的一个产品规格,是开源MPP架构的OLAP分析引擎,是StarRocks在阿里云上的全托管服务,而Serverless是一种部署形态。通过如下架构图,你就会很直观的了解到StarRocks是啥了。

入门

E-MapReduce_EMR_大数据框架

EMR Serverless StarRocks

猿辅导基于 EMR StarRocks 的 OLAP 演进之路

水滴筹基于阿里云 EMR StarRocks 实战分享

基于StarRocks构建数仓场景-增量数据实时统计

基于EMR Serverless StarRocks构建分钟级准实时分析

产品的文档支持还是蛮全的,除了基本文档中心的帮助文档外,还提供了多种实战案例分享和应用场景分析,此外还有社区支持。产品试用的每一个步骤都有小问号?,点击就可以前往寻找帮助。唯一的不足的就是对当前浏览器的支持不是很友好,我用windows系统自带的Edge浏览器,在操作SQL Editor时始终无法编写SQL;而Chrome就非常友好的支持。因为EMR Serverless StarRocks属于EMR的一个产品规格,对于EMR不了解的用户来说,入门还是蛮有挑战的,当前手把手在线实验还是空白的,建议是否安排几个实战小案例做成在线实验让用户体验。

试用

点击产品评测首页的的下面位置,即可申请开始试用。

开通试用前,需要选择好地域和可用区,因为阿里云的产品都是不支持创建后变更地域的;对于没有体验过阿里云其他产品的用户来说,这里还需要提前创建好VPC、交换机等信息,可以直接点击项目下方的超链接跳转到对应产品进行创建;给实例取一个容易识别并好记的名称,并提前设置好admin用户的密码,用于manager的登录。

需要服务关联角色,点击创建便可,无需跳转,随后勾选协议,点击立即试用,至此试用开通流程已完成。

点击前往控制台,即可看到我们刚才开通试用的实例了,如下图:

待实例状态变成运行中后,我们点击实例ID便可进入实例的详情页,如下图:

此外,实例详情页还可以看到实例的BE\FE配置信息以及监控告警(默认打开的是基础版,需要高级或企业级需要开通ARMS,点击告警设置即可开通),如下图:

体验

在实例详情页点击StarRocks Manager,即可打开StarRocks的数据管理控制台,首次进入需要输入创建实例时填写的密码,完成后点击测试连通性,显示成功,点击确定即可进入。如下图:

接下来通过SQL Editor完成简单的SQL执行,如下图:

这里有必要简单普及下SQL的语法,开整:

/**创建数据库**/

create database 数据库名;

/**创建数据表**/

create table table_name(column_name column_type);

/**查询数据库**/

第一种方式:select column_name,column_name from table_name;

第二种方式:select * from table_name;

/**插入数据库**/

第一种方式:insert into table_name values (value1,value2,value3,...);

第二种方式:insert into table_name (column1,column2,column3,...) values (value1,value2,value3,...);

/**更新数据库**/

update table_name set column1=value1,column2=value2,... where some_column=some_value;

/**删除数据库**/

delete from table_name where some_column=some_value;

在控制台的全部查询里,可以看到刚执行的结果,如下图:

单机控制台的元数据管理,可以看到当前账号下所有的数据库信息,如下图:

在刚才的SQL Editor过程中,我们实际上是实现了一个类似Mysql的INSERT INTO数据导入功能,在EMR StarRocks Manager控制台,单击元数据管理,再单击数据库名称,点击任务,即可在其他导入页签查看到SQL的执行状态。如下图:

此外,除了通过上面的StarRocks Manager来访问实例外,还可以使用EMR Notebook。在E-MapReduce的控制台页面可以看到,当前Notebook、Workflow尚处于公测阶段,如下图:

点击控制台的Notebook即可跳转到免费试用申请页面,如下图:

填入必要信息,等待审核。

上面体验的都是实例的基本使用,此外用户还可以根据业务的实际需求进行实例节点的扩缩容和升降配,如下图:

由于提供试用的是入门版,扩缩容和升降配功能暂时没有标配,需要升级到标准版才有。标准版收费如下图:

还可以操作版本的升级迭代,分大小版,均可以实现自动升级,可实现业务的平滑无缝迭代。要注意的是版本是不支持降级的,所以升级前一定要确认好,避免因为版本差异带来不必要的麻烦。如下图:

小结

通过EMR StarRocks Manager可以非常高效灵活地创建和管理StarRocks实例,提供了非常良好的交互式分析体验;同时StarRocks实例的构建不需要依赖任何其他组件,真正实现了快速部署、方便维护、高效运行;此外通过控制台,用户还可以无缝扩缩、升降配实例节点、在线平滑升级,使得实例管理和维护更高效,维护人员仅需专注于实例本身。

通过对上述产品功能的体验,发现当前基本可以满足需求,但对于复杂度高、数据量大的企业级业务当前还缺乏足够的文档或者案例支持,当前支持的数据导入方式多样,基本涵盖了企业应用中能够使用到的数据类型,这点还是非常值得肯定的。

配合大数据数据迁移工具CloudCanal,EMR Serverless StarRocks可以更高效地获得数据源,非常好地解决了传统Hadoop体系组件强耦合的痛点,从而能应用于更丰富的业务场景,比如IOT领域、智慧城市、数字智能领域、异构、容灾等。

相关实践学习
【文生图】一键部署Stable Diffusion基于函数计算
本实验教你如何在函数计算FC上从零开始部署Stable Diffusion来进行AI绘画创作,开启AIGC盲盒。函数计算提供一定的免费额度供用户使用。本实验答疑钉钉群:29290019867
建立 Serverless 思维
本课程包括: Serverless 应用引擎的概念, 为开发者带来的实际价值, 以及让您了解常见的 Serverless 架构模式
目录
相关文章
|
3天前
|
SQL 存储 缓存
EMR Serverless StarRocks 全面升级:重新定义实时湖仓分析
本文介绍了EMR Serverless StarRocks的发展路径及其架构演进。首先回顾了Serverless Spark在EMR中的发展,并指出2021年9月StarRocks开源后,OLAP引擎迅速向其靠拢。随后,EMR引入StarRocks并推出全托管产品,至2023年8月商业化,已有500家客户使用,覆盖20多个行业。 文章重点阐述了EMR Serverless StarRocks 1.0的存算一体架构,包括健康诊断、SQL调优和物化视图等核心功能。接着分析了存算一体架构的挑战,如湖访问不优雅、资源隔离不足及冷热数据分层困难等。
|
18天前
|
SQL 安全 Serverless
活动实践 | 基于EMR StarRocks实现游戏玩家画像和行为分析
基于阿里云EMR Serverless StarRocks,利用其物化视图和DLF读写Paimon等能力,构建游戏玩家画像和行为分析平台。通过收集、处理玩家行为日志,最终以报表形式展示分析结果,帮助业务人员决策。
|
23天前
|
存储 弹性计算 关系型数据库
活动实践 | 告别资源瓶颈,函数计算驱动多媒体文件处理测评
本方案介绍了一种高效处理文件的方法,适用于企业办公和社交媒体应用。通过阿里云的函数计算、对象存储OSS和轻量消息队列,实现文件的异步处理,如格式转换和水印添加,有效减轻了核心应用的负担,提高了业务稳定性和资源利用率。方案包括云服务器ECS、云数据库RDS、OSS存储等组件,支持快速部署和资源清理。
|
2月前
|
SQL 流计算 关系型数据库
基于OpenLake的Flink+Paimon+EMR StarRocks流式湖仓分析
阿里云OpenLake解决方案建立在开放可控的OpenLake湖仓之上,提供大数据搜索与AI一体化服务。通过元数据管理平台DLF管理结构化、半结构化和非结构化数据,提供湖仓数据表和文件的安全访问及IO加速,并支持大数据、搜索和AI多引擎对接。本文为您介绍以Flink作为Openlake方案的核心计算引擎,通过流式数据湖仓Paimon(使用DLF 2.0存储)和EMR StarRocks搭建流式湖仓。
456 4
基于OpenLake的Flink+Paimon+EMR StarRocks流式湖仓分析
|
23天前
|
Serverless BI
有奖实践,基于EMR StarRocks实现游戏玩家画像和行为分析
阿里云EMR-StarRocks联合镜舟科技,基于EMR-StarRocks实现游戏实时湖仓分析,免费试用物化视图、Paimon写入查询等新能力,前45位赢取StarRocks定制T恤、Lamy钢笔,小米充电宝,阿里云拍拍灯等活动礼品,前500位均可获得创意马克杯。
80 3
|
2月前
|
数据采集 运维 DataWorks
DataWorks on EMR StarRocks,打造标准湖仓新范式
本文整理自阿里云计算平台产品专家周硕(簌篱)在阿里云DataWorks on EMR StarRocks解决方案介绍中的分享。介绍了阿里云DataWorks与EMR Serverless StarRocks的结合使用,详细阐述了在数据同步、数据消费、数据治理三大场景中的核心能力。DataWorks作为大数据开发治理平台,提供了从数据建模、数据集成、数据开发到数据治理的全链路解决方案,结合StarRocks的高性能分析能力,帮助企业实现OLAP分析、湖仓一体开发及数据综合治理,满足复杂业务场景下的需求,提升数据处理和分析效率。
|
3月前
|
SQL 存储 缓存
降本60% ,阿里云 EMR StarRocks 全新发布存算分离版本
阿里云 EMR Serverless StarRocks 现已推出全新存算分离版本,该版本不仅基于开源 StarRocks 进行了全面优化,实现了存储与计算解耦架构,还在性能、弹性伸缩以及多计算组隔离能力方面取得了显著进展。
424 6
|
3月前
|
SQL 分布式计算 Serverless
EMR Serverless Spark:一站式全托管湖仓分析利器
本文根据2024云栖大会阿里云 EMR 团队负责人李钰(绝顶) 演讲实录整理而成
195 2
|
3月前
|
人工智能 自然语言处理 监控
体验《触手可及,函数计算玩转 AI 大模型》解决方案测评
本文介绍了《触手可及,函数计算玩转 AI 大模型》解决方案的测评体验。作者对解决方案的原理理解透彻,认为文档描述清晰但建议增加示例代码。部署过程中文档引导良好,但在环境配置和依赖安装上遇到问题,建议补充常见错误解决方案。体验展示了函数计算在弹性扩展和按需计费方面的优势,但需增加性能优化建议。最后,作者明确了该方案解决的主要问题及其适用场景,认为在处理大规模并发请求时需要更多监控和优化建议。
52 2
|
3月前
|
SQL 存储 缓存
阿里云EMR StarRocks X Paimon创建 Streaming Lakehouse
讲师焦明烨介绍了StarRocks的数据湖能力,如何使用阿里云EMR StarRocks构建基于Paimon的极速实时湖仓,StarRocks与Paimon的最新进展及未来规划。
147 3