新一代云原生实时数仓 SelectDB(二)

本文涉及的产品
可观测可视化 Grafana 版,10个用户账号 1个月
性能测试 PTS,5000VUM额度
应用实时监控服务-可观测链路OpenTelemetry版,每月50GB免费额度
简介: 新一代云原生实时数仓 SelectDB(二)

数智创新行-新一代云原生实时数仓 SelectDB(二)

嘉宾信息

姜国强 SelectDB 云产品负责人


新一代云原生实时数仓 SelectDB(二)


三、SelectSelectDB Cloud 特点

image.png

下面我们更多的从产品的维度来介绍特点,技术层面,我的同事肖芳会进行更详细的介绍的,第一个产品特点是多云国际化,目前已经上线了中国的国际站和国内国际的安全合格要求,并且支持了阿里云程序员,多个云之间的使用体验它是接近的,这两方面,用户来使用,用户可以按去选择去使用哪一个云,第二个特点是功能丰富完善,虽然b是一个独立的,垂直的云产品,但它的功能是相对完善,首先是仓库集群管理,通过仓库集群管理功能,用户可以一键的去创建仓库,创建集群,并且对仓库集群进行伸缩销毁等典型操作,比较方便。第二个功能是数据查询,通过数据拆分功能,用户可以快速的访问体验数据分析,并且可以去查看具体查询的一个性能。第三个功能是监控告警,SelectDB提供了简单的监控告警功能,满足用户日常的使用,这里面目前是提供了这种监控指标,更多的偏向于资源型,可用性的这方面。

 

image.png

 

我们希望用户更多的专注业务,不用管长做那个运行状态,第4个功能是用量计费,提供了仓库内部的用量统计,组织内部的这种用量计费统计等,方便用户去查看自己的使用情况,有开销情况,第三个特点是简单易用,前面我们介绍了,是a比较强大的管理控制台,此外,我们也在导入查询方面做了大量的工作,数据导入方面,我们支持通过h方式进行使导入,通过方式从对象存市上导入,也提供了k, spark等产品的的后面用户进行数据打入,非常简单易用,由于兼容了mysql协议,mysql生态里面的相关工具大量的可视化工具都可以直接来访问一些典型的工具,丰富的第4个产品特性是安全可靠,首先,我们从产品架构上来保证了数据分析的安全可靠,提供了组织和仓股两个层级的隔离,用户可以按需的去选择使用,另外,我们支持多集群的架构,多个集群之间的计算资源是相互隔离的,互不影响。另外,多个集群底层共享数据,如果每一个可用区的集群故障了,可以在另一个可用区快速打起一个新的集群,保证服务的可用性,其他方面的话,我们做了很多安全可靠的工作,比如说在权限认证方面,我们通过来保证权限认证方面的安全,我们支持新方式的权限认证机制,并且做到的行列,这种细粒度的权限控制,同时支持黑名单来禁止一些高位的查询来访问,在网络传输方面,通过这种连接管理来提供网络传输的安全可靠,通过提供网类的访问,不会经过工网比较安全,通过public connection提供公网级的安全访问支持批牌名单传输,加密这些特性。另外,也支持vpc的提供用户完全独立的房屋环境,在数据存储方面,通过对象存储来达到安全可靠,数据存储来多个机房中可以保证12个九的可靠性,而且对象存储,提供服务,接口,资源等多个级别的授权,底层的数据可以按需的选择是否加密来保证数据的安全,前面我们介绍的是在多云国际化,简单易用,功能丰富,安全可靠方面的特性。

 

四、SelectSelectDB Cloud 操作演示

下面我来进行操作演示,方便大家更具体,更详细的了解,大家可以通过问我们的云产品,我们主要通过这个软件进行演示,首先我们打开app,然后cloud进入云产品的登录页面,浏览器默认会把它引导到中国的,我们可以通过右上角来切换中国弹和国际,这里我们通过中国是可以的,提供了邮箱加密码或者邮箱的方式登录,新用户可以通过验证码方式登录并且完成注册,这里我们直接来登录,登录之后进入到的控制台里面包含了我们前面介绍的完整的功能,包含仓库的管理,集群的管理包含数据查询,监控告警,用量统计等相关功的,我们逐个来介绍。
首先我们来看看仓库管理部分,这里面是完整的仓库列表,我们新建一个仓库来满足某一个新业务的使用,以阿里云为例,仓库正在创建中,一般创建一个仓库需要一分钟左右的时间,我们先拿其他它的样级仓库来介绍功能,我们提前创建好了一个仓库,原包含两个集群,我们可以去新建一个集群,一个节点,现在集群正在创建中,对已有的集群我们可以去重启,可以查看详情,在详情里面,可以对集群进行伸缩,删除等操作,这里我们对集群做一个重启,两个集群正在操作中,我们可以来先介绍其他的功能模块,我们先来看看连接部分,前面我们介绍提供万连接网连接两种方式,用于访问,比较安全,在公网环境下,我们提供了ip白名单和传输加密,来保证公网网问的安全,这里把本机的ip白名单给加入进去,加入进去之后,我们可以通过买受来连接访问输入密码,来看看有哪位置创建一个。

可以看到,我们可以通过mysql生态的相关工具来访问是SelectDB,其他的可视化工具也很方便,我回到控制台上做进一步的演示,我访问部分数据,允许我们对仓库里面的数据进行快速查询分析,这里我们今天准备好了一份样例数据查询,前面我们创建了一个test的数据库,下面我们来建一些表,选择test仓库集群,然后我们可以使用来进行数据导入,点击运行进行导入,导入过程是异步的,我们可以通过修拼命点来查看导入的进度,可以看到导致在进行中,由于导入速度比较慢,我们用一份线程的数据来进行分析,首先,我们来看看总共有多少条数据,可以看到,总共有接近一亿条数据,我们来看看一个相对真实的查询,我们来查询id的平均值会对全票进行扫描,可以看到查询的耗时是397毫秒,我们再查一次,查询耗时相对比较稳定,然后我们来使用大区间查询,大致群有三个节点,查询速度会更快一点,可以看到耗时大概在140毫秒左右,相对比较稳定,比小集群要快,也说明了集群有比较好的线性扩展能力,这里我们要准备了一个更复杂的查询,点击运行来执行查询,第一次查询会比较慢,数据还没有被缓存,反正之后查询的耗时大概在三秒左右,然后我们来查大集群的查询耗时大概在800多毫秒,可以看到,这个扩展线还是比较好的,我们来看看监控告警模块,

在监控告警部分,我们提供了监控指标和告点能力,监控指标,我们提供基础的这种面向资源的告点和集群可用性相关的告警,我们希望用户更多的去关注业务,不用太多的去关注集群内部的一些告警指标,告警层面,我们提供了简单应用的告警能力,有丰富的告警渠道,方便大家,满足大家日常的到底需求,用量模块我们会按小时统计每个仓库内部资源的用量情况,方便大家看看自己的资源开销,而在用户菜单里面的用户中心里,我们会统计整个组织的力度的费用情况,方便大家来分析成本的情况。

image.png

从前面介绍中我们可以看到我们提供了这种仓库集群的管理,数据访问,监控告警,用量,计费等完善的功能,方便大家的日常使用。


相关实践学习
基于Hologres轻松玩转一站式实时仓库
本场景介绍如何利用阿里云MaxCompute、实时计算Flink和交互式分析服务Hologres开发离线、实时数据融合分析的数据大屏应用。
相关文章
|
4月前
|
数据采集 运维 Cloud Native
Flink+Paimon在阿里云大数据云原生运维数仓的实践
构建实时云原生运维数仓以提升大数据集群的运维能力,采用 Flink+Paimon 方案,解决资源审计、拓扑及趋势分析需求。
18507 54
Flink+Paimon在阿里云大数据云原生运维数仓的实践
|
3月前
|
存储 运维 Cloud Native
"Flink+Paimon:阿里云大数据云原生运维数仓的创新实践,引领实时数据处理新纪元"
【8月更文挑战第2天】Flink+Paimon在阿里云大数据云原生运维数仓的实践
275 3
|
5月前
|
Cloud Native 数据管理 OLAP
云原生数据仓库AnalyticDB产品使用合集之是否可以创建表而不使用分区
阿里云AnalyticDB提供了全面的数据导入、查询分析、数据管理、运维监控等功能,并通过扩展功能支持与AI平台集成、跨地域复制与联邦查询等高级应用场景,为企业构建实时、高效、可扩展的数据仓库解决方案。以下是对AnalyticDB产品使用合集的概述,包括数据导入、查询分析、数据管理、运维监控、扩展功能等方面。
405 2
云原生数据仓库AnalyticDB产品使用合集之是否可以创建表而不使用分区
|
5月前
|
Cloud Native 关系型数据库 MySQL
云原生数据仓库AnalyticDB产品使用合集之如何修改云ADB MySQL版的默认LIMIT
阿里云AnalyticDB提供了全面的数据导入、查询分析、数据管理、运维监控等功能,并通过扩展功能支持与AI平台集成、跨地域复制与联邦查询等高级应用场景,为企业构建实时、高效、可扩展的数据仓库解决方案。以下是对AnalyticDB产品使用合集的概述,包括数据导入、查询分析、数据管理、运维监控、扩展功能等方面。
93 21
|
5月前
|
Cloud Native 关系型数据库 MySQL
《阿里云产品四月刊》—云原生数据仓库 AnalyticDB MySQL 版 新功能
阿里云瑶池数据库云原生化和一体化产品能力升级,多款产品更新迭代
101 3
|
5月前
|
SQL Cloud Native 关系型数据库
云原生数据仓库AnalyticDB产品使用合集之如何进行一键诊断
阿里云AnalyticDB提供了全面的数据导入、查询分析、数据管理、运维监控等功能,并通过扩展功能支持与AI平台集成、跨地域复制与联邦查询等高级应用场景,为企业构建实时、高效、可扩展的数据仓库解决方案。以下是对AnalyticDB产品使用合集的概述,包括数据导入、查询分析、数据管理、运维监控、扩展功能等方面。
420 7
|
5月前
|
存储 SQL Cloud Native
云原生数据仓库AnalyticDB产品使用合集之热数据存储空间在什么地方查看
阿里云AnalyticDB提供了全面的数据导入、查询分析、数据管理、运维监控等功能,并通过扩展功能支持与AI平台集成、跨地域复制与联邦查询等高级应用场景,为企业构建实时、高效、可扩展的数据仓库解决方案。以下是对AnalyticDB产品使用合集的概述,包括数据导入、查询分析、数据管理、运维监控、扩展功能等方面。
117 4
|
5月前
|
存储 关系型数据库 MySQL
云原生数据仓库AnalyticDB产品使用合集之是否支持rdb数据库实时同步
阿里云AnalyticDB提供了全面的数据导入、查询分析、数据管理、运维监控等功能,并通过扩展功能支持与AI平台集成、跨地域复制与联邦查询等高级应用场景,为企业构建实时、高效、可扩展的数据仓库解决方案。以下是对AnalyticDB产品使用合集的概述,包括数据导入、查询分析、数据管理、运维监控、扩展功能等方面。
184 4
|
5月前
|
Cloud Native 关系型数据库 MySQL
云原生数据仓库AnalyticDB产品使用合集之是否支持mysql_fdw 和clickhousedb_fdw外部数据包装器
阿里云AnalyticDB提供了全面的数据导入、查询分析、数据管理、运维监控等功能,并通过扩展功能支持与AI平台集成、跨地域复制与联邦查询等高级应用场景,为企业构建实时、高效、可扩展的数据仓库解决方案。以下是对AnalyticDB产品使用合集的概述,包括数据导入、查询分析、数据管理、运维监控、扩展功能等方面。
140 4
|
5月前
|
Cloud Native 关系型数据库 OLAP
云原生数据仓库AnalyticDB产品使用合集之 orcale的行转列函数wm_concat 在pg版本有对应的相关函数吗
阿里云AnalyticDB提供了全面的数据导入、查询分析、数据管理、运维监控等功能,并通过扩展功能支持与AI平台集成、跨地域复制与联邦查询等高级应用场景,为企业构建实时、高效、可扩展的数据仓库解决方案。以下是对AnalyticDB产品使用合集的概述,包括数据导入、查询分析、数据管理、运维监控、扩展功能等方面。