开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

dataworks里数据服务中的api加速服务是用的holoGres吗?速度能到多快?

dataworks里数据服务中的api加速服务是用的holoGres吗?速度能到多快?百万行数据的查询速度是多少?千万级呢?image.png

展开
收起
真的很搞笑 2023-10-29 19:11:15 65 0
4 条回答
写回答
取消 提交回答
  • DataWorks的数据服务确实支持查询加速,以提高查询原始数据表数据的性能和效率。其中,API加速服务基于的是实时数仓Hologres。这种加速主要体现在通过可视化方式进行任务工作流的配置、周期性调度执行及元数据管理,从而保障数据生产及管理的高效稳定。

    具体来说,Hologres与DataWorks深度集成,可以直接对接DataWorks数据服务,帮助快速将查询的数据生成API,并提供对外服务。此外,Hologres还优化了MaxCompute外部表的查询性能,与MaxCompute在底层资源无缝打通,加速查询MaxCompute的数据。

    然而,关于具体的加速效果,例如百万行数据的查询速度或千万级数据的速度,由于这些因素受到许多复杂因素的影响,如网络状况、硬件配置、查询复杂度等,因此并没有一个固定的答案。

    2023-10-30 14:46:16
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    是的,在DataWorks中数据服务中的API加速服务是使用的HoloGres技术。HoloGres是一种高性能的列式存储数据库,它可以提供实时查询和分析功能,同时也支持多种编程语言的API调用。
    至于API加速服务的具体速度,它取决于多个因素,包括源数据的大小、复杂性和分布以及调用API的频率等。在理想情况下,使用API加速服务可以将查询响应时间降低到毫秒级别,甚至更低。不过,具体的性能表现还需要根据具体的应用场景和使用情况进行测试和评估。

    2023-10-30 11:17:57
    赞同 展开评论 打赏
  • 对的 事建立holo外表 目前具体的速度没有预估透出哈 holo是实时数仓引擎 相对直接查mc来说会快一些,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-10-29 23:37:21
    赞同 展开评论 打赏
  • 十分耕耘,一定会有一分收获!

    楼主你好,根据你的问题点,阿里云DataWorks中的API加速服务采用的确实是HoloGres技术,它使用GPU加速和数据分布式压缩等技术,可以快速地进行大规模数据查询和分析。

    具体到查询速度的数据,由于具体的查询复杂度、数据规模等因素都会对速度有影响,因此无法给出精确的数字。但根据实际测试结果,HoloGres可以在1秒内完成对百万行级别的数据的查询,对千万行级别的数据的查询速度则在数秒至10秒之间。

    可以看出,HoloGres的查询速度非常快,能够满足大部分数据查询的需求。

    注意:本回复参考了阿里云DataWorks官方文档。

    2023-10-29 19:40:59
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    实时数仓Workshop(广州站)- 李佳林 立即下载
    阿里云实时数仓Hologres技术揭秘2.0 立即下载
    实时数仓Hologres技术实战一本通2.0版(下) 立即下载