加速查询MaxCompute再对接FBI(帆软)的完整链路来啦!

简介: 本文旨在分享使用交互式分析查询MaxCompute数据,再对接FBI的完整链路,快速搭建大数据生态完整链路。

概要

MaxCompute(原ODPS)是一项大数据计算服务,它能提供快速、完全托管的PB级数据仓库解决方案,使您可以经济并高效的分析处理海量离线数据。
FineReport是领先的企业级Web报表工具,通过类Excel的设计器一键连接数据源,拖拽字段绑定单元格,一张实时报表就可以制作完成。既可以独立部署,也可以与其他系统无缝集成。易学易用易实施。
当使用MaxCompute直接对接FBI时,由于MaxCompute本身架构的限制,当需要使用FBI查询大量数据时,性能表现会比较差,不能完全满足OLPA场景的即席查询要求。
交互式分析是一款兼容Postgressql的实时交互式产品,在底层与MaxCompute无缝打通,支持直接查询、导入查询两种模式快速查询MaxCompute的数据,同时还能对接其他BI工具,实现数据源--数据查询--数据可视化分析的完整链路,完美解决MaxCompute的自身缺陷问题。
本文旨在分享使用交互式分析查询MaxCompute数据,再对接FBI的完整链路,快速搭建大数据生态完整链路。

前提条件

1.[开通交互式分析]。
2.开通MaxCompute
3.下载并安装FBI客户端。(本示例使用FineReport)

操作步骤

开发平台:本示例采用HoloStudio快速查询MaxCompute数据。关于HoloStudio的介绍,往期传送门:
《交互式分析六脉神剑》之Dataworks-HoloStudio初体验

1.准备MaxCompute离线数据

在MaxCompute中准备一张离线数据表,也可以选用数据地图中现有的MaxCompute表,示例根据MaxCompute快速入门创建表并导入数据,最终如下:
image.png

2.交互式分析加速查询MaxCompute

登录Holostudio,在HoloStudio中完成数据快速查询。小数据量建议直接加速查询,大数据量导入查询。关于查询使用HoloStudio查询MaxCompute数据的往期传送门:在吗?0代码加速查询MaxCompute请查收!
来了,2行代码秒级查询MaxCompute!
本次示例直接加速查询MaxCompute数据,如示例,在HoloStudio中,单击PG管理--外部表,即可新建一张外部表,直接查询到MaxCompute中的数据
image.png

3.FBI可视化分析

加速查询的MaxCompute表数据,可以直接在帆软中进行可视化分析。

1.配置数据源

打开帆软Report,选择**服务器 > 定义数据库连接**
image.png

2.填写配置信息

填写配置信息,示例如下。单击测试连接,若跳出弹框,提示连接成功,则表明交互式分析与帆软Report已成功连接,并单击确定,完成配置。即可前往界面进行数据开发分析。
image.png
参数说明如下:

配置项 说明 备注
数据库 Postgre 必选
驱动器 帆软Report自带的org.postgresql.Driver 选择好数据库后会自动生成
URL jdbc:postgresql://localhost:5432/dbname`` 例如:jdbc:postgresql://workshop001-cn-hangzhou.hologres.aliyuncs.com:80/postgres
用户名/密码 访问用户的Access Key ID和Access Key Secret

说明:若您的电脑未安装PostgreSQL驱动,未提示连接失败,请参见官网进行驱动安装。https://help.finereport.com/doc-view-2563.html



3.新建决策报表

在FBI首页新建决策报表,如示例,选择柱状图。
image.png

4.可视化分析外部表

新建柱状图成功后,在菜单左下角单击数据库查询,将想要查询的外部表数据以SQL语言执行。(在数据库列表中不会显示交互式分析当前数据库的外部表,需要用SQL直接查询)查看到数据后,单击确定,返回报表编辑页面
image.png

给报表配置数据,如示例所示,还可以根据业务要求,对报表进行个性化设置,包括但不限于样式、特效等。配置完成之后,先单击保存,再单击预览,即可看到最终的报表。
image.png

最终的报表展示如下:
image.png

以上即为交互式分析快速查询MaxCompute数据并对接FBI的完整demo,您可以根据业务需求进行数据查询、数据分析。
交互式分析兼容PostgreSQL,这就意味着,能对接PostgreSQL的BI工具都能使用交互式分析对接,可参见往期精彩:
加速查询MaxCompute再对接Quick BI,选交互式分析就对了!
你要的BI分析工具都在这里了
若您在使用交互式分析过程中,有任何问题,欢迎进钉钉群交流:
image.png

相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
相关文章
|
9月前
|
存储 缓存 分布式计算
OSS大数据分析集成:MaxCompute直读OSS外部表优化查询性能(减少数据迁移的ETL成本)
MaxCompute直读OSS外部表优化方案,解决传统ETL架构中数据同步延迟高、传输成本大、维护复杂等问题。通过存储格式优化(ORC/Parquet)、分区剪枝、谓词下推与元数据缓存等技术,显著提升查询性能并降低成本。结合冷热数据分层与并发控制策略,实现高效数据分析。
247 2
|
SQL 大数据 数据挖掘
玩转大数据:从零开始掌握SQL查询基础
玩转大数据:从零开始掌握SQL查询基础
419 35
|
SQL 分布式计算 数据挖掘
阿里云 MaxCompute MaxQA 开启公测,公测可申请 100CU 计算资源解锁近实时高效查询体验
阿里云云原生大数据计算服务 MaxCompute 推出 MaxQA(原 MCQA2.0)查询加速功能,在独享的查询加速资源池的基础上,对管控链路、查询优化器、执行引擎、存储引擎以及缓存机制等多个环节进行全面优化,显著减少了查询响应时间,适用于 BI 场景、交互式分析以及近实时数仓等对延迟要求高且稳定的场景。现正式开启公测,公测期间可申请100CU(价值15000元)计算资源用于测试,欢迎广大开发者及企业用户参与,解锁高效查询体验!
阿里云 MaxCompute MaxQA 开启公测,公测可申请 100CU 计算资源解锁近实时高效查询体验
|
负载均衡 大数据
大数据散列分区查询频率
大数据散列分区查询频率
184 5
|
存储 大数据 数据管理
大数据分区提高查询性能
大数据分区提高查询性能
396 2
|
存储 负载均衡 大数据
大数据水平分区提高查询性能
【11月更文挑战第2天】
272 4
|
存储 分布式计算 安全
MaxCompute Bloomfilter index 在蚂蚁安全溯源场景大规模点查询的最佳实践
MaxCompute 在11月最新版本中全新上线了 Bloomfilter index 能力,针对大规模数据点查场景,支持更细粒度的数据裁剪,减少查询过程中不必要的数据扫描,从而提高整体的查询效率和性能。
|
存储 JSON 监控
大数据-167 ELK Elasticsearch 详细介绍 特点 分片 查询
大数据-167 ELK Elasticsearch 详细介绍 特点 分片 查询
940 4
|
关系型数据库 MySQL 分布式数据库
PolarDB 并行查询问题之大数据量的实时分析查询挑战如何解决
PolarDB 并行查询问题之大数据量的实时分析查询挑战如何解决
195 2
|
SQL 分布式计算 DataWorks
MaxCompute产品使用合集之针对MaxCompute查询结果排队问题,该如何优化
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
190 10