AI 助理
备案控制台
开发者社区 大数据 文章 正文

Pinot —— LinkedIn 开源 OLAP 存储和分析系统

2017-06-06 3353
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
云原生数据仓库AnalyticDB MySQL版，基础版 8ACU 100GB 1个月
简介：

Pinot 是一个实时分布式的 OLAP 数据存储和分析系统。LinkedIn 使用它实现低延迟可伸缩的实时分析。Pinot 从离线数据源（包括 Hadoop 和各类文件）和在线数据源（如 Kafka）中攫取数据进行分析。Pinot 被设计是可以进行水平扩展的。


<a href=https://yqfile.alicdn.com/286f264b08e6b282ff971e94e9f881e3c2ccdacb.png" >

文章转载自 开源中国社区 [http://www.oschina.net]

文章标签：
云原生数据仓库AnalyticDB MySQL版
存储
OLAP
消息中间件
分布式计算
Kafka
Hadoop
关键词：
云原生数据仓库AnalyticDB MySQL版系统
云原生数据仓库AnalyticDB MySQL版分析
开源云原生数据仓库AnalyticDB MySQL版
云原生数据仓库AnalyticDB MySQL版存储
云原生数据仓库AnalyticDB MySQL版开源
相关实践学习
阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
云原生数据仓库AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库，高度兼容MySQL协议以及SQL:92、SQL:99、SQL:2003标准，可以对海量数据进行即时的多维分析透视和业务探索，快速构建企业云上数据仓库。 了解产品 https://www.aliyun.com/product/ApsaraDB/ads
沉默术士
目录
相关文章
SelectDB
|
2月前
|
存储 自然语言处理 分布式计算
Apache Doris 3.1 正式发布：半结构化分析全面升级，湖仓一体能力再跃新高
Apache Doris 3.1 正式发布！全面升级半结构化分析，支持 VARIANT 稀疏列与模板化 Schema，提升湖仓一体能力，增强 Iceberg/Paimon 集成，优化存储引擎与查询性能，助力高效数据分析。
SelectDB
476 4
Apache Doris 3.1 正式发布：半结构化分析全面升级，湖仓一体能力再跃新高
实时数仓Hologres团队
|
4月前
|
分布式计算 Serverless OLAP
实时数仓Hologres V3.1版本发布，Serverless型实例从零开始构建OLAP系统
Hologres推出Serverless型实例，支持按需计费、无需独享资源，适合新业务探索分析。高性能查询内表及MaxCompute/OSS外表，弹性扩展至512CU，性能媲美主流开源产品。新增Dynamic Table升级、直读架构优化及ChatBI解决方案，助力高效数据分析。
实时数仓Hologres团队
668 2
实时数仓Hologres V3.1版本发布，Serverless型实例从零开始构建OLAP系统
穿过生命散发芬芳
|
4月前
|
SQL DataWorks 关系型数据库
DataWorks+Hologres：打造企业级实时数仓与高效OLAP分析平台
本方案基于阿里云DataWorks与实时数仓Hologres，实现数据库RDS数据实时同步至Hologres，并通过Hologres高性能OLAP分析能力，完成一站式实时数据分析。DataWorks提供全链路数据集成与治理，Hologres支持实时写入与极速查询，二者深度融合构建离在线一体化数仓，助力企业加速数字化升级。
穿过生命散发芬芳
339 3
游客u7dljxi6kiud6
|
6月前
|
存储 缓存 分布式计算
StarRocks x Iceberg：云原生湖仓分析技术揭秘与最佳实践
本文将深入探讨基于 StarRocks 和 Iceberg 构建的云原生湖仓分析技术，详细解析两者结合如何实现高效的查询性能优化。内容涵盖 StarRocks Lakehouse 架构、与 Iceberg 的性能协同、最佳实践应用以及未来的发展规划，为您提供全面的技术解读。 作者：杨关锁，北京镜舟科技研发工程师
游客u7dljxi6kiud6
503 9
StarRocks x Iceberg：云原生湖仓分析技术揭秘与最佳实践
SelectDB
|
9月前
|
SQL 运维 BI
湖仓分析｜浙江霖梓基于 Doris + Paimon 打造实时/离线一体化湖仓架构
浙江霖梓早期基于 Apache Doris 进行整体架构与表结构的重构，并基于湖仓一体和查询加速展开深度探索与实践，打造了 Doris + Paimon 的实时/离线一体化湖仓架构，实现查询提速 30 倍、资源成本节省 67% 等显著成效。
SelectDB
491 3
湖仓分析｜浙江霖梓基于 Doris + Paimon 打造实时/离线一体化湖仓架构
数据库知识分享者小北
|
8月前
|
关系型数据库 MySQL OLAP
无缝集成 MySQL，解锁秒级 OLAP 分析性能极限，完成任务可领取三合一数据线！
通过 AnalyticDB MySQL 版、DMS、DTS 和 RDS MySQL 版协同工作，解决大规模业务数据统计难题，参与活动完成任务即可领取三合一数据线（限量200个），还有机会抽取蓝牙音箱大奖！
数据库知识分享者小北
311 2
扬流
|
SQL 分布式计算 Serverless
EMR Serverless Spark：一站式全托管湖仓分析利器
本文根据2024云栖大会阿里云 EMR 团队负责人李钰（绝顶） 演讲实录整理而成
扬流
699 58
技术内容小助手
|
11月前
|
SQL 存储 缓存
EMR Serverless StarRocks 全面升级：重新定义实时湖仓分析
本文介绍了EMR Serverless StarRocks的发展路径及其架构演进。首先回顾了Serverless Spark在EMR中的发展，并指出2021年9月StarRocks开源后，OLAP引擎迅速向其靠拢。随后，EMR引入StarRocks并推出全托管产品，至2023年8月商业化，已有500家客户使用，覆盖20多个行业。 文章重点阐述了EMR Serverless StarRocks 1.0的存算一体架构，包括健康诊断、SQL调优和物化视图等核心功能。接着分析了存算一体架构的挑战，如湖访问不优雅、资源隔离不足及冷热数据分层困难等。
技术内容小助手
298 17
探索云世界
|
10月前
|
DataWorks 关系型数据库 OLAP
云端问道5期实践教学-基于Hologres轻量实时的高性能OLAP分析
本文基于Hologres轻量实时的高性能OLAP分析实践，通过云起实验室进行实操。实验步骤包括创建VPC和交换机、开通Hologres实例、配置DataWorks、创建网关、设置数据源、创建实时同步任务等。最终实现MySQL数据实时同步到Hologres，并进行高效查询分析。实验手册详细指导每一步操作，确保顺利完成。
探索云世界
190 8

热门文章

最新文章

  • 1
    AI Agent越用越笨？阿里云AnalyticDB「AI上下文工程」一招破解！
  • 2
    AI Agent越用越笨？阿里云AnalyticDB「AI上下文工程」一招破解！
  • 3
    【湖仓一体】阿里云AnalyticDB MySQL基于Flink CDC+Hudi实现多表全增量入湖实践
  • 4
    【最佳实践】实时计算 Flink 版在金融行业的实时数仓建设实践
  • 5
    分析型数据库+数据传输，构建企业级实时数仓
  • 6
    滴滴基于 Flink 的实时数仓建设实践
  • 7
    离线数仓（一）【数仓概念、需求架构】
  • 8
    AnalyticDB PostgreSQL版向量索引查询
  • 9
    Hive 数仓迁移 JindoFS/OSS 数据湖最佳实践
  • 10
    《Apache Flink 案例集（2022版）》——2.数据分析——美团-Flink 的实时数仓平台建设（2）
  • 1
    StarRocks x Iceberg：云原生湖仓分析技术揭秘与最佳实践
    503
  • 2
    基于 Flink+Paimon+Hologres 搭建淘天集团湖仓一体数据链路
    1413
  • 3
    客户说｜保险极客引入阿里云AnalyticDB，多业务场景效率大幅提升
    192
  • 4
    顺丰科技：从 Presto 到 Doris 湖仓构架升级，提速 3 倍，降本 48%
    205
  • 5
    中国联通网络资源湖仓一体应用实践
    330
  • 6
    抖音集团电商流量实时数仓建设实践
    523
  • 7
    光云科技 X AnalyticDB：构建 AI 时代下的云原生企业级数仓
    600
  • 8
    京东物流基于Flink & StarRocks的湖仓建设实践
    733
  • 9
    网易游戏 x Apache Doris：湖仓一体架构演进之路
    635
  • 10
    Lalamove基于Flink实时湖仓演进之路
    322

    • 相关课程

    更多
  • AnalyticDB PostgreSQL 企业智能数据中台：一站式管理数据服务资产
  • 云原生数据仓库AnalyticDB PostgreSQL 产品入门
  • 大数据知识图谱系列—如何选择合适的OLAP引擎进行数据湖分析
  • 大数据知识图谱—一文读懂云原生一体化数仓
  • 阿里云实时数仓实战 - 用户行为数仓搭建
  • 阿里云云原生数据仓库AnalyticDB MySQL版 使用教程

    • 相关电子书

    更多
  • 阿里云云原生一体化数仓
  • 基于云原生数据仓库AnalyticDB PG的最佳实践
  • 新氧云原生全栈数仓最佳实践

    • 相关实验场景

    更多
  • 基于Hologres轻量实时的高性能OLAP分析
  • AnalyticDB Zero-ETL：简单易用零成本的一站式数据分析
    • 下一篇
    阿里云弹性公网IP线路类型【BGP(多线)_精品】是什么意思？