Hologres实时湖仓能力入门实践
本文由武润雪（栩染）撰写，介绍Hologres 3.0版本作为一体化实时湖仓平台的升级特性。其核心能力包括湖仓存储一体、多模式计算一体、分析服务一体及Data+AI一体，极大提升数据开发效率。文章详细解析了两种湖仓架构：MaxCompute + Hologres实现离线实时一体化，以及Hologres + DLF + OSS构建开放湖仓架构，并深入探讨元数据抽象、权限互通等重点功能，同时提供具体使用说明与Demo演示。
Dataphin离线数仓搭建深度测评：数据工程师的实战视角
作为一名金融行业数据工程师，我参与了阿里云Dataphin智能研发版的评测。通过《离线数仓搭建》实践，体验了其在数据治理中的核心能力。Dataphin在环境搭建、管道开发和任务管理上显著提效，如测试环境搭建从3天缩短至2小时，复杂表映射效率提升50%。产品支持全链路治理、智能提效和架构兼容，帮助企业降低40%建设成本，缩短60%需求响应周期。建议加强行业模板库和移动适配功能，进一步提升使用体验。
【亲测有用】数据中台数仓查询中心能力演示
杭州奥零数据科技有限公司成立于2023年，专注于数据中台业务，维护开源项目AllData并提供商业版解决方案。AllData提供数据集成、存储、开发、治理及BI展示等一站式服务，支持AI大模型应用，助力企业高效利用数据价值。
vivo基于Paimon的湖仓一体落地实践
本文整理自vivo互联网大数据专家徐昱在Flink Forward Asia 2024的分享，基于实际案例探讨了构建现代化数据湖仓的关键决策和技术实践。内容涵盖组件选型、架构设计、离线加速、流批链路统一、消息组件替代、样本拼接、查询提速、元数据监控、数据迁移及未来展望等方面。通过这些探索，展示了如何优化性能、降低成本并提升数据处理效率，为相关领域提供了宝贵的经验和参考。
小红书湖仓架构的跃迁之路
小红书研发工程师李鹏霖（丁典）在StarRocks年度峰会上分享了如何通过结合StarRocks和Iceberg实现极速湖仓分析架构。新架构使P90查询性能提升了3倍，查询响应时间稳定在10秒以内，存储空间减少了一半。RedBI自助分析平台支持灵活、快速的即席查询，优化了排序键和Join操作，引入DataCache功能显著提升查询性能。未来将探索近实时湖仓分析架构，进一步优化处理能力。
基于云服务器的数仓搭建-hive/spark安装
本文介绍了在本地安装和配置MySQL、Hive及Spark的过程。主要内容包括：
- **MySQL本地安装**：详细描述了内存占用情况及安装步骤，涉及安装脚本的编写与执行，以及连接MySQL的方法。
- **Hive安装**：涵盖了从上传压缩包到配置环境变量的全过程，并解释了如何将Hive元数据存储配置到MySQL中。
- **Hive与Spark集成**：说明了如何安装Spark并将其与Hive集成，确保Hive任务由Spark执行，同时解决了依赖冲突问题。
- **常见问题及解决方法**：列举了安装过程中可能遇到的问题及其解决方案，如内存配置不足、节点间通信问题等。
基于云服务器的数仓搭建-服务器配置
本文介绍了购置并配置三台云服务器的详细步骤。使用FinalShell连接服务器，并安装了必要的工具如epel-release、net-tools和vim。关闭防火墙后，在/opt目录下创建module和software文件夹，卸载默认JDK并修改主机名。添加环境变量路径/home/alpfree/bin，编写集群分发脚本xsync实现文件同步，配置无密登录，安装并分发JDK。参考资料来自海波老师的电商数仓课程。
