类目筛选
2024-05-15
162736
充分发挥 SQL 能力
MaxCompute（ODPS）SQL 发展到今天已经颇为成熟，作为一种 SQL 方言，可以高效地应用在各种数据处理场景。本文尝试独辟蹊径，强调通过灵活的、发散性的数据处理思维，就可以用最基础的语法，解决复杂的数据场景。
162,736
2024-05-15
3787
深度剖析 RocketMQ 5.0，流存储：流场景的诉求是什么？
本文将从使用的角度出发，来更详细的展示一下流存储的场景，看看它和业务消息的场景有哪些区别。 RocketMQ 5.0 面向流存储的场景，提供了哪些特性。再结合两个数据集成的案例，来帮助大家了解流存储的用法。
3,787
2024-05-15
79344
深度剖析 RocketMQ 5.0，流数据库：如何实现一体化流处理？
本文将从概念和宏观角度理解什么是流处理。 RocketMQ 5.0，学习 RocketMQ 提供的轻量流处理引擎 RStreams，了解其特性和原理。学习 RocketMQ 的流数据库 RSQLDB，通过流存储和流计算的深度结合，看它如何进一步降低流处理使用门槛。
79,344
2024-05-15
695
资源编排ROS之模块：实现模板代码复用（进阶篇）
资源编排ROS模块能够实现模板代码复用。支持输入输出、公共模块、版本管理、共享模块等功能。在使用场景上，除了对基础设施模块化外，还可作为配置、数据处理工具或资源包装器。
695
2024-05-15
451
跨节点参数的缘起与今生
Dataphin v3.13引入了跨节点参数功能，允许任务间传递消息。输出节点（如SQL、Shell、Python任务）能输出参数，输入节点可以接收并使用这些参数。此功能解决了通过公共存储中转消息的复杂性和低效问题。应用场景包括：金融企业的币种转换，其中汇率任务（输出节点）提供汇率，转换任务（输入节点）使用该汇率；以及产品目录更新检查，通过跨节点参数控制是否需要执行数据导入任务。用户可以通过任务编辑器设置和传递跨节点参数，并在运维中进行补数据操作。
451
