官方博客-第9页-阿里云开发者社区

  • 2024-05-15
    760

    跨节点参数的缘起与今生

    Dataphin v3.13引入了跨节点参数功能,允许任务间传递消息。输出节点(如SQL、Shell、Python任务)能输出参数,输入节点可以接收并使用这些参数。此功能解决了通过公共存储中转消息的复杂性和低效问题。应用场景包括:金融企业的币种转换,其中汇率任务(输出节点)提供汇率,转换任务(输入节点)使用该汇率;以及产品目录更新检查,通过跨节点参数控制是否需要执行数据导入任务。用户可以通过任务编辑器设置和传递跨节点参数,并在运维中进行补数据操作。

    760
  • 2024-07-01
    40995

    5% 消耗,6 倍性能:揭秘新一代 iLogtail SPL 日志处理引擎与 Logstash 的 PK

    在本文中,我们将深入探讨为何选择 iLogtail,以及它在 SPL 数据处理方面相较于 Logstash 有何独特优势。通过对比这两款工具的架构、性能以及功能,我们希望能够揭示 iLogtail 如何在日益复杂的日志处理需求中脱颖而出,帮助您做出明智的技术选择。

    40,995
  • 2024-12-20
    1341

    AI场景下的对象存储OSS数据管理实践

    本文介绍了对象存储(OSS)在AI业务中的应用与实践。内容涵盖四个方面:1) 对象存储作为AI数据基石,因其低成本和高弹性成为云上数据存储首选;2) AI场景下的对象存储实践方案,包括数据获取、预处理、训练及推理阶段的具体使用方法;3) 国内主要区域的默认吞吐量提升至100Gbps,优化了大数据量下的带宽需求;4) 常用工具介绍,如OSSutil、ossfs、Python SDK等,帮助用户高效管理数据。重点讲解了OSS在AI训练和推理中的性能优化措施,以及不同工具的特点和应用场景。

  • 2023-07-18
    131413

    手把手教你使用OSS-HDFS服务平替自建HDFS

    本文主要介绍了OSS-HDFS服务以及使用OSS-HDFS服务平替自建HDFS。

    131,413
  • 2024-06-05
    1225

    【企业实践】台州银行携手瓴羊Dataphin共建数据平台,打造小微金融治理新标杆

    台州银行数据治理项目携手瓴羊Dataphin,荣获中国信息通信研究院评为“2023年铸基计划高质量数字化转型典型优秀案例”、数字化研究机构沙丘社区选为“2024中国数据资产管理最佳实践案例”双重认可。

    1,225
  • 2024-05-15
    1293

    【最佳实践】使用CloudLens排查日志时间解析错误问题

    本文主要介绍如何使用CloudLens for SLS定位和解决iLogtail日常使用中的常见问题之一:日志时间解析错误问题。

    1,293
  • 2024-05-15
    2226

    【最佳实践】使用CloudLens排查iLogtail重启问题

    本文主要介绍如何使用CloudLens for SLS定位和解决iLogtail日常使用中的常见问题之一:iLogtail异常重启问题。

    2,226
  • 2024-05-15
    1187

    通过日志服务实现数据库MySQL入湖OSS实践

    本文为您介绍如何使用日志服务来实现MySQL数据库入湖OSS。

    1,187
  • 2024-05-15
    2104

    K8s挂载PVC日志采集“轻量级”玩法

    本文介绍一种使用K8s挂载PVC日志采集时的轻量级部署方式。

    2,104
  • 1
    ...
    8
    9
    10
    11
    12
    到第
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    9/12