开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

采集OTS元数据使用限制有哪些?

采集OTS元数据使用限制有哪些?

展开
收起
滴滴滴~ 2023-03-29 15:02:02 163 0
2 条回答
写回答
取消 提交回答
  • "DataWorks目前不支持跨地域采集数据,即DataWorks采集器所在的地域需要与元数据所在的地域相同。DataWorks目前仅支持使用公网访问元数据。在左侧导航栏,单击OTS。在OTS元数据采集页面,单击新建采集器。在新建采集器配置向导页面,完成以下操作。在基本信息页签,配置各项参数。image.png 参数 描述 采集器名称 采集器的名称,必填且唯一。 采集器描述 对采集器进行简单描述。 工作空间 采集对象(数据源)所属的DataWorks工作空间。 数据源类型 采集对象的类型,默认为OTS。单击下一步。在选择采集对象页签,从数据源下拉列表中选择相应的数据源。如果列表中没有您需要的数据源,请单击去新建,进入工作管理空间 > 数据源管理页面新建数据源,详情请参见配置OTS数据源。单击测试采集连通性。待显示测试成功,单击下一步。如果显示测试连通性未通过,请检查数据源是否配置正确。在配置执行计划页签,配置执行计划。执行计划包括按需执行、每月、每周、每天及每小时。根据不同的执行周期,生成不同的执行计划,在相应执行计划的时间内,对目标数据源进行元数据采集。具体如下:按需采集:根据实际业务需求,在业务需要时才会采集OTS元数据。月采集:即在每月的特定几天,在特定时间点自动采集一次OTS元数据。注意 部分月份不包含29、30、31日,请您谨慎选择月末日期。如下图所示,在每月的1、11及21日的09:00,系统会自动采集一次OTS元数据。CRON 表达式会根据您的配置自动生成。image.png 周采集:即在每周的特定几天,在特定时间点自动采集一次OTS元数据。如下图所示,在每周的星期一(MON)及星期天(SUN)的03:00,系统会自动采集一次OTS元数据。image.png 不输入时间时,则默认在每周指定几天的00:00:00采集。 此答案整理自钉群“DataWorks交流群(答疑@机器人)”"

    2023-03-29 21:22:11
    赞同 展开评论 打赏
  • 发表文章、提出问题、分享经验、结交志同道合的朋友

    你好,关于采集OTS元数据的使用限制,官网有明确文档,可具体查看下

    image.png

    2023-03-29 17:40:28
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

热门讨论

热门文章

相关电子书

更多
TableStore在社交类场景下的应用 立即下载
表格存储实时数据流Steam的技术揭秘和应用场景 立即下载
表格存储(TableStore) 立即下载