开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks中Table Store(OTS) Reader参数说明是什么?

DataWorks中Table Store(OTS) Reader参数说明是什么?

展开
收起
真的很搞笑 2023-07-11 13:23:35 66 0
2 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    在DataWorks中,Table Store(OTS) Reader是一种数据源Read节点,用于读取Table Store中的数据。在使用OTS Reader时,需要配置相应的参数,以便正确读取Table Store中的数据。OTS Reader的参数说明如下:

    EndPoint(必填):OTS服务的地址,格式为http://instanceName.region.aliyuncs.com。其中,instanceName是OTS实例名,region是OTS实例所在的区域。

    InstanceName(必填):OTS实例名。

    AccessKeyId(必填):阿里云账号的AccessKeyId,用于访问OTS服务。

    AccessKeySecret(必填):阿里云账号的AccessKeySecret,用于访问OTS服务。

    TableName(必填):要读取的表名。

    Columns(必填):要读取的列名列表。列名之间用逗号分隔。

    Filter(可选):查询过滤条件。支持多种查询条件,如单值相等、范围内、前缀匹配、后缀匹配、模糊匹配等。

    MaxVersions(可选):读取的版本数。

    2023-07-30 22:06:46
    赞同 展开评论 打赏
  • 参数 描述 是否必选 默认值
    endpoint OTS Server的EndPoint(服务地址),详情请参见服务地址。 是 无
    accessId Table Store的AccessKey ID。 是 无
    accessKey Table Store的AccessKey Secret。 是 无
    instanceName Table Store的实例名称,实例是您使用和管理Table Store服务的实体。 您在开通Table Store服务后,需要通过管理控制台来创建实例,然后在实例内进行表的创建和管理。 实例是Table Store资源管理的基础单元,Table Store对应用程序的访问控制和资源计量都在实例级别完成。 是 无
    table 所选取的需要抽取的表名称,这里有且只能填写一张表。在Table Store不存在多表同步的需求。 是 无
    column 所配置的表中需要同步的列名集合,使用JSON的数组描述字段信息。由于Table Store本身是NoSQL系统,在OTS Reader抽取数据过程中,必须指定相应的字段名称。 是 无
    begin和end begin和end配置项必须配对使用,用于表示抽取Table Store表数据的范围。 是 空
    split 该配置项属于高级配置项,是您自己定义切分配置信息,普通情况下不建议使用。 适用场景:通常在Table Store数据存储发生热点,使用OTS Reader自动切分的策略不能生效的情况下,使用您自定义的切分规则。 split指定在Begin、End区间内的切分点,且只能是partitionKey的切分点信息,即在split仅配置partitionKey,而不需要指定全部的PrimaryKey。 否 无
    https://help.aliyun.com/document_detail/137729.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-07-11 15:02:46
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载