DataWorks中Table Store(OTS) Reader参数说明是什么?
在DataWorks中,Table Store(OTS) Reader是一种数据源Read节点,用于读取Table Store中的数据。在使用OTS Reader时,需要配置相应的参数,以便正确读取Table Store中的数据。OTS Reader的参数说明如下:
EndPoint(必填):OTS服务的地址,格式为http://instanceName.region.aliyuncs.com。其中,instanceName是OTS实例名,region是OTS实例所在的区域。
InstanceName(必填):OTS实例名。
AccessKeyId(必填):阿里云账号的AccessKeyId,用于访问OTS服务。
AccessKeySecret(必填):阿里云账号的AccessKeySecret,用于访问OTS服务。
TableName(必填):要读取的表名。
Columns(必填):要读取的列名列表。列名之间用逗号分隔。
Filter(可选):查询过滤条件。支持多种查询条件,如单值相等、范围内、前缀匹配、后缀匹配、模糊匹配等。
MaxVersions(可选):读取的版本数。
参数 描述 是否必选 默认值
endpoint OTS Server的EndPoint(服务地址),详情请参见服务地址。 是 无
accessId Table Store的AccessKey ID。 是 无
accessKey Table Store的AccessKey Secret。 是 无
instanceName Table Store的实例名称,实例是您使用和管理Table Store服务的实体。 您在开通Table Store服务后,需要通过管理控制台来创建实例,然后在实例内进行表的创建和管理。 实例是Table Store资源管理的基础单元,Table Store对应用程序的访问控制和资源计量都在实例级别完成。 是 无
table 所选取的需要抽取的表名称,这里有且只能填写一张表。在Table Store不存在多表同步的需求。 是 无
column 所配置的表中需要同步的列名集合,使用JSON的数组描述字段信息。由于Table Store本身是NoSQL系统,在OTS Reader抽取数据过程中,必须指定相应的字段名称。 是 无
begin和end begin和end配置项必须配对使用,用于表示抽取Table Store表数据的范围。 是 空
split 该配置项属于高级配置项,是您自己定义切分配置信息,普通情况下不建议使用。 适用场景:通常在Table Store数据存储发生热点,使用OTS Reader自动切分的策略不能生效的情况下,使用您自定义的切分规则。 split指定在Begin、End区间内的切分点,且只能是partitionKey的切分点信息,即在split仅配置partitionKey,而不需要指定全部的PrimaryKey。 否 无
https://help.aliyun.com/document_detail/137729.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。