DataWorks TableStore(OTS)配置面板说明是什么?
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks中的TableStore(OTS)配置面板用于配置和管理与TableStore相关的任务和数据集成。下面是一些常见的配置说明:
连接配置:在此部分,你需要提供与TableStore建立连接所需的信息,包括Endpoint(OTS服务地址)、实例名称、AccessKey和AccessKey Secret。这些信息将用于认证和授权你的DataWorks项目访问TableStore。
数据库和表:在该部分,你可以选择指定要操作的TableStore数据库和数据表。首先,你需要选择目标数据库,然后可以进一步选择具体的数据表或通过SQL语句进行查询和操作。
表结构:该部分用于展示已选择数据表的结构信息,包括字段名、类型和是否为主键等。你可以在此确认数据表结构,并根据需要对其进行调整。
数据同步和映射:在这里,你可以配置数据同步和映射相关的设置,例如选择同步方式(全量同步或增量同步)、同步策略(覆盖或追加)、字段映射关系(将源表字段映射到目标表字段)等。
高级配置:该部分提供了一些高级配置选项,例如限制同步速率、启用数据变更记录、设置时间戳字段等。这些配置能够满足更复杂的数据处理需求。
DataWorks TableStore(OTS)配置面板是一个用于配置和管理TableStore(OTS)表的界面。
参数 注释说明
血缘表名(任务唯一) 任务中表的唯一标志,不能与任务中其他血缘表重名。
选择输出字段 要输出至Table Store表的字段列表。
实例名 实例名。
表名 表名。
数据同步 从元数据中心读取指定表名的元数据,帮助填充输出字段和其他元信息表单项。
选择输出字段 从维表中读取输出到下游组件的字段列表。
实例访问地址 实例访问地址。
AccessKey ID 读取的AccessKey ID。
AccessKey Secret 读取的AccessKey Secret。
缓存策略 可选LRU。
缓存大小 当选择LRU缓存策略后,可以设置缓存大小。
缓存超时时间 缓存超时时间,单位为毫秒。
primaryKey 指定输出字段中作为主键的字段。
https://help.aliyun.com/document_detail/108574.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。