开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

Elasticsearch数据迁移至MaxCompute操作步骤是什么?

Elasticsearch数据迁移至MaxCompute操作步骤是什么?

展开
收起
cuicuicuic 2023-04-24 21:43:32 89 0
1 条回答
写回答
取消 提交回答
  • 在Elasticsearch上创建源表。详情请参见通过DataWorks将MaxCompute数据同步至Elasticsearch。在MaxCompute上创建目标表。登录DataWorks控制台。右键单击已创建的业务流程,选择新建 > MaxCompute > 表。在新建表页面,选择引擎类型并输入表名。在表的编辑页面,单击DDL模式。在DDL模式对话框,输入如下建表语句,单击生成表结构。create table elastic2mc_bankdata(age string,job string,marital string,education string,default string,housing string,loan string,contact string,month string,day of week string);单击提交到生产环境。同步数据进入数据开发页面,右键单击指定业务流程,选择新建 > 数据集成 > 离线同步。在新建节点对话框中,输入节点名称,并单击提交。在顶部菜单栏上,单击image.png 图标。在脚本模式下,单击顶部菜单栏上的image.png 图标。在导入模板对话框中选择来源类型、数据源、目标类型及数据源,并单击确定。配置脚本。示例代码如下。代码释义请参见Elasticsearch Reader。{"type": "job","steps": [{"stepType": "elasticsearch","parameter": {"retryCount": 3,"column": ["age","job","marital","education","default","housing","loan","contact","month","day_of_week","duration","campaign","pdays","previous","poutcome","emp_var_rate","cons_price_idx","cons_co https://help.aliyun.com/document_detail/121100.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-04-27 14:09:03
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关电子书

更多
大数据AI一体化的解读 立即下载
极氪大数据 Serverless 应用实践 立即下载
大数据&AI实战派 第2期 立即下载