开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks中Elasticsearch Reader基本配置是什么?

DataWorks中Elasticsearch Reader基本配置是什么?

展开
收起
cuicuicuic 2023-08-16 10:04:38 38 0
1 条回答
写回答
取消 提交回答
  • 注意 实际运行时,请删除下述代码中的注释。{"order":{"hops":[{"from":"Reader","to":"Writer"}]},"setting":{"errorLimit":{"record":"0" //错误记录数。},"jvmOption":"","speed":{"concurrent":3,//并发数"throttle":true,//"mbps":"12",//限流}},"steps":[{"category":"reader","name":"Reader","parameter":{"column":[ //读取列。"id","name"],"endpoint":"", //服务地址。"index":"", //索引。"password":"", //密码。"scroll":"", //scroll标志。"search":"", //查询query参数,与Elasticsearch的query内容相同,使用_search api,重命名为search。"type":"default","username":"" //用户名。},"stepType":"elasticsearch"},{"category":"writer","name":"Writer","parameter":{ },"stepType":"stream"}],"type":"job","version":"2.0" //版本号。}
    https://help.aliyun.com/document_detail/137743.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-08-16 12:12:03
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    阿里云Elasticsearch体系架构与特性解析 立即下载
    开源与云:Elasticsearch应用剖析 立即下载
    《Elasticsearch全观测解决方案》 立即下载