开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

dataworks中将查询结果全量导出的话是在哪里啊?

dataworks中将查询结果全量导出的话是在哪里啊?

展开
收起
真的很搞笑 2023-10-29 18:07:16 168 0
3 条回答
写回答
取消 提交回答
  • 在DataWorks中,如果你想将查询结果全量导出,你可以通过以下步骤进行:

    1. 登录到阿里云DataWorks控制台:https://workbench.data.aliyun.com/console。

    2. 在DataWorks项目中选择需要配置导出任务的工作空间。

    3. 点击“新建任务”,选择“MaxCompute”类型,然后选择“查询”。

    4. 在“查询”页面,填写或选择以下信息:

      • SQL语句:编写你的SQL查询语句。
      • 输出选项:设置为“全量输出”。
    5. 保存任务后,可以在“我的任务”页面看到刚创建的查询任务。点击任务,可以查看任务详情,包括任务状态、执行历史等信息。

    6. 任务执行完成后,你可以在MaxCompute的控制台中找到导出的数据。具体操作如下:

      • 登录到MaxCompute控制台:https://macro.maxcompute.aliyun.com/#/home。
      • 选择你需要的工作空间。
      • 在左侧导航栏,选择“数据目录”。
      • 在数据目录下,你会看到一个名为“query_result”的文件夹,这个文件夹就是用来存放查询结果的。
    2023-10-30 15:00:50
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在DataWorks中,有两种方法可以将查询结果全量导出:

    1. 使用DataStudio进行导出:在DataStudio中,您可以选择导出整个查询结果集到文件。具体操作方法是,在查询结果页面,选择“导出数据”选项,然后选择要导出的数据格式,最后点击“确定”按钮。
    2. 使用DataWorks命令行工具进行导出:您可以使用DataWorks的命令行工具dw-run.sh来执行导出操作。具体操作方法是,执行以下命令:dw-run.sh export --file-name file_name.csv --database-name database_name --table-name table_name --output-file output_file_path
    2023-10-30 13:32:24
    赞同 展开评论 打赏
  • 【下载方式一】DataStudio查询结果下载
    限制:上限1万条。
    step1:项目管理员角色设置项目开启允许下载。
    image.png
    step2:DataStudio查询结果下载

    image.png

    【下载方式二】数据分析查询结果下载
    限制:,DataWorks标准版及以上上限20万条,基础版上限1万条。仅阿里云主账号和租户管理员可以访问编辑。
    step1:安全中心>安全策略>数据查询与分析管控,开启下载
    新版本:
    image.png

    老版本:数据分析-系统管理-设置允许下载。
    image.png

    step2:SQL查询结果下载。
    image.png

    【下载方式三】SQLTask配合Tunnel实现量数据导出
    限制:支持全量下载。
    查看文档 SQLTask配合Tunnel实现大量数据导出。,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-10-29 23:03:10
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多