AI 助理
文档备案控制台
开发者社区 数据库 文章 正文

基于mac构建大数据伪分布式学习环境（十二）-部署DataX+DataX Web

2022-10-20 995
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 本文主要讲解阿里异构多数据源迁移工具DataX与其web管理界面部署

DataX

1.下载解压

2.自检

rm-rf /data/soft/datax/plugin/*/._*

datax.py ../job/job.json

自检结束部署完成

网络异常，图片无法展示
|

DataX web

1.解压

2.一键安装

./bin/install.sh --force

3.输入数据库连接密码和数据库名

网络异常，图片无法展示
|

4.启动服务

start-all.sh

5.访问服务

http://192.168.78.10:9527/index.html#/dashboard

网络异常，图片无法展示
|


文章标签：
云原生大数据计算服务 MaxCompute
数据集成 Data Integration
数据安全/隐私保护
DataX
数据库
大数据
数据库连接
关键词：
构建web
web部署
云原生大数据计算服务 MaxCompute环境
构建云原生大数据计算服务 MaxCompute
云原生大数据计算服务 MaxCompute构建
相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程：基于MaxCompute的热门话题分析
颜学长
目录
相关文章
青云交（Java大数据AI云原生Python）
|
9月前
|
数据采集 搜索推荐 算法
Java 大视界 -- Java 大数据在智能教育学习社区用户互动分析与社区活跃度提升中的应用（274）
本文系统阐述 Java 大数据技术在智能教育学习社区中的深度应用，涵盖数据采集架构、核心分析算法、活跃度提升策略及前沿技术探索，为教育数字化转型提供完整技术解决方案。
青云交（Java大数据AI云原生Python）
365 10
武子康
|
分布式计算 大数据 Java
大数据-87 Spark 集群 案例学习 Spark Scala 案例 手写计算圆周率、计算共同好友
大数据-87 Spark 集群 案例学习 Spark Scala 案例 手写计算圆周率、计算共同好友
武子康
252 5
武子康
|
分布式计算 关系型数据库 MySQL
大数据-88 Spark 集群 案例学习 Spark Scala 案例 SuperWordCount 计算结果数据写入MySQL
大数据-88 Spark 集群 案例学习 Spark Scala 案例 SuperWordCount 计算结果数据写入MySQL
武子康
183 3
武子康
|
存储 分布式计算 算法
大数据-106 Spark Graph X 计算学习 案例：1图的基本计算、2连通图算法、3寻找相同的用户
大数据-106 Spark Graph X 计算学习 案例：1图的基本计算、2连通图算法、3寻找相同的用户
武子康
334 0
zzy的aly
|
数据采集 数据可视化 大数据
大数据体系知识学习（三）：数据清洗_箱线图的概念以及代码实现
这篇文章介绍了如何使用Python中的matplotlib和numpy库来创建箱线图，以检测和处理数据集中的异常值。
zzy的aly
434 1
大数据体系知识学习（三）：数据清洗_箱线图的概念以及代码实现
小Lee
|
存储 SQL 分布式计算
大数据学习
【10月更文挑战第15天】
小Lee
365 1
zzy的aly
|
分布式计算 大数据 Linux
大数据体系知识学习（二）：WordCount案例实现及错误总结
这篇文章介绍了如何使用PySpark进行WordCount操作，包括环境配置、代码实现、运行结果和遇到的错误。作者在运行过程中遇到了Py4JJavaError和JAVA_HOME未设置的问题，并通过导入findspark初始化和设置环境变量解决了这些问题。文章还讨论了groupByKey和reduceByKey的区别。
zzy的aly
273 1
武子康
|
消息中间件 大数据 Kafka
大数据-77 Kafka 高级特性-稳定性-延时队列、重试队列 概念学习 JavaAPI实现（二）
大数据-77 Kafka 高级特性-稳定性-延时队列、重试队列 概念学习 JavaAPI实现（二）
武子康
216 2
武子康
|
消息中间件 NoSQL 大数据
大数据-77 Kafka 高级特性-稳定性-延时队列、重试队列 概念学习 JavaAPI实现（一）
大数据-77 Kafka 高级特性-稳定性-延时队列、重试队列 概念学习 JavaAPI实现（一）
武子康
344 1

热门文章

最新文章

  • 1
    Web---监听用户名注册技术-myAJax-隐藏帧
  • 2
    【ASP.NET Web API教程】6.3 内容协商
  • 3
    Windows Azure Web Site (1) 用户手册
  • 4
    SOA 和Web Service
  • 5
    Web应用防火墙按量资源包上线售卖（WAF-V4.2.0.0）
  • 6
    web开发必装软件（插件）
  • 7
    用Piranha来实现WEB的负载均衡
  • 8
    【Web API系列教程】2.3 — ASP.NET Web API 2中的属性路由
  • 9
    [第一章 web入门]SQL注入-1 题目分析与详解
  • 10
    【Web API系列教程】3.1 — 实战：处理数据（创建项目）
  • 1
    DataX 概述、部署、数据同步运用示例
    9759
  • 2
    免费！数据传输服务DTS助您零成本畅享ClickHouse和SelectDB的疾速数据集成之旅！
    709
  • 3
    阿里DataX极简教程
    3172
  • 4
    DataWorks常见问题之使用公共数据集成资源组进行同步失败如何解决
    245
  • 5
    DataWorks报错问题之dataX数据导入报错如何解决
    686
  • 6
    DataWorks报错问题之datax mongodb全量迁移报错如何解决
    578
  • 7
    DataWorks常见问题之数据集成导出分区表的全量数据如何解决
    460
  • 8
    DataWorks常见问题之如何将数据集成到oss链路
    739
  • 9
    TuGraph Analytics图数据集成：表到图的最后一公里
    465
  • 10
    基于 Flink CDC 打造企业级实时数据集成方案
    244

    • 相关课程

    更多
  • 大数据Spark2020最新课程（知识精讲与实战演练）第二阶段
  • 大数据Spark2020版（知识精讲与实战演练）第三阶段
  • 大数据Spark2020版（知识精讲与实战演练）第四阶段
  • 2020版大数据实战项目之DMP广告系统（第二阶段）
  • 2020版大数据实战项目之DMP广告系统（第三阶段）
  • 2020版大数据实战项目之DMP广告系统（第六阶段）

    • 相关电子书

    更多
  • MaxCompute Serverless 架构演进
  • Data+AI时代大数据平台应该如何建设
  • 大数据AI一体化的解读
    • 下一篇
    极速数仓ClickHouse步入云原生新纪元