阿里云ecs搭建简易ftp服务器-用于DataWorks文件存储及依赖校验

本文涉及的产品
大数据开发治理平台DataWorks,Serverless资源组抵扣包300CU*H
简介: 很多企业客户在使用阿里云产品时,经常需要与FTP服务器进行文件交互,诸如跨IDC任务done文件依赖,跨账号、部门临时数据交互等场景。这里简要记录阿里云ecs搭建简易ftp服务器用于上述场景答疑的过程。

1. linux搭建FTP服务器:

相关文档参考:https://blog.csdn.net/weixin_40228200/article/details/121430022


1.1. 下载开源vsftpd

yum install -y vsftpd

1.2. 修改配置文件

# 进入所在文件夹cd /etc/vsftpd/
# 修改配置文件vim vsftpd.conf
# ----------------------------# 修改 or 添加如下参数# 关闭匿名登录anonymous_enable=NO
# 指定ftp目标文件夹,可以自行修改为指定的目录local_root=/var/share/
# 允许本地用户登录chroot_local_user=YES
# 允许本地用户访问控制列表chroot_list_enable=YES
# (default follows)# 指定上述列表的位置chroot_list_file=/etc/vsftpd/chroot_list
# 允许本地用户对ftp目录进行写操作allow_writeable_chroot=YES
# 开启被动模式pasv_enable=YES
# 开启主动模式port_enable=YES
# ----------------------------

1.3. 配置FTP用户

# 在linux上增加ftp专用用户ftpuseruseradd ftpuser
# 重置ftpuser的登录密码passwd 密码
# 赋予ftpuser该共享目录权限chown-R ftpuser:ftpuser /var/share/
# 在访问控制列表文件中写入创建的用户ftpuser echo"ftpuser" > /etc/vsftpd/chroot_list

1.4. 重启FTP服务适配新配置

service vsftpd status
service vsftpd start

1.5. 验证FTP服务21端口是否active

# 查看ftp的21端口是否已经处于listen状态netstat -tnlp |grep 21

2. 安全组放行与主、被动模式

相关参考文档:https://www.jianshu.com/p/d94f42b41dfa

主动模式:安全组放行21,20端口,否则相关云产品或ecs在进行访问和上传、下载时会报网络超时、timeout等异常image.png

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
一站式大数据开发治理平台DataWorks初级课程
DataWorks 从 2009 年开始,十ー年里一直支持阿里巴巴集团内部数据中台的建设,2019 年双 11 稳定支撑每日千万级的任务调度。每天阿里巴巴内部有数万名数据和算法工程师正在使用DataWorks,承了阿里巴巴 99%的据业务构建。本课程主要介绍了阿里巴巴大数据技术发展历程与 DataWorks 几大模块的基本能力。 课程目标  通过讲师的详细讲解与实际演示,学员可以一边学习一边进行实际操作,可以深入了解DataWorks各大模块的使用方式和具体功能,让学员对DataWorks数据集成、开发、分析、运维、安全、治理等方面有深刻的了解,加深对阿里云大数据产品体系的理解与认识。 适合人群  企业数据仓库开发人员  大数据平台开发人员  数据分析师  大数据运维人员  对于大数据平台、数据中台产品感兴趣的开发者
相关文章
|
8月前
|
分布式计算 运维 DataWorks
DataWorks产品使用合集之表分区的一致性校验有时能正常进行,有时不能,该如何排查
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
35 0
|
4月前
|
安全 网络协议 网络安全
Windows Server 2003 FTP服务器搭建
Windows Server 2003 FTP服务器搭建
|
4月前
|
弹性计算 关系型数据库 网络安全
阿里云国际版无法连接和访问Windows服务器中的FTP服务
阿里云国际版无法连接和访问Windows服务器中的FTP服务
|
6月前
|
安全 Ubuntu Linux
在Linux中,如何进行FTP服务器配置?
在Linux中,如何进行FTP服务器配置?
|
6月前
|
数据采集 DataWorks 监控
DataWorks产品使用合集之校验异常是什么意思
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
7月前
|
存储 NoSQL 文件存储
云计算问题之阿里云文件存储CPFS如何满足大模型智算场景的存储需求
云计算问题之阿里云文件存储CPFS如何满足大模型智算场景的存储需求
125 2
|
6月前
|
分布式计算 资源调度 DataWorks
DataWorks操作报错合集之点击校验时出现报错,该如何解决
DataWorks是阿里云提供的一站式大数据开发与治理平台,支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中,可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
108 0
|
7月前
|
网络协议 Unix 网络安全
FTP服务器怎么搭建?Windows server搭建FPT服务器
FTP服务器是按照FTP协议提供文件传输服务的计算机。它用于在两台计算机间安全地传输文件,支持用户权限管理和跨平台操作。FTP使用控制连接处理命令,数据连接传输文件,有PORT和PASV模式。要搭建FTP服务器,首先在Windows Server 2008 R2上安装IIS,确保选中FTP服务。接着,创建FTP文件夹作为站点根目录,通过IIS管理器添加FTP站点,配置站点信息、身份验证和权限。测试客户端通过telnet和浏览器访问FTP服务器,确认能成功登录及浏览文件。FTP常用于文件共享和管理,可通过专用工具如FlashFXP上传下载文件。
230 0
FTP服务器怎么搭建?Windows server搭建FPT服务器
|
8月前
|
存储 数据库连接 数据库
如何使用Python上传文件到FTP服务器
如何使用Python上传文件到FTP服务器
125 1
|
7月前
|
数据采集 SQL DataWorks
DataWorks产品使用合集之离线同步是否支持进行唯一性和非空校验
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。