数仓平台可以直连业务数据库
1:使用工具:datax连接源数据库与数仓库
需要提供可读用户权限及数据库连接方式
数仓平台不可以直连业务数据库
1:可以提供从库,使用工具datax导入数据入仓(最合理)
需要提供可读用户权限及从库库连接方式
2:数仓无法直连数据库所在服务器
2.1:提供堡垒机,数据上传至堡垒机
数据传输方式 1):数据库所在服务器备份数据至堡垒机,数仓连接堡垒机
2):堡垒机无法提供数据库连接,借助ftp/sftp文件传输服务器,将数据传入数仓,可使用脚本方式直接入仓
2.2:无法提供堡垒机,但可以提供数据
数据按照数仓需要数据集,以csv/text/excel方式提供至品茗测试服务器。
2.3:数据无法导出,且无法提供相应数据库连接
数据使用方提供相应脚本处理,输出相应指标。(不建议)