MaxCompute 和 OSS 客户端上传数据|学习笔记

简介: 快速学习 MaxCompute 和 OSS 客户端上传数据。

开发者学堂课程【PAL 平台学习路线:机器学习入门到应用:MaxCompute 和 OSS 客户端上传数据】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址:https://developer.aliyun.com/learning/course/855/detail/14233

MaxCompute 和 OSS 客户端上传数据

 

MaxCompute 和 OSS 客户端上传数据,使该数据能够在 OAI 的机器学习里被使用。现在 MaxCompute 导入数据,首先需要下载一个 MaxCompute 的客户端,如下图文档中有下载链接。

图片52.png

在等待下载期间,打开 PAI 创建一个 AI 工作空间。

图片53.png

创建工作空间的过程中会有一个实例配置,配置实例的时候就已经在 MC 和 datawork 里面同样创建了一个项目。现在打开 MC 就可以看到刚刚创建的项目了。

打开刚刚下载好的 MC 客户端,上传所需要的数据,首先先打开conf文件。

 图片54.png

这个 project-name 是刚刚创建的 MC 里面的项目的项目名。接下来输入自己的 AK,end-point 的地址需要和项目的所在区一致。

 图片55.png

如上图为所在地区的 end-point 的地址。

剩下的参数都是选填项,都可以按照文档示例填写,或者不填写。点击保存,在确认电脑里安装 Java 的情况下点击bin 文件下的 odpscmd 文件

 图片56.png

如果返回上图所示的话就证明已经登录了账户。输入 help;可以查看所有的命名。

先来创建一张表格 create table MC-test Colum1 double Colum2 double;

使用 tunnel upload 命令加想要上传的文件直接拖入。再加上刚刚创建的表。

Show table 可以看这个项目下面的所有表。现在可以读一下刚刚上传的数据。从刚刚创建的 AI 工作空间里面进入机器学习,在搜索栏搜索刚刚创建的表就可以直接使用刚刚创建的表的数据了。

同样也可以通过 OSSbrowser 客户端上传数据。从文档里面可以下载 OSS 的各种版本。打开刚刚下载的客户端文件,打开 OSSbrowser。填写自己的 AK 密码。如果只对某个 OSS 路径有权限的话,填写预设路径。在 OSS 里可以实现创建或删除 bucket。上传、下载、预览、移动或者复制文件生产文件 URL 或者二维码等操作。

图片57.png

相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
相关文章
|
4月前
|
机器学习/深度学习 传感器 分布式计算
数据才是真救命的:聊聊如何用大数据提升灾难预警的精准度
数据才是真救命的:聊聊如何用大数据提升灾难预警的精准度
358 14
|
4月前
|
传感器 人工智能 监控
数据下田,庄稼不“瞎种”——聊聊大数据如何帮农业提效
数据下田,庄稼不“瞎种”——聊聊大数据如何帮农业提效
171 14
|
3月前
|
传感器 人工智能 监控
拔俗多模态跨尺度大数据AI分析平台:让复杂数据“开口说话”的智能引擎
在数字化时代,多模态跨尺度大数据AI分析平台应运而生,打破数据孤岛,融合图像、文本、视频等多源信息,贯通微观与宏观尺度,实现智能诊断、预测与决策,广泛应用于医疗、制造、金融等领域,推动AI从“看懂”到“会思考”的跃迁。
338 0
|
4月前
|
机器学习/深度学习 传感器 监控
吃得安心靠数据?聊聊用大数据盯紧咱们的餐桌安全
吃得安心靠数据?聊聊用大数据盯紧咱们的餐桌安全
175 1
|
4月前
|
数据采集 自动驾驶 机器人
数据喂得好,机器人才能学得快:大数据对智能机器人训练的真正影响
数据喂得好,机器人才能学得快:大数据对智能机器人训练的真正影响
310 1
|
5月前
|
机器学习/深度学习 监控 大数据
数据当“安全带”:金融市场如何用大数据玩转风险控制?
数据当“安全带”:金融市场如何用大数据玩转风险控制?
197 10
|
5月前
|
机器学习/深度学习 自然语言处理 监控
大数据如何影响新兴市场投资决策?——数据才是真正的风向标
大数据如何影响新兴市场投资决策?——数据才是真正的风向标
156 3
|
6月前
|
数据采集 分布式计算 DataWorks
ODPS在某公共数据项目上的实践
本项目基于公共数据定义及ODPS与DataWorks技术,构建一体化智能化数据平台,涵盖数据目录、归集、治理、共享与开放六大目标。通过十大子系统实现全流程管理,强化数据安全与流通,提升业务效率与决策能力,助力数字化改革。
233 4
|
6月前
|
分布式计算 DataWorks 数据处理
在数据浪潮中前行:记录一次我与ODPS的实践、思考与展望
本文详细介绍了在 AI 时代背景下,如何利用阿里云 ODPS 平台(尤其是 MaxCompute)进行分布式多模态数据处理的实践过程。内容涵盖技术架构解析、完整操作流程、实际部署步骤以及未来发展方向,同时结合 CSDN 博文深入探讨了多模态数据处理的技术挑战与创新路径,为企业提供高效、低成本的大规模数据处理方案。
368 3
|
5月前
|
机器学习/深度学习 运维 监控
运维不怕事多,就怕没数据——用大数据喂饱你的运维策略
运维不怕事多,就怕没数据——用大数据喂饱你的运维策略
212 0