通过Ti-One机器学习平台玩转2020腾讯广告算法大赛:数据预处理(一)

简介: 通过Ti-One机器学习平台玩转2020腾讯广告算法大赛:数据预处理(一)
+关注继续查看

准备

查看磁盘的基本信息

!df -hl

image.png

!pwd

image.png

引入基本包,我们这里只做最基本的数据处理所以只引入了基本包

另外引入了ti的session后面通过它将数据上传到cos

import os, gc
import pandas as pd
import numpy as np
from ti import session
ts=session.Session()

下载和解压

这里直接下载官方提供的zip包

!wget https://tesla-ap-shanghai-1256322946.cos.ap-shanghai.myqcloud.com/cephfs/tesla_common/deeplearning/dataset/algo_contest/test.zip

!wget https://tesla-ap-shanghai-1256322946.cos.ap-shanghai.myqcloud.com/cephfs/tesla_common/deeplearning/dataset/algo_contest/train_preliminary.zip

image.png

算是同一个网络,下载速度还是挺快的

下载完成后解压

!unzip train_preliminary.zip

image.png

!unzip test.zip

image.png

目录
相关文章
|
6天前
|
机器学习/深度学习 人工智能 数据可视化
阿里云机器学习 PAI 平台基础
阿里云机器学习 PAI 平台基础
28 0
|
22天前
|
机器学习/深度学习 监控 数据可视化
阿里云机器学习平台PAI-DSW
阿里云机器学习平台PAI-DSW
32 1
|
28天前
|
机器学习/深度学习 自然语言处理 专有云
阿里云的机器学习平台提供了名为"文本分类"的服务
阿里云的机器学习平台提供了名为"文本分类"的服务
70 1
|
1月前
|
机器学习/深度学习 存储 人工智能
阿里云机器学习PAI全新推出特征平台 (Feature Store),助力AI建模场景特征数据高效利用
机器学习平台 PAI 推出特征平台(PAI-FeatureStore)。在所有需要特征的AI建模场景,用户可通过 Feature Store 轻松地共享和重用特征数据,减少资源和时间成本、提升工作效率。
|
2月前
|
存储 机器学习/深度学习 文件存储
在PAI-EAS(阿里云机器学习平台扩展智能计算服务)上使用存储在NAS中的模型
在PAI-EAS(阿里云机器学习平台扩展智能计算服务)上使用存储在NAS中的模型
104 0
|
2月前
|
机器学习/深度学习
基于分布式平台的机器学习模型训练以及上线部署方案总结
基于分布式平台的机器学习模型训练以及上线部署方案总结
120 0
|
2月前
|
机器学习/深度学习 资源调度 Kubernetes
一站式机器学习云研发平台
一站式机器学习云研发平台
|
2月前
|
机器学习/深度学习 人工智能 编解码
NLP领域再创佳绩!阿里云机器学习平台 PAI 多篇论文入选 ACL 2023
阿里云机器学习平台PAI主导的多篇论文在ACL 2023 Industry Track上入选。
|
4月前
|
机器学习/深度学习
《阿里云产品手册2022-2023 版》——机器学习平台 PAI
《阿里云产品手册2022-2023 版》——机器学习平台 PAI
282 0
|
4月前
|
机器学习/深度学习
《阿里云产品手册2022-2023 版》——机器学习平台
《阿里云产品手册2022-2023 版》——机器学习平台
推荐文章
更多