MaxCompute使用OSS数据作为外部表

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,恶意文件检测 1000次 1年
对象存储 OSS,内容安全 1000次 1年
简介: 本教程主要演示以存储在oss中的csv格式文件作为数据源,创建maxcompute的外部表。

概述

本教程主要演示以存储在oss中的csv格式文件作为数据源,创建maxcompute的外部表。

操作教程

1、csv文件示例,下载示例解压并上传到oss。注意如果是自己创建文件,务必使用utf-8编码格式文件。
_

2、创建外部表语句

--odps sql 
--********************************************************************--
--author:taro
--create time:2019-02-14 19:40:54
--********************************************************************--
CREATE EXTERNAL TABLE IF NOT EXISTS ambulance_data10_csv_external
(
vehicleId BIGINT,
recordId BIGINT,
direction string
)
STORED BY 'com.aliyun.odps.CsvStorageHandler'
WITH SERDEPROPERTIES (
 'odps.properties.rolearn'='acs:ram::18482178********:role/aliyunodpsdefaultrole'
)
LOCATION 'oss://oss-cn-beijing-internal.aliyuncs.com/yustorage/vvv2/';
AI 代码解读
  • 注意:对于路径下面的子目录中的文件,可以全部读取。

参数获取细节参考链接

3、查询确认

--odps sql 
--********************************************************************--
--author:taro
--create time:2019-02-12 17:35:14
--********************************************************************--
SELECT * FROM ambulance_data10_csv_external;

-- desc extended ambulance_data7_csv_external;
AI 代码解读

结果截图如下:

_

更多参考

外部表概述

相关实践学习
借助OSS搭建在线教育视频课程分享网站
本教程介绍如何基于云服务器ECS和对象存储OSS,搭建一个在线教育视频课程分享网站。
目录
打赏
0
0
0
0
913
分享
相关文章
从数据小白到大数据达人:一步步成为数据分析专家
从数据小白到大数据达人:一步步成为数据分析专家
254 92
从湖仓分离到湖仓一体,四川航空基于 SelectDB 的多源数据联邦分析实践
川航选择引入 SelectDB 建设湖仓一体大数据分析引擎,取得了数据导入效率提升 3-6 倍,查询分析性能提升 10-18 倍、实时性提升至 5 秒内等收益。
从湖仓分离到湖仓一体,四川航空基于 SelectDB 的多源数据联邦分析实践
数据的“潘多拉魔盒”:大数据伦理的深度思考
数据的“潘多拉魔盒”:大数据伦理的深度思考
46 25
数据无界、湖仓无界, Apache Doris 湖仓一体解决方案全面解读(上篇)
湖仓一体架构融合了数据湖的低成本、高扩展性,以及数据仓库的高性能、强数据治理能力,高效应对大数据时代的挑战。为助力企业实现湖仓一体的建设,Apache Doris 提出了数据无界和湖仓无界核心理念,并结合自身特性,助力企业加速从 0 到 1 构建湖仓体系,降低转型过程中的风险和成本。本文将对湖仓一体演进及 Apache Doris 湖仓一体方案进行介绍。
数据无界、湖仓无界, Apache Doris 湖仓一体解决方案全面解读(上篇)
使用s3cmd 2.x 与 Cyberduck 管理在 DigitalOcean Spaces 对象存储中的数据
通过 `s3cmd` 2.x 和 Cyberduck,你可以轻松管理 DigitalOcean Spaces 中的数据。`s3cmd` 提供了强大的命令行操作能力,适合脚本化和自动化任务,而 Cyberduck 提供了直观的图形界面,便于日常手动操作。掌握这两种工具的使用方法,将极大提高你的数据管理效率。希望本文能帮助你更好地使用 DigitalOcean Spaces。
18 7
大数据与云计算:无缝结合,开启数据新纪元
大数据与云计算:无缝结合,开启数据新纪元
122 11
数据大爆炸:解析大数据的起源及其对未来的启示
数据大爆炸:解析大数据的起源及其对未来的启示
137 15
数据大爆炸:解析大数据的起源及其对未来的启示
玩转数据:初学者的大数据处理工具指南
玩转数据:初学者的大数据处理工具指南
89 14
数据的秘密:如何用大数据分析挖掘商业价值
数据的秘密:如何用大数据分析挖掘商业价值
62 9
解密大数据:从零开始了解数据海洋
解密大数据:从零开始了解数据海洋
76 17
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等