MaxCompute使用OSS数据作为外部表

本文涉及的产品
对象存储 OSS,OSS 加速器 50 GB 1个月
简介: 本教程主要演示以存储在oss中的csv格式文件作为数据源,创建maxcompute的外部表。

概述

本教程主要演示以存储在oss中的csv格式文件作为数据源,创建maxcompute的外部表。

操作教程

1、csv文件示例,下载示例解压并上传到oss。注意如果是自己创建文件,务必使用utf-8编码格式文件。
_

2、创建外部表语句

--odps sql 
--********************************************************************--
--author:taro
--create time:2019-02-14 19:40:54
--********************************************************************--
CREATE EXTERNAL TABLE IF NOT EXISTS ambulance_data10_csv_external
(
vehicleId BIGINT,
recordId BIGINT,
direction string
)
STORED BY 'com.aliyun.odps.CsvStorageHandler'
WITH SERDEPROPERTIES (
 'odps.properties.rolearn'='acs:ram::18482178********:role/aliyunodpsdefaultrole'
)
LOCATION 'oss://oss-cn-beijing-internal.aliyuncs.com/yustorage/vvv2/';
  • 注意:对于路径下面的子目录中的文件,可以全部读取。

参数获取细节参考链接

3、查询确认

--odps sql 
--********************************************************************--
--author:taro
--create time:2019-02-12 17:35:14
--********************************************************************--
SELECT * FROM ambulance_data10_csv_external;

-- desc extended ambulance_data7_csv_external;

结果截图如下:

_

更多参考

外部表概述

相关实践学习
对象存储OSS快速上手——如何使用ossbrowser
本实验是对象存储OSS入门级实验。通过本实验,用户可学会如何用对象OSS的插件,进行简单的数据存、查、删等操作。
相关文章
|
8月前
|
机器学习/深度学习 传感器 分布式计算
数据才是真救命的:聊聊如何用大数据提升灾难预警的精准度
数据才是真救命的:聊聊如何用大数据提升灾难预警的精准度
563 14
|
8月前
|
传感器 人工智能 监控
数据下田,庄稼不“瞎种”——聊聊大数据如何帮农业提效
数据下田,庄稼不“瞎种”——聊聊大数据如何帮农业提效
264 14
|
8月前
|
机器学习/深度学习 传感器 监控
吃得安心靠数据?聊聊用大数据盯紧咱们的餐桌安全
吃得安心靠数据?聊聊用大数据盯紧咱们的餐桌安全
272 1
|
8月前
|
数据采集 自动驾驶 机器人
数据喂得好,机器人才能学得快:大数据对智能机器人训练的真正影响
数据喂得好,机器人才能学得快:大数据对智能机器人训练的真正影响
807 1
|
7月前
|
传感器 人工智能 监控
拔俗多模态跨尺度大数据AI分析平台:让复杂数据“开口说话”的智能引擎
在数字化时代,多模态跨尺度大数据AI分析平台应运而生,打破数据孤岛,融合图像、文本、视频等多源信息,贯通微观与宏观尺度,实现智能诊断、预测与决策,广泛应用于医疗、制造、金融等领域,推动AI从“看懂”到“会思考”的跃迁。
590 0
|
9月前
|
机器学习/深度学习 监控 大数据
数据当“安全带”:金融市场如何用大数据玩转风险控制?
数据当“安全带”:金融市场如何用大数据玩转风险控制?
494 10
|
9月前
|
机器学习/深度学习 自然语言处理 监控
大数据如何影响新兴市场投资决策?——数据才是真正的风向标
大数据如何影响新兴市场投资决策?——数据才是真正的风向标
212 3
|
存储 算法 数据安全/隐私保护
OSS 解决方案篇-OSS 数据安全
加强 OSS 信息安全管控,多种解决方案实现数据安全
6335 0
OSS 解决方案篇-OSS 数据安全
|
7月前
|
存储 人工智能 Cloud Native
阿里云渠道商:OSS与传统存储系统的差异在哪里?
本文对比传统存储与云原生对象存储OSS的架构差异,涵盖性能、成本、扩展性等方面。OSS凭借高持久性、弹性扩容及与云服务深度集成,成为大数据与AI时代的优选方案。
|
9月前
|
存储 运维 安全
阿里云国际站OSS与自建存储的区别
阿里云国际站对象存储OSS提供海量、安全、低成本的云存储解决方案。相比自建存储,OSS具备易用性强、稳定性高、安全性好、成本更低等优势,支持无限扩展、自动冗余、多层防护及丰富增值服务,助力企业高效管理数据。