备案控制台

开发者社区

开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 视频 > 正文

数据湖JindoFS+OSS 实操干货36讲第二课

发布者：Dev-Talk 2021-05-17 16:23:19 831

Dev-Talk

+关注

视频介绍

【第二课直播主题】

1、如何将 HDFS 数据归档到 OSS
2、如何将 Hive 数据按分区归档到 OSS

【背景】

为了让更多开发者了解并使用 JindoFS，由阿里云 JindoFS+OSS 团队打造的专业公开课【数据湖 JindoFS+OSS 实操干货36讲】会在每周二16：00准时开讲！从五大板块入手，玩转数据湖！

讲师介绍

辰石 - 阿里巴巴计算平台事业部 EMR 技术专家
健身 - 阿里巴巴计算平台事业部 EMR 技术专家

关键词：

网盘对象存储

对象存储相册

对象存储网盘

对象存储阿里云

阿里云网盘相册对象存储

相关视频

大数据与机器学习

开源大数据平台 E-MapReduce

+关注

阿里云EMR是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎，计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

热门文章

热门讨论

JindoFS解析 - 云上大数据高性能数据湖存储方案

hive在E-MapReduce集群的实践（二）集群hive参数优化

11月14日Spark社区直播【 Spark on Kubernetes & YARN】

Apache Flink : Checkpoint 原理剖析与应用实践

开源大数据周刊-第14期

SparkSQL ThriftServer 安全相关功能的现状分析

实时 OLAP 系统 Druid

钉钉群直播【Spark Relational Cache 原理和实践】

使用 Jupyter Notebook 运行 Delta Lake 入门教程

HDFS Federation简介

展开全部

阿里云共享块存储和NAS还有OSS的区别是什么呀

大佬，可以请教下，有没有遇到 com.aliyun.oss

阿里云E-MapReduce读写 oss 文件时，api 的调用次数和文件层级有关系吗？

"E-MapReduce这些异常都是什么原因导致的？

请问hive 的hive-site.xml文件在哪啊

starocks 访问oss报错应该怎么处理？

阿里云E-MapReduce的jindodata写数据到oss，是单线程还是多线程阿？

阿里云E-MapReduce中Nootbook什么时候可以上文件夹功能？

阿里云E-MapReduce后期可能会做类似jupyterhub的账户隔离管理的工作吗？

hdfs 文件块过多（1亿）每个datanode 占3000万块(分16G内),某时刻内存陡然增加？

展开全部

+关注

Dev-Talk

文章

问答

视频

来源圈子

更多

阿里云数据湖技术社区

658

数据湖构建·Data Lake Formation是阿里巴巴数据湖团队带来的最新一站式入湖解决方案，助力企业无缝对接多种计算引擎，打破孤岛，洞察业务价值。本技术圈会持续发布最新产品动向和技术解读，更有不定期视频直播，与您一起完成企业大数据架构转型。敬请关注官网：https://www.aliyun.com/product/bigdata/dlf

+ 订阅

相关产品

开源大数据平台 E-MapReduce

文档详情产品详情

相关文章

更多

DataLakeAnalysis: 使用DataX同步Kafka数据到OSS进行分析文件网关秒级同步OSS变更对象初体验 MaxCompute中使用OSS外部表读取JSON数据 MaxCompute使用OSS数据作为外部表阿里云RDS PostgreSQL OSS 外部表实践 - (dblink异步调用封装并行) 从OSS并行导入数据强制数据分布与导出prefix - 阿里云pg, hdb pg oss快速数据规整外部表导出实践案例阿里云（一）云存储OSS的命令行osscmd的安装和使用阿里云云存储OSS的命令行使用命令行下玩转阿里云OSS PHP调用接口到阿里云OSS同步上传图片