【月刊】E-MapReduce 2021-11 产品月刊

本文涉及的产品
EMR Serverless Spark 免费试用,1000 CU*H 有效期3个月
EMR Serverless StarRocks,5000CU*H 48000GB*H
简介: 11月 E-MapReduce 产品月刊为您带来 1.重要功能 2.版本发布 3.产品文档更新 4.十一月精选文章推荐 。欢迎持续关注更多精彩内容!

【E-MapReduce 2021年 11月刊】

  为您带来11月产品、技术最新动态,欢迎阅读!


  • 重要功能
  • 版本发布
  • 产品文档更新
  • 11月精选文章推荐



⭐更多EMR相关信息,欢迎前往EMR产品详情页:https://www.aliyun.com/product/emapreduce


重要功能

  1. EMR Studio Beta版上线,为用户提供一站式数据开发服务  前往了解>>
  2. EMR ClickHouse独立集群公测发布  前往了解>>
  3. 前往EMR控制台,功能体验>>



版本发布

发布日期

版本

更新内容

服务

变更点

2021.11月

EMR-5.4.1

SmartData 升级SmartData至3.7.3版本,详情请参见SmartData 3.7.x版本简介
Oozie 修复了HA情况下Oozie的Jetty Server依赖JAR包冲突,导致Jetty Server无法启动的问题。
Impala 修复了查询DLF元数据表时提示no such method error的问题。
DLF-Auth 升级DLF-Auth至1.0.1版本。
2021.11月

EMR-3.38.1

SmartData 升级SmartData至3.7.3版本,详情请参见SmartData 3.7.x版本简介
Spark
  • 移除了无效配置Log4j MetricsAppender。
  • 修复了SparkContext启动过程中空指针异常的问题。
Presto
  • 修复了Hadoop高可用集群,Presto需要配置host才能查询Hive表的问题。
  • 修复了内存较小时,默认配置下Presto无法启动的问题。
  • 修复了修改worker-jvm配置无法生效的问题。
  • 支持Ranger。
Impala 修复了查询DLF元数据表时,提示no such method error的问题。
Ranger
  • 支持Presto。
  • 修复了Ranger Spark insert ORC和PARQUET表的权限问题。
  • 修复了Ranger Hive role权限在开启Kerberos后无法生效的问题。
DLF-Auth
  • 升级DLF-Auth至1.0.1版本。
  • 支持DLF权限,可以控制Presto权限。
  • 修复了RAM用户缓存的问题。




产品文档更新

时间 特性 类别 描述 产品文档
2021.11.08 技术支持 更新功能 介绍EMR产品技术支持服务的范围、支持方式和服务SLA。 技术支持
2021.11.17 DLF-Auth 新增功能 介绍如何开启DLF-Auth权限。 DLF-Auth
2021.11.25 产品简介 更新功能 介绍EMR-5.4.1和EMR-5.4.0发行版本的发布日期和更新内容等信息。 EMR-5.4.x版本说明
2021.11.25 产品简介 更新功能 介绍EMR-3.38.1和EMR-3.38.0发行版本的发布日期和更新内容等信息。 EMR-3.38.x版本说明



运维管理指南:


EMR开发指南:


EMR on ACK:


最佳实践




11月精选文章推荐

【客户案例


【数据湖系列


【ClickHouse 系列】

  • 基于 EMR OLAP 的开源实时数仓解决方案之 ClickHouse 事务实现
  • 【ClickHouse 技术系列】- 在 ClickHouse 中处理实时更新
  • 【ClickHouse 技术系列】- 使用新的 TTL move,将数据存储在合适的地方
  • 【ClickHouse 技术系列】- 在 ClickHouse 物化视图中使用 Join
  • 【ClickHouse 技术系列】- ClickHouse 聚合函数和聚合状态
  • 【ClickHouse 技术系列】- ClickHouse 中的嵌套数据结构


  • 欢迎加入EMR交流群,为您提供最新的产品直播、产品活动及技术支持!

    我们会在钉钉群定期推送精彩案例,邀请更多技术大牛直播分享。欢迎有兴趣的同学扫下方二维码加入钉钉群进行交流和技术分享。关注公众号,锁定每周精彩分享内容!

    image.png

    同重云E-MapReduce交...

    Spark

    美容瑞华天省新修康教电进重人,就锁

    WOA量OTODO:OOAOODAOOO

    微信公众号

    关注我们获取最新资讯

    EMR产品交流钉钉群

    相关文章
    |
    机器学习/深度学习 人工智能 自然语言处理
    NLG技术
    【7月更文挑战第29天】NLG技术
    307 9
    |
    监控 负载均衡 算法
    构建高效微服务架构的五大核心组件
    【4月更文挑战第6天】随着现代业务需求的多样化和复杂性增加,传统的单体应用已无法满足快速迭代与灵活部署的需求。微服务架构应运而生,以其高度模块化、独立部署和可伸缩性成为企业转型的关键。本文聚焦于构建高效微服务架构的核心组件,从服务发现、配置管理、负载均衡、容错处理到服务监控五个方面进行深入剖析,旨在提供一套全面的技术指南以支持后端开发的最佳实践。
    |
    算法 Python
    Python算法——广度优先搜索
    Python算法——广度优先搜索
    408 0
    |
    消息中间件 存储 负载均衡
    ActiveMQ高可用集群部署方案
    ActiveMQ是分布式系统中重要的组件,在生产环境中如何保证让ActiveMQ能够持续工作,同时还要使消息中间件服务保持可靠性和高效的处理性能。
    6953 0
    ActiveMQ高可用集群部署方案
    |
    10月前
    |
    机器学习/深度学习 数据可视化 大数据
    机器学习与大数据分析的结合:智能决策的新引擎
    机器学习与大数据分析的结合:智能决策的新引擎
    594 15
    |
    11月前
    |
    存储 算法 调度
    云计算环境下的性能优化实践
    云计算环境下的性能优化实践
    |
    5月前
    |
    运维 安全 网络安全
    等保测评全面解析
    等保测评是依据国家信息安全等级保护制度,对信息系统安全保护状况进行检测评估的活动。其目标是确保信息系统在各阶段符合安全等级要求,保障系统保密性、完整性和可用性。测评涵盖技术与管理两方面:技术层面包括物理环境、网络通信、设备计算及应用数据安全;管理层面涉及制度、机构、人员及建设运维管理。测评流程分为准备、方案设计、现场测评和报告编制四个阶段。实践中需做好测评前准备、测评中配合以及测评后整改优化,以持续提升信息安全水平。
    502 0
    |
    8月前
    |
    云安全 边缘计算 监控
    R9-9950X服务器 超越频率桎梏,企业级稳定性的新标杆!
    德迅云安全推出的R9 9950X服务器专为多线程、高负载场景优化,基于AMD Ryzen 9系列的Zen 4架构,采用5nm工艺和CCD/CIOD分离设计,具备16核32线程全大核策略,确保高效能与低功耗。其自适应功耗管理和强化供电设计,保障了在企业级应用中的卓越稳定性和持续性能。搭配德迅卫士主机安全软件,提供实时监控、远程防护及资产清点等全面安全措施,适用于云计算、虚拟化和边缘计算等场景,为企业带来可靠的高性能解决方案。
    |
    移动开发
    使用charles来抓取手机App的网络包
    使用charles来抓取手机App的网络包
    172 1