分布式关系型数据库服务 DRDS 支持全局二级索引,可完成多维字段拆分

简介: 信息摘要: DRDS 支持全局二级索引,提供全局二级索引,全局唯一索引的创建、查看,可完成多维字段拆分适用客户: 数据库使用者 / 分布式数据库使用者 / 分库分表 / 开发者 / 互联网企业 / 金融保险行业 / 新零售行业版本/规格功能: 新功能:新增支持创建全局二级索引、创建全局唯一索引...

信息摘要: DRDS 支持全局二级索引,提供全局二级索引,全局唯一索引的创建、查看,可完成多维字段拆分
适用客户: 数据库使用者 / 分布式数据库使用者 / 分库分表 / 开发者 / 互联网企业 / 金融保险行业 / 新零售行业
版本/规格功能: 新功能:

  • 新增支持创建全局二级索引、创建全局唯一索引、查看全局二级索引语法,CREATE * GLOBAL INDEX, CREATE UNIQUE GLOBAL INDEX, SHOW GLOBAL INDEX
  • 新增动态调整DRDS连接时区功能
  • 新增支持逻辑 RENAME TABLE,提高 RENAME TABLE 性能;
  • 新增 CREATE SHADOW TABLE 语法,用于创建和关联全链路压测影子表
  • 新增UPDATE/DELETE 对DERIVED子查询的支持
  • 新增CBO,JOIN与AGG下推与交换能力
  • 新增SHOW METADATA LOCK 查看 DRDS METADATA LOCK 信息
  • 新增支持PLAN MANAGEMENT运维指令
  • 新增支持CREATE TABLE WITH GLOBAL INDEX和CREATE GLOBAL INDEX的回滚
  • 新增CREATE TABLE、DROP TABLE关联未完成全局二级索引的检查并提示
  • 新增支持指定JOB ID执行SHOW DDL
  • 新增支持非等值的条件推导
  • 新增 PARALLEL QUERY对更多算子并行的支持

优化:

  • 优化规则自动清理任务执行
  • 优化 INFORMATION_SCHEMA 查询性能
  • 优化BKAJOIN COST估算算法
  • 优化DDL后更新统计信息、BASELINE逻辑
  • 优化两阶段AGG逻辑,支持GROUP BY列
  • 优化 DRDS 事务日志的清理策略,减少清理时间,降低对后端存储的访问压力
  • 优化ADDTIME、SUBTIME、DATEADD、DATESUB、INTERVAL等函数中微秒精度计算
  • 优化 SQL审计日志减少网络抖动的影响
  • 优化器内支持创建DOUBLE类型的LITERAL。
  • 优化下推的 GROUP BY 查询避免生成子查询
  • 优化聚合函数内部实现,内存占用更低、性能更优
  • 优化 CBO 对常量表达式的选择率估计
  • 优化DDL相关解析,增强错误检查能力
  • 优化部分涉及时间类型的表达式计算中对异常时间的处理,兼容MySQL行为

问题修复:

  • 修复回收站启用后,表名中包含特殊符号导致 RENAME TABLE 报错的问题
  • 修复PlAN MANAGEMENT线程池抛ABORT异常问题
  • 修复HashAggCursor处理不同类型输入HASHCODE不准确问题
  • 修复BETWEEN与NOT BETWEEN处理问题
  • 修复HashAggExec内存统计问题
  • 修复写入广播表时的函数计算出错问题
  • 修复使用高版本 JDBC 驱动连接 MANAGE PORT报错的问题
  • 修复UPDATE/DELETE 条件中包含库名导致报错的问题
  • 修复UPDATE/DELETE SET 部分有重名列导致报错的问题
  • 修复LEFT JOIN + IS NULL 导致分区裁剪异常的问题
  • 修复INSERT SELECT 偶发的不支持错误的问题
  • 修复全局二级索引表名、拆分键、DDL回滚表名中包含特殊字符问题
  • 修复SQL中HINT和COMMENT多层嵌套时解析异常
  • 修复建表语句DEFAULT后加COLLATE的解析错误问题
  • 修复非法日期时间格式解析的问题
  • 修复 CONVERT函数转换HEX到字符乱码的问题
  • 修复SUBSTRING、SUBSTRINGINDEX、JSONEXTRACT等函数传递NULL参数异常的问题
  • 修复 CONNECTION_ID()与SHOW RPOCESSLIST不一致的问题
  • 修复子查询表名同外表一致时出现的异常
  • 修复子查询转化过程中CASE WHEN 函数的类型问题.
  • 修复 PROJECT中多个子查询下推时的转换问题.
  • 修复包含JOIN 的列重名问题.
  • 修复部分列找不到误报未表找不到的问题
  • 修复查询时ORDER BY不存在的列导致的StackOverflow 问题
  • 修复WHERE 条件中存在 CASE WHEN且 WHEN 表达式存在 AND 条件下的下推错误问题
  • 修复当JOIN左右表存在不可下推的PROJECT时,进行JOIN_PROJECT_TRANSPOSE导致的 问题
  • 修复当TIMESTAMP类型作为拆分键时会因时区导致分片路由错误的问题
    产品文档: https://help.aliyun.com/document_detail/49279.html?spm=a2c4g.11186623.6.546.1431c28b08l9FU#h2-v5-4-1-15720166-2019-10-253
目录
相关文章
|
存储 缓存 算法
分布式锁服务深度解析:以Apache Flink的Checkpointing机制为例
【10月更文挑战第7天】在分布式系统中,多个进程或节点可能需要同时访问和操作共享资源。为了确保数据的一致性和系统的稳定性,我们需要一种机制来协调这些进程或节点的访问,避免并发冲突和竞态条件。分布式锁服务正是为此而生的一种解决方案。它通过在网络环境中实现锁机制,确保同一时间只有一个进程或节点能够访问和操作共享资源。
730 3
|
消息中间件 人工智能 监控
文生图架构设计原来如此简单之分布式服务
想象一下,当成千上万的用户同时要求AI画图,如何公平高效地处理这些请求?文生图/图生图大模型的架构设计看似复杂,实则遵循简单而有效的原则:合理排队、分工明确、防患未然。
672 14
文生图架构设计原来如此简单之分布式服务
|
SQL 分布式计算 DataWorks
MaxCompute MaxFrame评测 | 分布式Python计算服务MaxFrame(完整操作版)
在当今数字化迅猛发展的时代,数据信息的保存与分析对企业决策至关重要。MaxCompute MaxFrame是阿里云自研的分布式计算框架,支持Python编程接口、兼容Pandas接口并自动进行分布式计算。通过MaxCompute的海量计算资源,企业可以进行大规模数据处理、可视化数据分析及科学计算等任务。本文将详细介绍如何开通MaxCompute和DataWorks服务,并使用MaxFrame进行数据操作。包括创建项目、绑定数据源、编写PyODPS 3节点代码以及执行SQL查询等内容。最后,针对使用过程中遇到的问题提出反馈建议,帮助用户更好地理解和使用MaxFrame。
|
消息中间件 存储 安全
分布式系统架构3:服务容错
分布式系统因其复杂性,故障几乎是必然的。那么如何让系统在不可避免的故障中依然保持稳定?本文详细介绍了分布式架构中7种核心的服务容错策略,包括故障转移、快速失败、安全失败等,以及它们在实际业务场景中的应用。无论是支付场景的快速失败,还是日志采集的安全失败,每种策略都有自己的适用领域和优缺点。此外,文章还为技术面试提供了解题思路,助你在关键时刻脱颖而出。掌握这些策略,不仅能提升系统健壮性,还能让你的技术栈更上一层楼!快来深入学习,走向架构师之路吧!
886 12
|
SQL 分布式计算 数据处理
云产品评测|分布式Python计算服务MaxFrame | 在本地环境中使用MaxFrame + 基于MaxFrame实现大语言模型数据处理
本文基于官方文档,介绍了由浅入深的两个部分实操测试,包括在本地环境中使用MaxFrame & 基于MaxFrame实现大语言模型数据处理,对步骤有详细说明。体验下来对MaxCompute的感受是很不错的,值得尝试并使用!
483 1
|
人工智能 分布式计算 数据处理
云产品评测:MaxFrame — 分布式Python计算服务的最佳实践与体验
阿里云推出的MaxFrame是一款高性能分布式计算平台,专为大规模数据处理和AI应用设计。它提供了强大的Python编程接口,支持分布式Pandas操作,显著提升数据处理速度(3-5倍)。MaxFrame在大语言模型数据处理中表现出色,具备高效内存管理和任务调度能力。然而,在开通流程、API文档及功能集成度方面仍有改进空间。总体而言,MaxFrame在易用性和计算效率上具有明显优势,但在开放性和社区支持方面有待加强。
351 9
|
分布式计算 数据处理 MaxCompute
云产品评测|分布式Python计算服务MaxFrame
云产品评测|分布式Python计算服务MaxFrame
458 2
|
人工智能 分布式计算 数据处理
有奖评测,基于分布式 Python 计算服务 MaxFrame 进行数据处理
阿里云MaxCompute MaxFrame推出分布式Python计算服务MaxFrame评测活动,助力开发者高效完成大规模数据处理、可视化探索及ML/AI开发。活动时间为2024年12月17日至2025年1月31日,参与者需体验MaxFrame并发布评测文章,有机会赢取精美礼品。
|
分布式计算 数据处理 MaxCompute
分布式Python计算服务MaxFrame使用心得
大家好,我是V哥。MaxFrame是阿里云自研的分布式计算框架,专为Python开发者设计,支持大规模数据处理和AI模型开发。MaxFrame适用于快速进行数据处理、数据科学和交互式探索,支持按量付费及包年包月两种计费方式。通过两个案例(金融数据清洗和大语言模型预处理),展示了MaxFrame在大规模数据处理中的显著性能提升。安装MaxFrame客户端只需简单几步,轻松开启高效数据处理之旅。欢迎关注威哥爱编程,一起交流技术心得!
342 0

热门文章

最新文章