|
5小时前
|
关系型数据库 Serverless 分布式数据库
|
置顶

PolarDB PostgreSQL版Serverless技术原理解读

PolarDB PostgreSQL版Serverless数据库通过动态弹性扩缩容技术,解决了传统数据库在资源利用率和成本上的痛点。其关键特性包括:快速响应业务负载变化,实现秒级资源调整,以应对突发流量;精确评估和调整资源,确保按需使用并降低成本;保持系统稳定,通过瞬时抖动处理和内核组件的精细管理减少性能影响;支持广泛的弹性,包括垂直和水平扩展,充分利用一写多读能力。此外,通过压力测试验证了其在不同工作负载下的弹性性能。用户现在可以在阿里云平台上免费体验PolarDB PostgreSQL版Serverless服务。

38 4
来自: 关系型数据库  版块
|
6月前
|
人工智能 Cloud Native 关系型数据库
|
置顶

云原生数据库,走向Serverless与AI驱动的一站式数据平台

AI驱动下的数据平台,正在向一站式、智能化的方向演进。作为AIGC应用的基础设施,以PolarDB、AnalyticDB、Lindorm、RDS为核心的阿里云瑶池数据库现已全面拥抱向量检索能力,并与通义等大模型深度集成,为用户提供智能化的一站式数据管理平台,加速业务数智创新。

50106 47
来自: 关系型数据库  版块
|
4月前
|
Cloud Native 关系型数据库 分布式数据库
|
置顶

阿里云PolarDB开发者大会首度召开,让数据库开发像“搭积木”一样简单

让数据库开发像“搭积木”一样简单

127991 17
来自: 关系型数据库  版块
|
3月前
|
Cloud Native 关系型数据库 分布式数据库
|
置顶

2024最新一期中国数据库流行榜公布:阿里云PolarDB登顶

PolarDB登顶国产数据库流行榜,持续引领云原生数据库创新

504 6
|
3小时前
|
SQL 存储 关系型数据库
|

性能诊断工具DBdoctor如何快速纳管数据库PolarDB-X

DBdoctor是一款基于eBPF技术的数据库性能诊断工具,已通过阿里云PolarDB分布式版(V2.3)认证。PolarDB-X是阿里云的高性能云原生分布式数据库,采用Shared-nothing和存储计算分离架构,支持高可用、水平扩展和低成本存储。PolarDB-X V2.3.0在读写混合场景下对比开源MySQL有30-40%的性能提升。DBdoctor能按MySQL方式纳管PolarDB-X的DN节点,提供性能洞察和诊断。用户可通过指定步骤安装PolarDB-X和DBdoctor,实现数据库的管理和性能监控。

9 0
来自: 数据库管理工具  版块
|
6小时前
|
Cloud Native 关系型数据库 分布式数据库
|

数据库性能诊断工具DBdoctor通过阿里云PolarDB产品生态集成认证

DBdoctor(V3.1.0)成功通过阿里云PolarDB分布式版(V2.3)集成认证,展现优秀兼容性和稳定性。此工具是聚好看科技的内核级数据库性能诊断产品,运用eBPF技术诊断SQL执行,提供智能巡检、根因分析和优化建议。最新版V3.1.1增加了对PolarDB-X和OceanBase的支持,以及基于cost的索引诊断功能。PolarDB-X是阿里巴巴的高性能云原生分布式数据库,兼容MySQL生态。用户可通过提供的下载地址、在线试用链接和部署指南体验DBdoctor。

6 0
来自: 数据库管理工具  版块
|
8小时前
|
人工智能 NoSQL 安全
|

国内唯一!阿里云荣膺MongoDB“2024年度DBaaS认证合作伙伴奖”

阿里云连续第五年斩获MongoDB合作伙伴奖项,也是唯一获此殊荣的中国云厂商。

29 0
来自: NoSQL数据库  版块
|
13小时前
|
消息中间件 缓存 NoSQL
|

Redis经典问题:缓存雪崩

本文介绍了Redis缓存雪崩问题及其解决方案。缓存雪崩是指大量缓存同一时间失效,导致请求涌入数据库,可能造成系统崩溃。解决方法包括:1) 使用Redis主从复制和哨兵机制提高高可用性;2) 结合本地ehcache缓存和Hystrix限流降级策略;3) 设置随机过期时间避免同一时刻大量缓存失效;4) 使用缓存标记策略,在标记失效时更新数据缓存;5) 实施多级缓存策略,如一级缓存失效时由二级缓存更新;6) 通过第三方插件如RocketMQ自动更新缓存。这些策略有助于保障系统的稳定运行。

34 1
来自: NoSQL数据库  版块
|
14小时前
|
存储 关系型数据库 MySQL
|

MySQL的优化利器⭐️Multi Range Read与Covering Index是如何优化回表的?

本文以小白的视角使用通俗易懂的流程图深入浅出分析Multi Range Read与Covering Index是如何优化回表

102 0
来自: 关系型数据库  版块
|
1天前
|
存储 NoSQL Java
|

熟悉Redis吗,那Redis的过期键删除策略是什么

对于Redis,我们业务开发一般都只关心Redis键值对的查询、修改操作,可能因为懒或者只想能用就行,呵呵。很少关心键值对存储在什么地方、键值对过期了会怎么样、Redis有没什么策略处理过期的键、Redis处理过期键又有什么作用?但这些问题却是Java程序员在Redis上进阶的必备知识,不要埋怨Java要学习的系统知识为什么这么多,因为这些确确实实是进阶的程序员所必须掌握的。我们往下看看~

20 2
|
1天前
|
Cloud Native 关系型数据库 OLAP
|

高效易用的数据同步:阿里云瑶池 Zero-ETL服务来啦!

在大数据时代,企业有着大量分散在不同系统和平台上的业务数据。OLTP数据库不擅长复杂数据查询,不具备全局分析视角等能力,而OLAP数据仓库擅长多表join,可实现多源汇集,因此需要将TP数据库的数据同步到AP数据仓库进行分析处理。传统的ETL流程面临资源成本高、系统复杂度增加、数据实时性降低等挑战。为了解决这些问题,阿里云瑶池数据库提供了Zero-ETL服务,可以快速构建业务系统(OLTP)和数据仓库(OLAP)之间的数据同步链路,将业务系统的数据自动进行提取并加载到数据仓库,从而一站式完成数据同步和管理,实现事务处理和数据分析一体化,帮助客户专注于数据分析业务。

24 0
来自: 数据仓库  版块
|
1天前
|
SQL 存储 小程序
|

数据库数据恢复—Sql Server数据库文件丢失的数据恢复案例

数据库数据恢复环境: 5块硬盘组建一组RAID5阵列,划分LUN供windows系统服务器使用。windows系统服务器内运行了Sql Server数据库,存储空间在操作系统层面划分了三个逻辑分区。 数据库故障: 数据库文件丢失,主要涉及3个数据库,数千张表。数据库文件丢失原因未知,不能确定丢失的数据库文件的存放位置。数据库文件丢失后,服务器仍处于开机状态,所幸未写入大量数据。

15 6
|
1天前
|
存储 关系型数据库 分布式数据库
|

数据库索引回表困难?揭秘PolarDB存储引擎优化技术

PolarDB分布式版存储引擎采用CSM方案均衡资源开销与可用性。

332 6
来自: 关系型数据库  版块
|
1天前
|
NoSQL Shell Redis
|

Redis热升级秘诀:保证高可用性的技术方案

Redis热升级方案允许在不中断业务的情况下,实现数千级别Redis的无缝更新。通过构建Redis Shell程序保存数据库状态,封装动态连接库,以及在运行时加载新版本库,保持客户端连接,该方法确保了业务连续性和高可用性,且升级仅需几毫秒,显著提升了系统效率。

29 6
来自: NoSQL数据库  版块
|
1天前
|
存储 SQL 关系型数据库
|

MySQL的优化利器⭐️索引条件下推,千万数据下性能提升273%🚀

以小白的视角探究MySQL索引条件下推ICP的优化,其中包括server层与存储引擎层如何交互、索引、回表、ICP等内容

160 3
来自: 关系型数据库  版块
|
1天前
|
分布式计算 Ubuntu Java
|

PySpark安装及WordCount实现(基于Ubuntu)

现在,你已经成功安装了PySpark并实现了WordCount示例。你可以根据实际需求修改脚本以处理不同的文本数据。

7 0
|
2天前
|
SQL 关系型数据库 Shell
|

pgbench 的使用命令

pgbench 是 PostgreSQL 的一个基准测试工具,用于评估数据库的性能。以下是一些常用的 pgbench 命令和选项: 初始化测试环境: bash Copy code pgbench -i -s [scale] [database_name] 其中 -i 用于初始化数据库,-s 指定比例因子,[database_name] 是要测试的数据库名。比例因子决定了数据的总量,例如 -s 10。 执行基准测试: bash Copy code pgbench -c [clients] -j [jobs] -t [transactions] [database_name] 其中 -

12 0
|
2天前
|
Ubuntu 关系型数据库 测试技术
|

pgbench 的安装

`pgbench` 是一个用于 PostgreSQL 的基准测试工具,用于对 PostgreSQL 数据库的性能进行评估。`pgbench` 是 PostgreSQL 附带的一个工具,因此在安装 PostgreSQL 后通常也会自动安装 `pgbench`。 在不同的操作系统上安装 `pgbench` 的方法可能会略有不同。以下是一些常见的操作系统上安装 `pgbench` 的方法: ### 在 Debian/Ubuntu 上 1. 安装 PostgreSQL:`pgbench` 通常会随 PostgreSQL 一起安装。 ```bash sudo apt-get upd

12 0
|
2天前
|
存储 缓存 监控
|

快速掌握Redis优化要点,告别性能瓶颈!

# Redis优化指南 了解如何提升Redis性能,从读写方式(整体与部分)、KV size、Key数量、读写峰值、命中率、过期策略、平均穿透加载时间、可运维性、安全性等方面着手。选择合适的读写策略,如只整体读写或部分读写变更,优化KV size避免过大或差异过大,合理管理Key数量,应对不同读写峰值,监控命中率并持续优化,设置智能过期策略,减少平均穿透加载时间,确保高可运维性并强化安全性。一起探索Redis的性能潜力!

44 3
来自: NoSQL数据库  版块
|
2天前
|
SQL 存储 数据挖掘
|

数据库数据恢复—数据库ndf文件大小变为0KB的数据恢复案例

存储设备损坏导致存储中SQL Server数据库崩溃。对数据库文件进行恢复后,用户发现有4个ndf文件的大小变为0KB。该SQL Server数据库每10天生成一个大小相同的NDF文件,该SQL Server数据库包含两个LDF文件。

15 4
|
2天前
|
存储 关系型数据库 MySQL
|

MySQL字段的字符类型该如何选择?千万数据下varchar和char性能竟然相差30%🚀

本篇文章来讨论MySQL字段的字符类型选择并深入实践char与varchar类型的区别以及在千万数据下的性能测试

174 12
来自: 关系型数据库  版块
|
3天前
|
存储 监控 Apache
|

查询提速11倍、资源节省70%,阿里云数据库内核版 Apache Doris 在网易日志和时序场景的实践

网易的灵犀办公和云信利用 Apache Doris 改进了大规模日志和时序数据处理,取代了 Elasticsearch 和 InfluxDB。Doris 实现了更低的服务器资源消耗和更高的查询性能,相比 Elasticsearch,查询速度提升至少 11 倍,存储资源节省达 70%。Doris 的列式存储、高压缩比和倒排索引等功能,优化了日志和时序数据的存储与分析,降低了存储成本并提高了查询效率。在灵犀办公和云信的实际应用中,Doris 显示出显著的性能优势,成功应对了数据增长带来的挑战。

285 1
来自: 数据仓库  版块
|
5天前
|
应用服务中间件 PHP nginx
|

Nginx-URLRewrite伪静态

请根据你的具体需求和网站结构进行适当的配置更改。这只是一个示例,可以根据你的项目需求进行定制。

13 3
|
5天前
|
NoSQL Redis
|

透视Redis集群:心跳检测如何维护高可用性

Redis心跳检测保障集群可靠性,通过PING命令检测主从连接状态,预防数据丢失。当连接异常时,自动触发主从切换。此外,心跳检测辅助实现`min-slaves-to-write`和`min-slaves-max-lag`策略,避免不安全写操作。还有重传机制,确保命令无丢失,维持数据一致性。合理配置心跳检测,能有效防止数据问题,提升Redis集群的高可用性。关注“软件求生”获取更多Redis知识!

56 10
来自: NoSQL数据库  版块
|
7天前
|
监控 NoSQL 算法
|

探秘Redis分布式锁:实战与注意事项

本文介绍了Redis分区容错中的分布式锁概念,包括利用Watch实现乐观锁和使用setnx防止库存超卖。乐观锁通过Watch命令监控键值变化,在事务中执行修改,若键值被改变则事务失败。Java代码示例展示了具体实现。setnx命令用于库存操作,确保无超卖,通过设置锁并检查库存来更新。文章还讨论了分布式锁存在的问题,如客户端阻塞、时钟漂移和单点故障,并提出了RedLock算法来提高可靠性。Redisson作为生产环境的分布式锁实现,提供了可重入锁、读写锁等高级功能。最后,文章对比了Redis、Zookeeper和etcd的分布式锁特性。

51 16
来自: NoSQL数据库  版块
|
7天前
|
存储 NoSQL Redis
|

【Redis系列笔记】Redis总结

Redis是一个基于内存的 key-value 结构数据库。 Redis 是互联网技术领域使用最为广泛的存储中间件。 Redis是用C语言开发的一个开源的高性能键值对(key-value)数据库,官方提供的数据是可以达到100000+的QPS(每秒内查询次数)。 它存储的value类型比较丰富,也被称为结构化的NoSql数据库。

29 0
来自: NoSQL数据库  版块
|
7天前
|
缓存 NoSQL Java
|

【Redis系列笔记】Redis入门

本文介绍了Redis常用命令,以及SpringBoot集成Spring Data Redis和Spring Cache。Spring Data Redis 提供了对 Redis 的操作方法,而 Spring Cache 则提供了基于注解的缓存功能,可以方便地将方法的返回值缓存到 Redis 中,以提高性能和减少对数据源的访问次数。这样的集成可以帮助开发者更便捷地利用 Redis 来管理应用程序的数据和缓存。

44 4
来自: NoSQL数据库  版块
|
8天前
|
SQL 关系型数据库 MySQL
|

【MySQL系列笔记】MySQL总结

MySQL 是一种关系型数据库,说到关系,那么就离不开表与表之间的关系,而最能体现这种关系的其实就是我们接下来需要介绍的主角 SQL,SQL 的全称是 Structure Query Language ,结构化的查询语言,它是一种针对表关联关系所设计的一门语言,也就是说,学好 MySQL,SQL 是基础和重中之重。SQL 不只是 MySQL 中特有的一门语言,大多数关系型数据库都支持这门语言。

180 8
来自: 关系型数据库  版块
|
8天前
|
SQL 关系型数据库 MySQL
|

【MySQL系列笔记】常用SQL

常用SQL分为三种类型,分别为DDL,DML和DQL;这三种类型的SQL语句分别用于管理数据库结构、操作数据、以及查询数据,是数据库操作中最常用的语句类型。 在后面学习的多表联查中,SQL是分析业务后业务后能否实现的基础,以及后面如何书写动态SQL,以及完成级联查询的关键。

162 6
来自: 关系型数据库  版块
|
8天前
|
存储 关系型数据库 MySQL
|

【MySQL系列笔记】InnoDB引擎-数据存储结构

InnoDB 存储引擎是MySQL的默认存储引擎,是事务安全的MySQL存储引擎。该存储引擎是第一个完整ACID事务的MySQL存储引擎,其特点是行锁设计、支持MVCC、支持外键、提供一致性非锁定读,同时被设计用来最有效地利用以及使用内存和 CPU。因此很有必要学习下InnoDB存储引擎,它的很多架构设计思路都可以应用到我们的应用系统设计中。

155 4
来自: 关系型数据库  版块
|
8天前
|
存储 NoSQL 关系型数据库
|

【MongoDB系列笔记】索引

索引支持在MongoDB中高效地执行查询。如果没有索引,MongoDB必须执行全集合扫描,即扫描集合中的每个文档,以选择与查询语句匹配的文档。这种扫描全集合的查询效率是非常低的,特别在处理大量的数据时,查询可以要花费几十秒甚至几分钟,这对网站的性能是非常致命的。

19 1
|
8天前
|
存储 JSON NoSQL
|

【MongoDB系列相关笔记】常用命令

本文主要介绍了常见的MongoDB命令操作;结合某个案例需求,将数据库操作,集合操作,文档基本的CURD以及分页查询等命令进行详细说明。

29 0
来自: NoSQL数据库  版块
|
8天前
|
NoSQL JavaScript Linux
|

【MongoDB系列相关笔记】单机部署

本文主要介绍了Windows和Linux系统中安装和启动MongoDB的步骤。

31 0
来自: NoSQL数据库  版块
|
8天前
|
存储 NoSQL 关系型数据库
|

【MongoDB系列笔记】MongoDB相关概念

MongoDB 是一个开源、高性能、无模式的文档型数据库,常用于处理高并发、海量数据的场景,尤其适合社交、游戏、物流、物联网和视频直播等领域。与传统的关系型数据库相比,MongoDB 更适合存储结构较为灵活、数据量大且事务性要求不高的数据。当面临高读写需求、大规模数据存储和高可扩展性需求时,可以选择 MongoDB。MongoDB 支持类似于 JSON 的 BSON 数据格式,具有丰富的数据模型,如文档、集合和数据库,以及强大的查询和索引功能。此外,MongoDB 提供复制集以实现高可用性和水平扩展性,以适应业务发展和数据增长。

22 0
来自: NoSQL数据库  版块
|
8天前
|
SQL 存储 关系型数据库
|

【MySQL系列笔记】SQL优化

SQL优化是通过调整数据库查询、索引、表结构和配置参数等方式,提高SQL查询性能和效率的过程。它旨在减少查询执行时间、减少系统资源消耗,从而提升数据库系统整体性能。优化方法包括索引优化、查询重写、表分区、适当选择和调整数据库引擎等。

184 3
来自: 关系型数据库  版块
|
8天前
|
监控 NoSQL 算法
|

Redis集群模式:高可用性与性能的完美结合!

小米探讨Redis集群模式,通过一致性哈希分散负载,主从节点确保高可用性。节点间健康检测、主备切换、数据复制与同步、分区策略和Majority选举机制保证服务可靠性。适合高可用性及性能需求场景,哨兵模式则适用于简单需求。一起学习技术的乐趣!关注小米微信公众号“软件求生”获取更多内容。

38 11
来自: NoSQL数据库  版块
|
8天前
|
XML 存储 缓存
|

Spring缓存是如何实现的?如何扩展使其支持过期删除功能?

总之,Spring的缓存抽象提供了一种方便的方式来实现缓存功能,并且可以与各种缓存提供商集成以支持不同的过期策略。您可以根据项目的具体需求选择适合的方式来配置和扩展Spring缓存功能。

15 0
|
8天前
|
Linux Apache
|

Linux设置开机启动

以上步骤允许您在Linux系统上配置开机启动服务或程序。确保将"service-name"替换为实际要配置的服务或程序的名称。

14 0
|
9天前
|
监控 关系型数据库 MySQL
|

初体验:数据库监控、管理和可观测性工具(PMM)

Percona Monitoring and Management (PMM) 是一个开源工具,用于监控MySQL、PostgreSQL和MongoDB的性能。它提供实时监控、数据可视化、故障排除和管理功能,支持本地和云端数据库。要安装PMM,首先需安装Docker,然后通过提供的脚本部署PMM服务器和客户端。在MySQL服务器上创建PMM用户后,使用`pmm-admin`命令添加数据库。访问PMM的HTTPS网址(默认用户名和密码为admin)进行配置。本文还包含了安装Docker和PMM的命令行步骤。

20 0
|
9天前
|
Cloud Native 关系型数据库 分布式数据库
|

史上首次!阿里云(PolarDB)荣膺“2023年度十大软件著作权人”

在知识产权领域再获重要成果。

39 1
|
9天前
|
缓存 关系型数据库 MySQL
|

mysql用in查询大量数据的方法

在MySQL中使用 IN 子句来查询大量数据时,性能可能会成为一个问题

34 0
|
9天前
|
关系型数据库 MySQL 测试技术
|

MySQL的`IN`的优化经验

限制IN列表的长度:IN子句中的元素数量较多时,会显著降低查询性能。尽量减少IN中的项数量。

25 0
|
9天前
|
监控 NoSQL 算法
|

深入剖析Redis哨兵模式的原理和应用

Redis的哨兵模式是实现高可用性和自动故障转移的机制,当主服务器故障时,哨兵能自动检测并进行故障转移,确保服务连续和稳定性。哨兵模式通过监控主从服务器状态、自动故障转移、防止数据不一致,提高容错能力和负载均衡,降低运维成本,实现高可用性。哨兵通过检测主观下线和客观下线状态,以及选举Leader Sentinel来协调故障转移。Raft算法在其中用于领导者选举和状态一致性。哨兵模式通过综合考虑多种因素选举新主服务器并执行故障转移,保障集群稳定运行。

35 0
来自: NoSQL数据库  版块
|
10天前
|
存储 SQL Apache
|

阿里云数据库内核 Apache Doris 基于 Workload Group 的负载隔离能力解读

阿里云数据库内核 Apache Doris 基于 Workload Group 的负载隔离能力解读

64632 0
来自: 数据仓库  版块
|
10天前
|
存储 缓存 Java
|

【Spring系列笔记】依赖注入,循环依赖以及三级缓存

依赖注入: 是指通过外部配置,将依赖关系注入到对象中。依赖注入有四种主要方式:构造器注入、setter方法注入、接口注入以及注解注入。其中注解注入在开发中最为常见,因为其使用便捷以及可维护性强;构造器注入为官方推荐,可注入不可变对象以及解决循环依赖问题。本文基于依赖注入方式引出循环依赖以及三层缓存的底层原理,以及代码的实现方式。

22 0
|
10天前
|
存储 Cloud Native 大数据
|

国内独家|阿里云瑶池发布ClickHouse企业版:云原生Serverless新体验

全面升级为云原生架构,支持云原生按需弹性Serverless能力,解决了长期困扰用户的集群扩展效率和平滑性问题。

740 0
来自: 数据仓库  版块
|
10天前
|
SQL 存储 算法
|

clickhouse SQL优化

clickhouse 是 OLAP 数据库,但其具有独特的索引设计,所以如果拿 MySQL 或者其他 RDB 的优化经验来优化 clickhouse 可能得不到很好的效果,所以特此单独整理一篇文档,用于有 SQL 优化需求的同学,本人接触 clickhouse 时间也不长,难免有不足的地方,如果大家发现错误,还请不吝指正。

251 0
来自: 数据仓库  版块
|
10天前
|
监控 NoSQL Redis
|

Redis分区容错秘诀:解密主从模式

Redis主从模式用于提高高可用性、负载均衡和数据备份。主节点处理写入,从节点复制数据并分担读取,实现故障切换和读写分离。配置主从关系后,从节点连接主节点进行全量和增量复制。当主节点故障,从节点可接管服务。然而,主从延迟和数据不一致性是挑战,可通过优化网络、使用Sentinel和Redis Cluster等解决。关注“软件求生”获取更多内容。

41 1
来自: NoSQL数据库  版块
|
10天前
|
运维 数据管理 数据库
|

数据管理DMS产品使用合集之在阿里云DMS中,想对数据精度进行校验,有什么方法

阿里云数据管理DMS提供了全面的数据管理、数据库运维、数据安全、数据迁移与同步等功能,助力企业高效、安全地进行数据库管理和运维工作。以下是DMS产品使用合集的详细介绍。

24 0
来自: 数据库管理工具  版块
|
10天前
|
运维 安全 数据管理
|

数据管理DMS产品使用合集之想要实现在 DMS 中执行事务,我该怎么操作

阿里云数据管理DMS提供了全面的数据管理、数据库运维、数据安全、数据迁移与同步等功能,助力企业高效、安全地进行数据库管理和运维工作。以下是DMS产品使用合集的详细介绍。

26 0
来自: 数据库管理工具  版块