庖丁解牛数据库系统结构

简介:

标题索引


  • 追朔原因

  • 软件结构

  • 文件分类

  • 总结分析


追朔原因

    提及数据系统让人望其项背、难以起及,思考良久日:"不识庐山真面目,只缘身在此山中",此山看彼山或许才能识得彼山雄壮真容,为识数据库大山,望一步一印爬彼山。

软件结构

    数据库系统软件系统自称数据存储的生态系统,因此类似完整操作系统,拥有不同引擎、连接接口、管理系统、线程等等完整的生态系统节点,具体可参考如下官方结构图:

b5e43f1b24eed4b8353d3de23b13d3ff.png

图1-1 mysql数据库系统结构图

    由图可知数据系统主要由Connectors、Connection pool、Management Services、Utillties、SQL interface、Parser、Optimizer、Caches&Buffers和Pluggable Storage Engines组成。

    Connectors:是连接数据库的组件,不同开发语言及不同的应用场景所用的数据库连接管理工具不同,其主要目的是连接登陆管理数据库。

    Connection Pool:由图可知在线程池的组件中又有各个子功能,分别如下:

        Authentication:客户端验证功能

        Thread Reuse:线程重用功能,当线程处理完请求会并不会销毁线程,而是调会空闲线程池中以供处理其他请求;

        Connetion limits:连接限制,由线程池中的线程数量决定连接数量;

        Check Memory:内存资源检测。

    Management Services & Utillties:服务器的管理如备份、备份恢复、集群配置等等相关配置文件;

    SQL interface:

        DML,DDL,Stored Procedures Views,Triggers等SQL语句的接口功能

    Parser:解析器,SQL语句通过在解释器进行查询授权的权限;

    Optimizer:通过将SQL语句进行优化,优化后进行路径查询;

    Storage Engines:不同的存储引擎,引擎不一致存储方式和存储结构等不一致;

    File system:文件所存储的文件系统;

    File & logs:文件存储及日志文件的的相关信息,如Redo、Undo、Data、Index、Binary、Error、Query and Slow;

文件分类

    在数据文件基本上分为两大类数据文件和日志文件

    数据文件:数据库文件和索引文件

    日志文件:重做日志、撤销日志、二进制日志、错误日志、查询日志、慢查询日志和中继日志



本文转自 薛伟博 51CTO博客,原文链接:http://blog.51cto.com/weiboxue/2043356,如需转载请自行联系原作者


相关实践学习
【涂鸦即艺术】基于云应用开发平台CAP部署AI实时生图绘板
【涂鸦即艺术】基于云应用开发平台CAP部署AI实时生图绘板
相关文章
|
数据库
Google Earth Engine(GEE)——全球树木异体测量和树冠结构(Tallo)数据库
Google Earth Engine(GEE)——全球树木异体测量和树冠结构(Tallo)数据库
282 1
|
SQL 缓存 分布式数据库
【赵渝强老师】达梦数据库的线程结构
达梦数据库采用单进程、多线程结构,利用对称服务器架构实现高效资源利用与可扩展性。其核心线程类型包括监听线程(管理客户端连接)、I/O线程(处理数据页读写)、工作线程(执行数据操作)、调度线程(定时任务管理)和日志刷新线程(确保REDO日志刷盘)。通过合理分工与同步机制,达梦数据库实现了高性能与稳定性。视频讲解进一步详细介绍了各线程的功能与协作方式。
365 1
【赵渝强老师】达梦数据库的线程结构
|
存储 SQL NoSQL
【赵渝强老师】达梦数据库的逻辑存储结构
本文介绍了达梦数据库的存储结构,包括逻辑和物理存储两部分。逻辑存储结构由数据库(Database)、表空间(Tablespaces)、段(Segments)、簇(Cluster)和页(Page)组成。数据库是最大逻辑单元,包含所有表、索引等;表空间由数据文件组成,用于存储对象;段由簇构成,簇包含连续的数据页;页是最小存储单元。文中还提供了查询表空间、段和页大小的SQL语句,并附有视频讲解和示意图。
479 7
|
数据管理 关系型数据库 MySQL
数据管理服务DMS支持MySQL数据库的无锁结构变更
本文介绍了使用Sysbench准备2000万数据并进行全表字段更新的操作。通过DMS的无锁变更功能,可在不锁定表的情况下完成结构修改,避免了传统方法中可能产生的锁等待问题。具体步骤包括:准备数据、提交审批、执行变更及检查表结构,确保变更过程高效且不影响业务运行。
1582 2
|
数据库
生成数据库结构文档
生成数据库结构文档
|
SQL 存储 缓存
【赵渝强老师】达梦数据库的内存结构
本文介绍了达梦数据库管理系统的内存结构,包括内存池、缓冲区、排序区和哈希区。内存池分为共享内存池和运行时内存池,能够提高内存申请与释放效率,并便于监控内存使用情况。缓冲区涵盖数据缓冲区、日志缓冲区、字典缓冲区和SQL缓冲区,用于优化数据读写和查询性能。排序区和哈希区分别提供排序和哈希连接所需的内存空间,通过合理配置参数可提升系统效率。文内附有具体配置示例及视频讲解,帮助用户深入理解达梦数据库的内存管理机制。
445 0
|
存储 SQL 安全
【赵渝强老师】达梦数据库的物理存储结构
本文介绍了达梦数据库的存储结构及各类物理文件的作用。达梦数据库通过逻辑和物理存储结构管理数据,包含配置文件(如dm.ini、sqllog.ini)、控制文件(dm.ctl)、数据文件(*.dbf)、重做日志文件(*.log)、归档日志文件、备份文件(*.bak)等。配置文件用于功能设置,控制文件记录数据库初始信息,数据文件存储实际数据,重做日志用于故障恢复,归档日志增强数据安全性,备份文件保障数据完整性,跟踪与事件日志辅助问题分析。这些文件共同确保数据库高效、稳定运行。
623 0
|
Oracle 关系型数据库 数据库连接
|
存储 关系型数据库 MySQL
|
存储 关系型数据库 MySQL
MySQL数据库——InnoDB引擎-逻辑存储结构(表空间、段、区、页、行)
MySQL数据库——InnoDB引擎-逻辑存储结构(表空间、段、区、页、行)
614 7