数据库备份和Shell基础测试及AWK(运维)

本文涉及的产品
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
云数据库 RDS MySQL Serverless,价值2615元额度,1个月
简介: 数据库备份和Shell基础测试及AWK(运维)

image.png


第一题:简述一下如何用mysql命令进行备份和恢复,请以test库为例,创建一个备份,并再用此备份恢复备份



备份步骤:

  1. 备份test库:使用mysqldump命令备份test库,并将备份写入一个.sql文件中。命令示例:mysqldump -u 用户名 -p 密码 test > backup.sql

恢复的步骤:

  1. 恢复备份:使用mysql命令将备份文件中的数据恢复到test库中。命令示例:mysql -u 用户名 -p 密码 test < backup.sql


第二题:简述一下MySQL主从复制的原理



MySQL主从复制的原理是将一个MySQL数据库服务器(主服务器)上的数据自动复制到另一个MySQL服务器(从服务器)上。


主从复制的步骤如下:

  1. 在主服务器上开启二进制日志(binlog)功能,记录数据库更新操作。
  2. 设置从服务器连接到主服务器,并将主服务器的binlog传输到从服务器。
  3. 从服务器接收到主服务器传输的binlog,并将其应用到从服务器的数据库中,实现数据同步。


第三题:简述一下冷备份和热备份的不同点以及各自的优点



冷备份和热备份是数据库备份的两种方式。

  1. 冷备份是在数据库关闭的情况下进行备份,备份期间数据库不可用。冷备份的优点是可以保证数据一致性,备份速度较快。缺点是备份期间数据库不可用,对业务造成影响。
  2. 热备份是在数据库运行的情况下进行备份,备份期间数据库仍可读写。热备份的优点是备份期间对业务无影响,数据库持续可用。缺点是备份过程可能影响数据库性能,备份速度相对较慢。


第四题:简述一下MySQL binlog的几种日志录入格式以及区别



STATEMENT、ROW和MIXED。


  • STATEMENT格式:以SQL语句的形式记录二进制日志,记录的是执行的SQL语句。优点是日志文件相对较小,缺点是在一些特定情况下,例如使用非确定性函数、触发器等,可能会导致数据不一致。
  • ROW格式:以行的形式记录二进制日志,记录的是行级别的改变。优点是能够确保数据一致性,缺点是日志文件相对较大。
  • MIXED格式:结合了STATEMENT和ROW格式,根据具体情况选择合适的格式进行记录。


第五题:简述一下MySQL数据库cpu飙升到500%怎么处理



  1. 查看当前数据库连接数和数据库操作情况,使用SHOW FULL PROCESSLIST命令。
  2. 检查数据库的性能参数配置,例如innodb_buffer_pool_size、query_cache_size等是否合理配置。
  3. 检查当前数据库的慢查询和高并发查询,尝试优化这些查询,例如添加合适的索引。
  4. 检查是否有异常或错误的查询语句占用了大量CPU资源,及时修复或优化这些查询.
  5. 可以考虑升级数据库服务器的硬件,增加CPU核心数或内存容量。
  6. 如有必要,可以使用数据库性能监控工具进行更详细的分析和调优。


第六题:简述一下数据库备份正确的做法



  1. 定期进行备份,确保数据的安全性。
  2. 使用合适的备份策略,根据业务需求选择全量备份或增量备份。
  3. 备份数据的完整性,保证备份的数据能够准确恢复。
  4. 将备份数据保存在安全可靠的位置,防止数据丢失或遭到破坏。
  5. 测试备份的可恢复性,确保备份数据能够成功恢复。
  6. 配置合适的备份工具和参数,确保备份的效率和可靠性。与业务需求相结合,根据数据的重要性和变化频率,灵活调整备份策略和频率。


第七题:简述一下数据库事务有几大特性,分别代表什么意思



  1. 原子性(Atomicity):事务中的操作要么全部执行成功,要么全部回滚,不会部分执行。
  2. 一致性(Consistency):事务执行前后数据库的状态保持一致,符合一定的业务规则和约束。
  3. 隔离性(Isolation):事务间的操作相互隔离,各个事务之间互不影响,保证数据的独立性。持久性(Durability):事务提交后,对数据库的改变是永久的,即使发生故障也不会丢失。


第八题:写一个脚本查找最后创建时间是3天前,后缀是*.log的文件并删除



#!/bin/bash

find /path/to/directory -name "*.log" -type f -mtime +3 -delete


将/path/to/directory替换为要查找的目录路径,保存脚本为.sh文件,通过命令chmod +x script.sh赋予执行权限,然后执行脚本即可删除符合条件的文件。


第九题:写一个脚本将某目录下大于100K的文件移动至/tmp下



#!/bin/bash

find /path/to/source -type f -size +100k -exec mv {} /tmp \;


/path/to/source替换为要查找的目录路径,保存脚本为.sh文件,通过命令chmod +x script.sh赋予执行权限,然后执行脚本即可将符合条件的文件移动至/tmp目录。


第十题:简述一下mysql主从延迟的各种原因



  1. 网络延迟:主从服务器之间的网络传输延迟导致数据同步延迟。
  2. 主库负载过高:主库的负载过高导致数据同步速度变慢。
  3. 从库配置不足:从库的硬件配置不足导致同步速度跟不上主库写入速度。
  4. 大事务:主库上发生的大事务可能会导致复制延迟,因为事务必须完全复制到从库才能进行提交。


第十一题:简述一下如何判断主从延迟



  1. 使用SHOW SLAVE STATUS命令查看从库的状态信息,其中Seconds_Behind_Master字段显示了从库与主库的延迟时间(单位为秒)。
  2. 监控主从复制的延迟情况,可以使用监控工具或脚本定时查询Seconds_Behind_Master字段的值,并根据条件判断延迟是否达到预期的阈值。


第十二题:简述一下mysql备份和恢复方法



  1. 使用mysqldump命令进行备份和恢复:通过导出和导入SQL文件的方式进行备份和恢复。
  2. 使用物理备份和恢复工具(如Percona XtraBackup):可以进行全量备份和增量备份,并支持快速恢复。
  3. 使用主从复制:将主库作为备份源,通过复制从库来实现备份和恢复。
  4. 使用第三方备份工具:如MySQL Enterprise Backup、mydumper等。


第十三题:简述一下数据库的几个缓存服务器



  1. Redis:开源的内存数据库,支持键值对存储和多种数据结构操作,具有高速读写和持久化功能。
  2. Memcached:开源的分布式内存对象缓存系统,用于加速动态数据库驱动的网站。
  3. Aerospike:高性能的分布式NoSQL数据库,具有灵活的数据模型和多种查询方式。
  4. Couchbase:基于Memcached和CouchDB的混合型缓存数据库,具有高性能和灵活性。
  5. Hazelcast:开源的分布式内存数据网格,提供分布式数据存储和计算能力。


第十四题:简述一下 ' 和 " 引号的区别



  • 单引号('):字符串中的内容会被原样输出,不会进行变量替换或转义字符处理。
  • 双引号("):字符串中的内容会进行变量替换和转义字符处理。


例如,在双引号中可以使用$var格式来引用变量,而在单引号中直接输出$var字符。


第十五题:简述一下 $? 表示什么意思



$?表示上一个命令的退出状态(返回码)。


  • 如果命令执行成功,退出状态为0。
  • 如果命令执行失败,退出状态为非零值,通常用于表示不同类型的错误。


通过检查$?的值,可以判断上一个命令是否执行成功,从而根据情况采取相应的处理。


第十六题:如何使用 awk 列出 UID 小于 100 的用户



awk -F: '$3 < 100 { print $1 }' /etc/passwd

该命令将以:为分隔符,以第3个字段(UID)小于100的行中的第1个字段(用户名)进行输出。


第十七题:如何获取一个文件每一行的第三个元素



awk '{ print $3 }' 文件名

将文件名替换为你要处理的文件名,该命令将输出文件中每一行的第三个元素。


第十八题:找到一个网段内存活的ip,并存放到一个文件内,写出具体的shell脚本



#!/bin/bash
subnet="192.168.0"
for i in {1..255}; do
ip=$subnet.$i
if ping -c 1 -w 1 $ip >/dev/null; then
echo $ip >> alive_ips.txt
fi
done

将subnet变量替换为指定的网段,保存脚本为.sh文件,通过命令chmod +x script.sh赋予执行权限,执行脚本后,存活的IP地址将被追加到alive_ips.txt文件中。


第十九题:Shell循环语句有哪些



  1. for循环:用于指定一个列表,然后对列表中的每个元素执行特定的操作。
  2. while循环:在指定条件为真(非零)的情况下执行一系列命令。
  3. until循环:在指定条件为假(零)的情况下执行一系列命令。
  4. select循环:用于创建菜单,让用户进行选择。
  5. foreach循环:用于遍历指定对象的集合。


第二十题:1到10数字相加,写出shell脚本



#!/bin/bash
sum=0
for ((i=1; i<=10; i++)); do
sum=$((sum + i))
done
echo $sum


第二十一题:用sed修改test.txt的23行test为tset



sed -i '23s/test/tset/' test.txt

该命令将在文件test.txt的第23行中将"test"替换为"tset",并将修改写入原文件。


第二十二题:简述一下except的用法和作用



except是一个Python语言中的关键字,用于捕获和处理异常,用法和作用如下:


  • 用法:except关键字后跟一个异常类型,用于捕获指定类型的异常。
  • 作用:当try语句块中发生指定类型的异常时,对应的except语句块将被执行,用于处理异常情况,防止程序终止并提供错误处理逻辑。


相关文章
|
2月前
|
存储 关系型数据库 MySQL
RDS MySQL 数据库运维简述
从运维的视角,汇总云数据库RDS MySQL使用的避坑指南。文章初版,维护更新,欢迎指点。
811 3
|
4月前
|
NoSQL 算法 大数据
国内首个图计算标准发布,悦数图数据库通过测试
近日,经中国通信标准化协会批准,《大数据图计算平台技术要求与测试方法》标准正式发布,这是我国首个图计算平台标准,为图计算平台的发展提供了一个标准化的指导方针,对于推动我国图技术的发展具有重要意义。
|
2月前
|
网络协议 Shell Linux
【Shell 命令集合 网络通讯 】⭐⭐⭐Linux 测试与目标主机之间的网络连接ping 命令 使用指南
【Shell 命令集合 网络通讯 】⭐⭐⭐Linux 测试与目标主机之间的网络连接ping 命令 使用指南
47 1
|
8天前
|
SQL 运维 监控
如何做数据库自动化运维
【5月更文挑战第5天】IT运维中的DBA面临诸多挑战,包括库表设计规范落地困难、SQL审核繁琐、数据提取需求频繁、资源管理和监控复杂。为解决这些问题,引入数据库自动化运维平台至关重要。该平台实现SQL审核自动化,确保语句规范和安全,支持数据提取的自助服务,强化元数据管理,提供一键资源部署,并进行全面的数据库监控。这样,DBA的角色转变为平台管理者,提高效率,规范化流程,减轻工作负担。
|
13天前
|
运维 Prometheus 监控
矢量数据库系统监控与运维:确保稳定运行的关键要素
【4月更文挑战第30天】本文探讨了确保矢量数据库系统稳定运行的监控与运维关键要素。监控方面,关注响应时间、吞吐量、资源利用率和错误率等指标,使用Prometheus等工具实时收集分析,并有效管理日志。运维上,强调备份恢复、性能调优、安全管理和自动化运维。关键成功因素包括建立全面监控体系、科学的运维策略、提升运维人员技能和团队协作。通过这些措施,可保障矢量数据库系统的稳定运行,支持业务发展。
|
13天前
|
存储 大数据 测试技术
矢量数据库的性能测试与评估方法
【4月更文挑战第30天】本文探讨了矢量数据库的性能测试与评估方法,强调其在大数据和AI时代的重要性。文中介绍了负载测试、压力测试、容量测试、功能测试和稳定性测试五大评估方法,以及实施步骤,包括确定测试目标、设计用例、准备环境、执行测试和分析结果。这些方法有助于确保数据库的稳定性和高效性,推动技术发展。
|
19天前
|
SQL 关系型数据库 MySQL
stream-query多数据库进行CI测试
stream-query多数据库进行CI测试
15 0
|
2月前
|
存储 Shell Linux
【Shell 命令集合 文件管理】Linux 文本处理工具 awk命令使用指南
【Shell 命令集合 文件管理】Linux 文本处理工具 awk命令使用指南
44 0
|
2月前
|
弹性计算 分布式计算 DataWorks
DataWorks报错问题之ecs自建数据库连通性测试报错如何解决
DataWorks是阿里云提供的一站式大数据开发与管理平台,支持数据集成、数据开发、数据治理等功能;在本汇总中,我们梳理了DataWorks产品在使用过程中经常遇到的问题及解答,以助用户在数据处理和分析工作中提高效率,降低难度。
|
2月前
|
SQL 消息中间件 Kafka
Apache Hudi测试、运维操作万字总结
Apache Hudi测试、运维操作万字总结
86 1