mysql批量创建数据库 导数据

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介:
  由于近来需要从其它机器拉一堆数据到一台机器上做数据分析,由于涉及到数据库比较,数据也不大不小的,要手工一个一倒腾真是累的半死,于是弄了个脚本
实现功能,根据指定文件下的数据库文件命令格式,
str=1234_`date +%y%m%d%H%M`.gz
echo "开始备份..."`date`
mysqldump -uroot -pxxxxxx--quick --add-drop-table --extended-insert qeedoo | gzip > $str
echo "备份完毕..."`date`
这是相关的数据库备份脚本由于名称的有一个特点即_`date +%y%m%d%H%M`.gz从_开始后面的都相同,前面的话有纯数字的组成也有字母跟数字,数字与字母。
因为涉及到mysql的问题,即mysql不能以纯数字的命令一个数据库,所以操作步骤如下:
一、提取相关数据库备份文件的名称
二、以纯数字为前缀的给他加上后缀com
二、创建数据库导入数据
 
由于以前手工导过数据,但这些数据都没有用了,所以现在需要先批量drop相关库
for i in `cat mysqldata`
do
mysql   -u   root   <<QUERY_SQL
         DROP      DATABASE    IF         EXISTS     $i;
QUIT   
QUERY_SQL
done
从mysqldata文件里取到相关数据库的名,如果存在删掉,记得如果需要保留的数据库需要拿掉不在放在mysqldata文件里,这里面的数据库是show databases 出来的
 
好了进入正题。
 
echo "type  your data path!"
read path
for sqldata in `ls $path`
gunzip $sqldata
do
str=`echo ${sqldata%_*}`  #取_之前的字符串
name=`echo ${sqldata%.*}` #把.gz后缀去掉
echo $str #打印正在处理的数据库 
expr $str + 0 1>/dev/null 2>1 #用_之前的字符串进行expr运算
if [ $? -eq 0 ];then #通过判断返回值确认_之前的字符串是否为纯数字
str1=${str}com #为数字时添加后缀com
else    
str1=${str} 
fi          
 
#进入mysql处理
mysql   -u   root   <<QUERY_SQL  
#如果有密码可以用mysql -uroot -pxxxx <<QUERY_SQL
       DROP      DATABASE    IF         EXISTS     $str1;
        create database   $str1;
        use $str1;
        source $path/$name;
QUIT   
QUERY_SQL
#echo $$   #打印出正在运行的进程号如果不小心进入了死循环直接kill -9 该进程号就可以了当然也可以用ps -ef过滤出来看
done
 
 
记得由于是直接处理字符串的,在进入的path目录里只允许有相关的数据库文件,因为如你在该目录下建了a b之类的该脚本也会例行处理

本文转自 qwjhq 51CTO博客,原文链接:http://blog.51cto.com/bingdian/187613
相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
12天前
|
关系型数据库 MySQL 数据库
Python处理数据库:MySQL与SQLite详解 | python小知识
本文详细介绍了如何使用Python操作MySQL和SQLite数据库,包括安装必要的库、连接数据库、执行增删改查等基本操作,适合初学者快速上手。
81 15
|
5天前
|
SQL 关系型数据库 MySQL
数据库数据恢复—Mysql数据库表记录丢失的数据恢复方案
Mysql数据库故障: Mysql数据库表记录丢失。 Mysql数据库故障表现: 1、Mysql数据库表中无任何数据或只有部分数据。 2、客户端无法查询到完整的信息。
|
7天前
|
存储 关系型数据库 MySQL
mysql怎么查询longblob类型数据的大小
通过本文的介绍,希望您能深入理解如何查询MySQL中 `LONG BLOB`类型数据的大小,并结合优化技术提升查询性能,以满足实际业务需求。
36 6
|
1月前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
本文介绍了MySQL InnoDB存储引擎中的数据文件和重做日志文件。数据文件包括`.ibd`和`ibdata`文件,用于存放InnoDB数据和索引。重做日志文件(redo log)确保数据的可靠性和事务的持久性,其大小和路径可由相关参数配置。文章还提供了视频讲解和示例代码。
141 11
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
|
12天前
|
关系型数据库 MySQL 数据库
数据库数据恢复—MYSQL数据库文件损坏的数据恢复案例
mysql数据库文件ibdata1、MYI、MYD损坏。 故障表现:1、数据库无法进行查询等操作;2、使用mysqlcheck和myisamchk无法修复数据库。
|
16天前
|
SQL 关系型数据库 MySQL
MySQL导入.sql文件后数据库乱码问题
本文分析了导入.sql文件后数据库备注出现乱码的原因,包括字符集不匹配、备注内容编码问题及MySQL版本或配置问题,并提供了详细的解决步骤,如检查和统一字符集设置、修改客户端连接方式、检查MySQL配置等,确保导入过程顺利。
|
19天前
|
SQL 关系型数据库 MySQL
mysql分页读取数据重复问题
在服务端开发中,与MySQL数据库进行数据交互时,常因数据量大、网络延迟等因素需分页读取数据。文章介绍了使用`limit`和`offset`参数实现分页的方法,并针对分页过程中可能出现的数据重复问题进行了详细分析,提出了利用时间戳或确保排序规则绝对性等解决方案。
|
24天前
|
关系型数据库 MySQL 数据库
GBase 数据库如何像MYSQL一样存放多行数据
GBase 数据库如何像MYSQL一样存放多行数据
|
1月前
|
缓存 NoSQL 关系型数据库
Redis和Mysql如何保证数据⼀致?
在项目中,为了解决Redis与Mysql的数据一致性问题,我们采用了多种策略:对于低一致性要求的数据,不做特别处理;时效性数据通过设置缓存过期时间来减少不一致风险;高一致性但时效性要求不高的数据,利用MQ异步同步确保最终一致性;而对一致性和时效性都有高要求的数据,则采用分布式事务(如Seata TCC模式)来保障。
64 14
|
1月前
|
SQL 关系型数据库 MySQL
12 PHP配置数据库MySQL
路老师分享了PHP操作MySQL数据库的方法,包括安装并连接MySQL服务器、选择数据库、执行SQL语句(如插入、更新、删除和查询),以及将结果集返回到数组。通过具体示例代码,详细介绍了每一步的操作流程,帮助读者快速入门PHP与MySQL的交互。
39 1
下一篇
DataWorks