1、处理重复数据
1.1、防止表中出现重复数据
- 可以在 MySQL 数据表中设置指定的字段为 PRIMARY KEY(主键) 或者 UNIQUE(唯一) 索引来保证数据的唯一性。
- 设置表中字段数据不能重复,可以设置双主键模式来设置数据的唯一性, 如果你设置了双主键,那么那个键的默认值不能为 NULL,可设置为 NOT NULL
- NSERT IGNORE INTO 与 INSERT INTO 的区别:
INSERT IGNORE:会忽略数据库中已经存在的数据,如果数据库没有数据,就插入新的数据,如果有数据的话就跳过这条数据。这样就可以保留数据库中已经存在数据,达到在间隙中插入数据的目的
- INSERT IGNORE INTO和 REPLACE INTO区别:
INSERT IGNORE INTO:当插入数据时,在设置了记录的唯一性后,如果插入重复数据,将不返回错误,只以警告形式返回。
REPLACE INTO :如果存在primary 或 unique 相同的记录,则先删除掉。再插入新记录。
1.2、统计重复数据
统计study_tb8中name、old、sex出现的重读记录数
查询重复的值,操作步骤:
确定哪一列包含的值可能会重复;
在列选择列表使用COUNT(*)列出的那些列;
在GROUP BY子句中列出的列;
HAVING子句设置重复数大于1。
1.3、过滤重复数据
读取不重复的数据可以在 SELECT 语句中使用 DISTINCT 关键字来过滤重复数据。
1.4、读取不重复数据
使用 GROUP BY 来读取数据表中不重复的数据
1.5、删除重复数据
也可以在数据表中添加 INDEX(索引) 和 PRIMAY KEY(主键)这种简单的方法来删除表中的重复记录
2、SQL 注入
略(后续单独补充,SQL注入安全问题)
3、导出数据
MySQL中你可以使用SELECT...INTO OUTFILE语句来简单的导出数据到文本文件上
3.1、使用 SELECT ... INTO OUTFILE 语句导出数据
将sutdy_tb1中的数据导出到my_study_tb1.txt中
结果还是报错,最终找到答案https://blog.csdn.net/NoamaNelson/article/details/105712193
3.1.1、SELECT ... INTO OUTFILE 语句有以下属性
- LOAD DATA INFILE是SELECT ... INTO OUTFILE的逆操作,SELECT句法。为了将一个数据库的数据写入一个文件,使用SELECT ... INTO OUTFILE,为了将文件读回数据库,使用LOAD DATA INFILE。
- SELECT...INTO OUTFILE 'file_name'形式的SELECT可以把被选择的行写入一个文件中。该文件被创建到服务器主机上,因此您必须拥有FILE权限,才能使用此语法。
- 输出不能是一个已存在的文件。防止文件数据被篡改。
- 你需要有一个登陆服务器的账号来检索文件。否则 SELECT ... INTO OUTFILE 不会起任何作用。
- 在UNIX中,该文件被创建后是可读的,权限由MySQL服务器所拥有。这意味着,虽然你就可以读取该文件,但可能无法将其删除。
3.2、导出 SQL 格式的数据
3.3、导出表作为原始数据
- mysqldump 是 mysql 用于转存储数据库的实用程序。它主要产生一个 SQL 脚本,其中包含从头重新创建数据库所必需的命令 CREATE TABLE INSERT
- 使用 mysqldump 导出数据需要使用 --tab 选项来指定导出文件指定的目录,该目标必须是可写的。
3.4、将数据表及数据库拷贝至其他主机
你也可以使用以下命令将导出的数据直接导入到远程的服务器上,但请确保两台服务器是相通的,是可以相互访问的:
mysqldump -u root -p database_name | mysql -h other-host.com database_name
4、导入数据
4.1、mysql 命令导入
同3.4示例
mysql -u用户名 -p密码 < 要导入的数据库数据(runoob.sql)
4.2、source 命令导入
4.3、使用 LOAD DATA 导入数据
4.4、使用 mysqlimport 导入数据
mysqlimport -u root -p --local databasename 文件名
mysqlimport的常用选项介绍:
选项 | 功能 |
---|---|
-d or --delete | 新数据导入数据表中之前删除数据数据表中的所有信息 |
-f or --force | 不管是否遇到错误,mysqlimport将强制继续插入数据 |
-i or --ignore | mysqlimport跳过或者忽略那些有相同唯一 关键字的行, 导入文件中的数据将被忽略。 |
-l or -lock-tables | 数据被插入之前锁住表,这样就防止了, 你在更新数据库时,用户的查询和更新受到影响。 |
-r or -replace | 这个选项与-i选项的作用相反;此选项将替代 表中有相同唯一关键字的记录。 |
--fields-enclosed- by= char | 指定文本文件中数据的记录时以什么括起的, 很多情况下 数据以双引号括起。 默认的情况下数据是没有被字符括起的。 |
--fields-terminated- by=char | 指定各个数据的值之间的分隔符,在句号分隔的文件中, 分隔符是句号。您可以用此选项指定数据之间的分隔符。 默认的分隔符是跳格符(Tab) |
--lines-terminated- by=str | 此选项指定文本文件中行与行之间数据的分隔字符串 或者字符。 默认的情况下mysqlimport以newline为行分隔符。 您可以选择用一个字符串来替代一个单个的字符: 一个新行或者一个回车。 |
mysqlimport 命令常用的选项还有 -v 显示版本(version), -p 提示输入密码(password)