InnoDB memcached插件部署

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介:

MySQL 5.6开始支持InnoDB memcached插件,也就是可以通过SQL高效读写memcached里的缓存内容,也支持用原生的memcache协议读写,并且可以实现缓存数据持久化,以及crash recovery、mysql replication、触发器、存储过程等众多特性。

 

官网手册:14.18 InnoDB Integration with memcached

 

1. 编译安装MySQL前的准备工作

安装编译源码所需的工具和库:

1
yum  install  gcc gcc-c++ ncurses-devel perl –y

 

安装cmake,从http://www.cmake.org下载源码并编译安装:

1
2
3
4
5
6
cd  /tmp
wget http: //www .cmake.org /files/v3 .2 /cmake-3 .2.2. tar .gz
tar  zxvf cmake-3.2.2. tar .gz
cd  cmake-3.2.2
. /bootstrap
make  &&  make  install

 

2. 设置MySQL用户和组

新增mysql用户组:

1
groupadd mysql

 

新增mysql用户:

1
useradd  -r -g mysql mysql

 

3. 新建MySQL所需目录

新建mysql安装目录:

1
mkdir  -p  /usr/local/mysql

 

新建mysql数据文件目录:

1
mkdir  -p  /data/mysql/data

 

新建mysql日志文件目录:

1
mkdir  -p  /data/mysql/log

 

4. 下载MySQL源码包并解压

从http://dev.mysql.com/downloads/mysql/直接下载源码,解压mysql-5.6.24.tar.gz:

1
2
3
4
cd  /tmp
wget http: //dev .mysql.com /get/Downloads/MySQL-5 .6 /mysql-5 .6.24. tar .gz
tar  zxvf mysql-5.6.24. tar .gz
cd  mysql-5.6.24

 

5. 编译安装MySQL

从mysql5.5起,mysql源码安装开始使用cmake了,设置源码编译配置脚本。

 

-DCMAKE_INSTALL_PREFIX=dir_name

设置mysql安装目录

-DMYSQL_UNIX_ADDR=file_name

设置监听套接字路径,这必须是一个绝对路径名。默认为/tmp/mysql.sock

-DDEFAULT_CHARSET=charset_name

设置服务器的字符集。             
缺省情况下,MySQL使用latin1的(CP1252西欧)字符集。cmake/character_sets.cmake文件包含允许的字符集名称列表。

-DDEFAULT_COLLATION=collation_name

设置服务器的排序规则。

-DWITH_INNOBASE_STORAGE_ENGINE=1  
-DWITH_ARCHIVE_STORAGE_ENGINE=1              
-DWITH_BLACKHOLE_STORAGE_ENGINE=1  
-DWITH_PERFSCHEMA_STORAGE_ENGINE=1

存储引擎选项:             
MyISAM,MERGE,MEMORY,和CSV引擎是默认编译到服务器中,并不需要明确地安装。              
静态编译一个存储引擎到服务器,使用-DWITH_engine_STORAGE_ENGINE= 1              
可用的存储引擎值有:ARCHIVE, BLACKHOLE, EXAMPLE, FEDERATED, INNOBASE (InnoDB), PARTITION (partitioning support), 和PERFSCHEMA (Performance Schema)

-DMYSQL_DATADIR=dir_name

设置mysql数据库文件目录

-DMYSQL_TCP_PORT=port_num

设置mysql服务器监听端口,默认为3306

-DENABLE_DOWNLOADS=bool

是否要下载可选的文件。例如,启用此选项(设置为1),cmake将下载谷歌所使用的测试套件运行单元测试。

 

下文翻译自MySQL手册InnoDB memcached插件部分:

如果从源代码编译安装,libevent 1.4.3集成在安装包中,位于MySQL源代码目录的最上层。如果你使用libevent的集成版本,无须做任何操作。如果你想使用使用libevent的一个本地版本,你必须将-DWITH_LIBEVENT编译选项设置为system或yes来编译MySQL。

当从源码编译MySQL服务器,你必须设置编译选项-DWTIH_INNODB_MEMCACHED=ON.

 

在重新配置或重新构建之前,需要先清除旧的对象文件和缓存信息,方法如下:

1
2
make  clean
rm  -rf CMakeCache.txt

 

设置编译参数:

1
2
3
4
5
6
7
8
9
10
11
12
13
cmake . \
-DCMAKE_INSTALL_PREFIX= /usr/local/mysql  \
-DMYSQL_UNIX_ADDR= /usr/local/mysql/mysql .sock \
-DDEFAULT_CHARSET=utf8 \
-DDEFAULT_COLLATION=utf8_general_ci \
-DWITH_INNOBASE_STORAGE_ENGINE=1 \
-DWITH_PARTITION_STORAGE_ENGINE=1 \
-DWITH_ARCHIVE_STORAGE_ENGINE=1 \
-DWITH_BLACKHOLE_STORAGE_ENGINE=1 \
-DMYSQL_DATADIR= /data/mysql/data  \
-DMYSQL_TCP_PORT=3306 \
-DENABLE_DOWNLOADS=1 \
-DWITH_INNODB_MEMCACHED=ON

 

查看CMakeCache.txt中相关参数设置:

1
grep  "WITH_INNODB_MEMCACHED"  CMakeCache.txt

 

编译源码:

1
make

 

安装:

1
make  install

6. 修改mysql目录所有者和组

 

修改mysql安装目录:

1
2
cd  /usr/local/mysql
chown  -R mysql:mysql .

 

修改mysql数据文件目录:

1
2
cd  /data/mysql/
chown  -R mysql:mysql .

7. 初始化mysql数据库

 

1
2
cd  /usr/local/mysql
. /scripts/mysql_install_db  --user=mysql --datadir= /data/mysql/data

8. 复制并修改mysql服务启动配置文件

 

1
cp  /usr/local/mysql/support-files/my-default .cnf  /etc/my .cnf

 

注:如果/etc/my.cnf文件存在,则覆盖。

 

1
vi  /etc/my .cnf

修改配置文件的相关设置。

9. 复制mysql服务启动脚本及加入PATH路径

 

1
2
cp  support-files /mysql .server  /etc/init .d /mysqld
vim  /etc/profile

PATH=/usr/local/mysql/bin:/usr/local/mysql/lib:$PATH

export PATH

1
source  /etc/profile

10. 启动mysql服务并加入开机自启动

 

1
2
service mysqld start
chkconfig --level 35 mysqld on

11. 检查mysql服务是否启动

 

1
2
netstat  -tulnp |  grep  3306
mysql -u root -p

 

密码为空,如果能登陆上,则安装成功。

12. 修改MySQL用户root的密码

 

1
mysqladmin -u root password  '123456'

 

注:也可运行安全设置脚本,修改MySQL用户root的密码,同时可禁止root远程连接,移除test数据库和匿名用户。

 

1
/usr/local/mysql/bin/mysql_secure_installation

13. 查看插件目录

 

1
2
3
4
5
6
7
mysql>  select  @@plugin_dir;
+ ------------------------------+
| @@plugin_dir |
+ ------------------------------+
| /usr/ local /mysql/lib/plugin/ |
+ ------------------------------+
1 row  in  set  (0.00 sec)

14. 确认插件目录下的文件

 

1
cd  /usr/local/mysql/lib/plugin/

 

在插件目录我们能看到innodb_engine.so和libmemcached.so

15. 导入memcached插件所需表结构

 

1
mysql> SOURCE /usr/ local /mysql/share/innodb_memcached_config.sql

16. 安装memcached插件

 

1
mysql> INSTALL PLUGIN daemon_memcached soname  "libmemcached.so" ;

 

相应的卸载语句为:

 

mysql> UNINSTALL PLUGIN daemon_memcached;

17. 查看或修改相关memcached插件配置

 

1
2
3
4
5
6
7
8
9
10
11
12
mysql> SHOW VARIABLES  LIKE  '%memcached%' ;
+ ----------------------------------+------------------+
| Variable_name | Value |
+ ----------------------------------+------------------+
| daemon_memcached_enable_binlog |  OFF  |
| daemon_memcached_engine_lib_name | innodb_engine.so |
| daemon_memcached_engine_lib_path | |
| daemon_memcached_option | |
| daemon_memcached_r_batch_size | 1 |
| daemon_memcached_w_batch_size | 1 |
+ ----------------------------------+------------------+
rows  in  set  (0.00 sec)

 

注意:daemon_memcached_r_batch_size和daemon_memcached_w_batch_size,这两个选项对性能影响较大,简单点说就是控制事务提交的频率,MySQL的缺省值均为1,也就是说每次都提交,这主要是从安全性考虑的,大家可以依照自己的情况来调整。

 

大家可以在/etc/my.cnf配置文件中修改相关memcached插件的配置参数,可以参考之前的博文《安装和配置InnoDB memcached插件》

 

18. 验证memcached插件

 

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
[root@mongo01 plugin] # telnet localhost 11211
Trying ::1...
Connected to localhost.
Escape character is  '^]' .
stats
STAT pid 29397
STAT uptime 881
STAT  time  1430385384
STAT version 5.6.24
STAT libevent 5.6.24
STAT pointer_size 64
STAT rusage_user 0.598908
STAT rusage_system 0.810876
STAT daemon_connections 2
STAT curr_connections 3
STAT total_connections 3
STAT connection_structures 3
STAT cmd_get 0
STAT cmd_set 0
STAT cmd_flush 0
STAT auth_cmds 0
STAT auth_errors 0
STAT get_hits 0
STAT get_misses 0
STAT delete_misses 0
STAT delete_hits 0
STAT incr_misses 0
STAT incr_hits 0
STAT decr_misses 0
STAT decr_hits 0
STAT cas_misses 0
STAT cas_hits 0
STAT cas_badval 0
STAT bytes_read 7
STAT bytes_written 0
STAT limit_maxbytes 67108864
STAT accepting_conns 1
STAT listen_disabled_num 0
STAT rejected_conns 0
STAT threads 4
STAT conn_yields 0
STAT evictions 0
STAT curr_items 0
STAT total_items 0
STAT bytes 0
STAT reclaimed 0
STAT engine_maxbytes 67108864
END

 

换句话说,MySQL已经兼容Memcached协议,可以直接使用Memcached命令。


问题汇总:


问题:

Starting MySQL..The server quit without updating PID file ([FAILED]/mysql/Server03.mylinux.com.pid).

解决:

修改/etc/mysql/my.cnf 中datadir,指向正确的mysql数据库文件目录。


问题:

ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/tmp/mysql.sock' (2)

解决:

新建一个链接或在mysql中加入-S参数,直接指出mysql.sock位置。

ln -s /usr/local/mysql/data/mysql.sock /tmp/mysql.sock

/usr/local/mysql/bin/mysql -u root -S /usr/local/mysql/data/mysql.sock

















本文转自UltraSQL51CTO博客,原文链接: http://blog.51cto.com/ultrasql/1640997,如需转载请自行联系原作者



相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
6月前
|
弹性计算 运维 Shell
一键部署 memcached
【4月更文挑战第29天】
41 1
|
6月前
|
弹性计算 运维 Shell
一键部署memcached
【4月更文挑战第29天】
33 0
|
运维 监控
Zabbix监控插件-Nginx、TCP、Redis、Memcached
2014年写的zabbix监控插件,主要监控TCP的11种状态,Nginx的状态,Redis的和Memcached的状态。
326 0
Zabbix监控插件-Nginx、TCP、Redis、Memcached
|
关系型数据库 MySQL Linux
|
Web App开发 关系型数据库 应用服务中间件
|
关系型数据库 MySQL Linux
|
关系型数据库 MySQL Memcache
|
存储 算法 关系型数据库