centos6.5下安装mfs分布式存储

简介:

MFS文件系统的组成

1、  元数据服务器。在整个体系中负责管理管理文件系统,目前MFS只支持一个元数据服务器master,这是一个单点故障,需要一个性能稳定的服务器来充当。希望今后MFS能支持多个master服务器,进一步提高系统的可靠性。

2、  数据存储服务器chunkserver。真正存储用户数据的服务器。存储文件时,首先把文件分成块,然后这些块在数据服务器chunkserver之间复制(复制份数可以手工指定,建议设置副本数为3)。数据服务器可以是多个,并且数量越多,可使用的“磁盘空间”越大,可靠性也越高。

3、  元数据日志服务器Metalogger server(Metalogger):负责备份master服务器的变化日志文件,文件类型为changelog_ml.*.mfs,以便于在master server出问题的时候接替其进行工作。

4、  客户端。使用MFS文件系统来存储和访问的主机称为MFS的客户端,成功挂接MFS文件系统以后,就可以像以前使用NFS一样共享这个虚拟性的存储了。



环境:mfsmaster:192.168.50.119

    mfschunk,mfslogger,mfsclient: 192.168.50.120


一、mfsmaster安装配置

1.创建安装用户

1
2
3
4
5
useradd  mfs -s  /sbin/nologin
2.安装
tar  -xf mfs-1.6.27-5. tar .gz &&  cd   mfs-1.6.27
. /configure  --prefix= /usr/local/mfs  --with-default-user=mfs --with-default-group=mfs
make  &&  make  install

3.配置文件

1
2
3
4
cd  /usr/local/mfs/etc/mfs/
cp  mfsmaster.cfg.dist  mfsmaster.cfg
cp  mfsexports.cfg.dist  mfsexports.cfg
cp  /usr/local/mfs/var/mfs/metadata .mfs.empty   /usr/local/mfs/var/mfs/metadata .mfs

4.启动元数据服务器

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
/usr/local/mfs/sbin/mfsmaster  start
working directory:  /usr/local/mfs/var/mfs
lockfile created and locked
initializing mfsmaster modules ...
loading sessions ... ok
sessions  file  has been loaded
exports  file  has been loaded
mfstopology configuration  file  ( /usr/local/mfs/etc/mfstopology .cfg) not found - using defaults
loading metadata ...
loading objects (files,directories,etc.) ... ok
loading names ... ok
loading deletion timestamps ... ok
loading chunks data ... ok
checking filesystem consistency ... ok
connecting files and chunks ... ok
all inodes: 1
directory inodes: 1
file  inodes: 0
chunks: 0
metadata  file  has been loaded
stats  file  has been loaded
master <-> metaloggers module: listen on *:9419
master <-> chunkservers module: listen on *:9420
main master server module: listen on *:9421
mfsmaster daemon initialized properly


5.启动web页面

1
2
/usr/local/mfs/sbin/mfscgiserv  start         #开启WEB监控页面进程
http: //ip :9425查看mfs系统状态

wKiom1g_m32BKcqzAADY-sLVleQ808.png

6.开机启动

1
2
echo  "/usr/local/mfs/sbin/mfsmaster start"  /etc/rc . local
echo  "/usr/local/mfs/sbin/mfscgiserv"  /etc/rc . local

7.检查进程

1
2
3
4
[root@localhost mfs] # ps -ef | grep mfs
mfs        6556      1  0 03:20 ?        00:00:04  /usr/local/mfs/sbin/mfsmaster  start
root       6582      1  0 03:23 ?        00:00:00 python  /usr/local/mfs/sbin/mfscgiserv
root       6625   1692  0 04:39 pts /0     00:00:00  grep  mfs

二、mfschunk,mfslogger,mfsclient服务器配置


1.创建安装用户

1
useradd  mfs -s  /sbin/nologin

2.安装

1
2
3
4
5
yum -y  install  fuse fuse-devel
tar  -xf mfs-1.6.27-5. tar .gz &&  cd   mfs-1.6.27
. /configure  --prefix= /usr/local/mfs  --with-default-user=mfs --with-default-group=mfs -- enable -mfsmount
make  &&  make  install
chown  -R mfs.mfs  /usr/local/mfs/


3.配置文件

1
2
3
4
cd  /usr/local/mfs/etc/mfs/
cp  mfschunkserver.cfg.dist  mfschunkserver.cfg
cp  mfshdd.cfg.dist  mfshdd.cfg
cp  mfsmetalogger.cfg.dist  mfsmetalogger.cfg


4.修改配置文件

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
[root@localhost mfs] # cat mfschunkserver.cfg
# WORKING_USER = mfs
# WORKING_GROUP = mfs
# SYSLOG_IDENT = mfschunkserver
# LOCK_MEMORY = 0
# NICE_LEVEL = -19
# DATA_PATH = /usr/local/mfs/var/mfs
# MASTER_RECONNECTION_DELAY = 5
# BIND_HOST = *
MASTER_HOST = 192.168.50.119
MASTER_PORT = 9420
# MASTER_TIMEOUT = 60
# CSSERV_LISTEN_HOST = *
# CSSERV_LISTEN_PORT = 9422
# HDD_CONF_FILENAME = /usr/local/mfs/etc/mfs/mfshdd.cfg
# HDD_TEST_FREQ = 10
# deprecated, to be removed in MooseFS 1.7
# LOCK_FILE = /var/run/mfs/mfschunkserver.lock
# BACK_LOGS = 50
# CSSERV_TIMEOUT = 5
1
2
3
[root@localhost mfs] # cat mfshdd.cfg
# mount points of HDD drives
/usr/local/mfsdata/    #mfschunkserver上的分区,必须是独立分区!
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
[root@localhost mfs] # cat mfsmetalogger.cfg
# WORKING_USER = mfs
# WORKING_GROUP = mfs
# SYSLOG_IDENT = mfsmetalogger
# LOCK_MEMORY = 0
# NICE_LEVEL = -19
# DATA_PATH = /usr/local/mfs/var/mfs
# BACK_LOGS = 50
# BACK_META_KEEP_PREVIOUS = 3
META_DOWNLOAD_FREQ = 1
# MASTER_RECONNECTION_DELAY = 5
MASTER_HOST = 192.168.50.119
MASTER_PORT = 9419
# MASTER_TIMEOUT = 60
# deprecated, to be removed in MooseFS 1.7
# LOCK_FILE = /var/run/mfs/mfsmetalogger.lock



5.启动服务

1
2
3
4
5
6
7
8
9
[root@localhost mfs] # /usr/local/mfs/sbin/mfschunkserver  start
working directory:  /usr/local/mfs/var/mfs
lockfile created and locked
initializing mfschunkserver modules ...
hdd space manager: path to scan:  /usr/local/mfsdata/
hdd space manager: start background hdd scanning (searching  for  available chunks)
main server module: listen on *:9422
no charts data  file  - initializing empty charts
mfschunkserver daemon initialized properly


1
2
3
4
5
[root@localhost mfs] # /usr/local/mfs/sbin/mfsmetalogger  start
working directory:  /usr/local/mfs/var/mfs
lockfile created and locked
initializing mfsmetalogger modules ...
mfsmetalogger daemon initialized properly



6.创建数据目录

1
2
mkdir  /usr/local/mfsdata/
chown  -R mfs.mfs  /usr/local/mfsdata/


这里需要一块新磁盘挂载到数据目录

1
mount  /dev/sdb1   /usr/local/mfsdata/


7.创建挂载目录

1
2
mkdir  /mnt/mfs
chown  -R mfs.mfs  /mnt/mfs/


8.挂载目录

1
2
[root@localhost mfsdata] # /usr/local/mfs/bin/mfsmount  /mnt/mfs/ -H 192.168.50.119   #挂载成功
mfsmaster accepted connection with parameters:  read -write,restricted_ip ; root mapped to root:root
1
2
3
4
5
6
7
[root@localhost ~] # df 
Filesystem                   1K-blocks    Used Available Use% Mounted on
/dev/mapper/VolGroup-lv_root   19166504 1322824  16870064   8% /
tmpfs                           243140       0    243140   0%  /dev/shm
/dev/sda1                        495844   32672    437572   7%  /boot
/dev/sdb1                      10317828  155256   9638456   2%  /usr/local/mfsdata
192.168.50.119:9421            9376256       0   9376256   0%  /mnt/mfs


本文转自 shouhou2581314 51CTO博客,原文链接:http://blog.51cto.com/thedream/1878406,如需转载请自行联系原作者
相关文章
|
2月前
|
存储 安全 Linux
CentOS安装SeaweedFS
通过上述步骤,您应该能够在CentOS系统上成功安装并启动SeaweedFS。记住,根据实际部署规模和需求,可能还需要进一步调整配置参数和优化网络布局。SeaweedFS的灵活性和扩展性意味着随着使用深入,您可能需要探索更多高级配置和管理策略。
107 64
|
2月前
|
存储 安全 Linux
CentOS安装SeaweedFS
通过上述步骤,您应该能够在CentOS系统上成功安装并启动SeaweedFS。记住,根据实际部署规模和需求,可能还需要进一步调整配置参数和优化网络布局。SeaweedFS的灵活性和扩展性意味着随着使用深入,您可能需要探索更多高级配置和管理策略。
116 61
|
18天前
|
SQL 存储 Linux
从配置源到数据库初始化一步步教你在CentOS 7.9上安装SQL Server 2019
【11月更文挑战第8天】本文介绍了在 CentOS 7.9 上安装 SQL Server 2019 的详细步骤,包括系统准备、配置安装源、安装 SQL Server 软件包、运行安装程序、初始化数据库以及配置远程连接。通过这些步骤,您可以顺利地在 CentOS 系统上部署和使用 SQL Server 2019。
|
19天前
|
SQL 存储 Linux
从配置源到数据库初始化一步步教你在CentOS 7.9上安装SQL Server 2019
【11月更文挑战第7天】本文介绍了在 CentOS 7.9 上安装 SQL Server 2019 的详细步骤,包括系统要求检查与准备、配置安装源、安装 SQL Server 2019、配置 SQL Server 以及数据库初始化(可选)。通过这些步骤,你可以成功安装并初步配置 SQL Server 2019,进行简单的数据库操作。
|
2月前
|
Linux 网络安全 数据安全/隐私保护
Linux系统之Centos7安装cockpit图形管理界面
【10月更文挑战第12天】Linux系统之Centos7安装cockpit图形管理界面
92 1
Linux系统之Centos7安装cockpit图形管理界面
|
26天前
|
关系型数据库 MySQL Linux
在 CentOS 7 中通过编译源码方式安装 MySQL 数据库的详细步骤,并与使用 RPM 包安装进行了对比
本文介绍了在 CentOS 7 中通过编译源码方式安装 MySQL 数据库的详细步骤,并与使用 RPM 包安装进行了对比。通过具体案例,读者可以了解如何准备环境、下载源码、编译安装、配置服务及登录 MySQL。编译源码安装虽然复杂,但提供了更高的定制性和灵活性,适用于需要高度定制的场景。
73 3
|
27天前
|
关系型数据库 MySQL Linux
在 CentOS 7 中通过编译源码安装 MySQL 数据库的详细步骤,并与使用 RPM 包安装进行了对比。
本文介绍了在 CentOS 7 中通过编译源码安装 MySQL 数据库的详细步骤,并与使用 RPM 包安装进行了对比。内容涵盖准备工作、下载源码、编译安装、配置服务、登录设置及实践心得,帮助读者根据需求选择最适合的安装方法。
48 2
|
2月前
|
NoSQL 数据可视化 Linux
redis学习四、可视化操作工具链接 centos redis,付费Redis Desktop Manager和免费Another Redis DeskTop Manager下载、安装
本文介绍了Redis的两个可视化管理工具:付费的Redis Desktop Manager和免费的Another Redis DeskTop Manager,包括它们的下载、安装和使用方法,以及在使用Another Redis DeskTop Manager连接Redis时可能遇到的问题和解决方案。
133 1
redis学习四、可视化操作工具链接 centos redis,付费Redis Desktop Manager和免费Another Redis DeskTop Manager下载、安装
|
29天前
|
关系型数据库 MySQL Linux
在 CentOS 7 中通过编译源码方式安装 MySQL 数据库的详细步骤,包括准备工作、下载源码、编译安装、配置 MySQL 服务、登录设置等。
本文介绍了在 CentOS 7 中通过编译源码方式安装 MySQL 数据库的详细步骤,包括准备工作、下载源码、编译安装、配置 MySQL 服务、登录设置等。同时,文章还对比了编译源码安装与使用 RPM 包安装的优缺点,帮助读者根据需求选择最合适的方法。通过具体案例,展示了编译源码安装的灵活性和定制性。
85 2
|
2月前
|
Linux 知识图谱
Centos7安装killall,fuser, killall,pstree和pstree.x11
通过上述步骤,您已在CentOS 7系统中成功部署了killall、fuser、pstree以及pstree.x11,为高效管理系统进程打下了坚实基础。更多关于服务器管理与优化的知识,获取全面技术支持与解决方案。
53 1