Linux之使用MogileFS分布式文件系统并使用nginx实现反向代理

简介:

MogileFS是一套高效的文件自动备份组件,由Six Apart开发,广泛应用在包括LiveJournal等web2.0站点上。 
MogileFS的特性: 
工作在应用层,无单点,自动文件复制(复制的最小单位是class,而不是文件),传输中立且使用nfs或者http协议进行传输。 
MogileFS的结构组成: 
这里写图片描述
tracker:是mogilefs的核心,是一个调度器,通过数据库来保存元信息,包括daemon,class,host等信息,主要职责:监控后端mogstore节点,并指示store节点完成数据的添加,删除,查询,及节点之间的复制. 
mogstore:实际数据的存储位置,通常伪一个http服务器. 
database:用来保存节点的全局信息.

1.安装MogileFS 
a.下载MogileFS 
MogileFS-Server:https://github.com/mogilefs/MogileFS-Server 
MogileFS-Utils:https://github.com/mogilefs/MogileFS-Utils 
perl-MogileFS-Client:https://github.com/mogilefs/perl-MogileFS-Client 
b.安装: 
将文件解压并进入文件内

    [root@clone3 nginx-1.11.12]# make Makefile.PL
    [root@clone3 nginx-1.11.12]# make && make install
    [root@clone3 nginx-1.11.12]# yum install perl-IO-AIO123123

2.配置文件讲解

     参数解答:    总用量 8

3.启动并测试

1.创建/var/run/mogilefsd目录并修改属组属主
    [root@Master mogilefs]# mkdir -p  /var/run/mogilefsd
           [root@Master mogilefs]# chown -R mogilefs.mogilefs /var/run/mogilefsd/
2.创建/mog/mogdata目录并修改属组属主
    [root@Master mogilefs]# mkdir -p /mog/mogdata
    [root@Master mogilefs]# chown -R mogilefs.mogilefs /mog/mogdata/
3.启动mogilefsd进程和mogstored进程
    [root@Master mogilefs]# service mogilefsd start
        Starting mogilefsd                                         
    [root@Master mogilefs]# service mogstored start
        Starting mogstored                                         
**此处的启动脚本是使用rpm包安装,并且自带的,一般使用make安装的没有服务脚本**

4.使用管理工具配置mogstord节点主机

                          **文件实际访问位置**

5.使用浏览器访问 
这里写图片描述
这样一个mogilefs分布式存储就设置好了,只是mogilefsd进程和mogstored进程在统一主机上。 
6.负载均衡设计结构 
这里写图片描述
7.使用nginx实,现反向代理 
使用nginx反向代理mogilefs时,要用到第三方模块在能使实现代理,nginx身不支持mogilefs的代理,下载模块快为nginx_mogilefs_module,下载地址:http://www.grid.net.ru/nginx/download/nginx_mogilefs_module-1.0.4.tar.gz

         **详细参数请参考官方文档:http://www.grid.net.ru/nginx/mogilefs.en.html**

8.配置两台mogilefs主机 
在配置两台主机是,mogilefsd进程会在数据库中读取mogstord节点的信息,在配置时按照上述阐述仅可以配置,建议在一个mogilefsd节点上配置,另一个节点可以在数据库中读到。 
9.测试结果 
这里写图片描述

本文转自lnsaneLlinux博客51CTO博客,原文链接http://blog.51cto.com/lnsane784/1930436如需转载请自行联系原作者


Insane_linux

相关文章
|
应用服务中间件 Linux nginx
Linux系列——Nginx的安装、测试详解以及关于Nginx的常用命令介绍
Linux系列——Nginx的安装、测试详解以及关于Nginx的常用命令介绍
|
tengine 应用服务中间件 Linux
【Linux环境】如何在Nginx(或Tengine)服务器上安装ssl证书----介绍nginx服务器类型证书的下载与安装操作
【Linux环境】如何在Nginx(或Tengine)服务器上安装ssl证书----介绍nginx服务器类型证书的下载与安装操作
575 0
|
应用服务中间件 Linux nginx
Linux下Nginx编译安装后的开机自启动设置
Linux下Nginx编译安装后的开机自启动设置
715 0
|
应用服务中间件 Linux nginx
Linux查看nginx安装位置
查看nginx安装位置
3187 0
|
安全 Ubuntu 算法
基于Linux的Nginx安装
基于Linux的Nginx安装
236 0
|
负载均衡 应用服务中间件 Linux
linux中nginx的安装
nginx是一款高性能的http服务器/反向代理服务器及电子邮件(IMAP/POP3)代理服务器。
|
应用服务中间件 Linux nginx
Linux下Nginx的源码编译安装
Linux下Nginx的源码编译安装
549 0
|
应用服务中间件 Linux 网络安全
Linux下Nginx编译安装过程详解
Linux下Nginx编译安装过程详解
295 0
Linux下Nginx编译安装过程详解
|
应用服务中间件 Linux 网络安全
Linux日记本_07:Nginx安装SSL证书并配置http转https
https 上次写过一篇Linux下Nginx的搭建文章,这篇是补充SSL证书的安装与http请求转换成https请求. SSL证书是什么? ssl证书 当你点击证书的时候已经给了很明确的说明 1.保证远程计算机的身份 2.向远程计算机证明你的身份 证书信息 如果你很熟悉Nginx的话,那么在Nginx下安装SSL证书将会是一件很简单的事情.当然证书的安装方式有很多种,需要根据系统和所使用的软件不同来下载相关的资源,这里我们就不在赘述,我们只关注Nginx下相关的就OK了。
2011 0
|
应用服务中间件 Linux 网络安全
06_Linux基础-NGINX和浏览器、网页的关系-云服务器ssh登陆-安装NGINX-上传网页-压缩命令-xz-gzip-bzip2-zip-tar-配置NGINX服务器支持下载功能-备份脚本
NGINX和浏览器、网页的关系-云服务器ssh登陆-安装NGINX-上传网页-压缩命令-xz-gzip-bzip2-zip-tar-配置NGINX服务器支持下载功能-备份脚本
278 0
06_Linux基础-NGINX和浏览器、网页的关系-云服务器ssh登陆-安装NGINX-上传网页-压缩命令-xz-gzip-bzip2-zip-tar-配置NGINX服务器支持下载功能-备份脚本