日志、文件服务器(vsftp、NFS)

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,高可用系列 2核4GB
简介:

下面介绍的是)日志、文件服务器(vsftp、NFS、samba


一、日志

1、日志基础

(1)、日志

 日志 -----------记录具有一定意义的历史事件。

 事件 -----------时间、事件本身的内容、事件的关键程度(级别)

 最开始的日志系统为: syslog,主要记录与应用程序、内核有关的事件。klogd(与内核有关的事件)、syslogd(与应用程序有关的事件)。

(2)rsyslog --------------现在常用的日志系统

 rsyslog的特性(5个):多线程、并行记录日志;持更多的协议来完成日志;支持多种格式日志存储;支持日志的过滤机制,过滤不想看到的内容;可自定义输出格式。

 rsyslog采用ELK Stack进行日志记录:倒序索引搜索引擎、日志收集工具、展示工具。

 rsyslog包括以下两部份:

   facility ----------收集整理日志的组件

   priority ----------事件优先级、级别(debug、info、notice、warn、err、crit、alert、emerg(panic))

 运行级别:

   debug ---------所有的都记录,内容太多,用于排错,日志中可记可不记

   info ----------一般性的信息、描述,日志中可记可不记

   notice ----------通知类信息,日志中可记可不记

   warn -----------警告

   error -----------错误信息

   crit -------------紧急的

   alert ------------警报

   emerg(panic) ---------------恐慌(最高级)


 rsyslog配置文件:

    配置文件:/etc/rsyslog.conf  /etc/rsyslog.d/*.conf

    主程序配置文件:/usr/sbin/rsyslogd

 服务器的启动(rsylog):

    centos6:service rsyslog {start|restart|stop|status}

    centos7:systemctl {start|restart|stop|status} rsyslog.service


(3)、rsyslog的主配置文件:/etc/rsyslog.conf -----------包括三部分

 主配置文件的三部分,即MODULES、GLOBAL DIRECTIVES、RULES。

 第三部分RULES,具体解释如下:(也分三部分)

    facility:

      *:所有的设施

      f1,f2,...:由多个设施构建的列表


    priority:

      *:所有级别

      none:不包含任何级别

      PRIORITY:包括指定的PRIORITY在内,直到最高级之间的所有级别;

        如:warn,意思是:warn,err,crit,alert,emerg

      =PRIORITY:仅记录指定的级别的日志;

        如:=warn,意思是:warn


    target:

      文件:以绝对路径的方式给出日志文件;"-"表示异步写入;

      用户:将日志信息通知给指定的用户;也可以向所有已经登录到系统的用户的终端发送信息;

      日志服务器:@Server_ip,把日志发送到指定的日志服务器上;

      管道:| COMMAND


 -/var/log/maillog ------------其中,【减号表示异步写入】

 :modoule: --------------使用模块


2、几种主要的日志文件

(1)、dtmp

  /var/log/dtmp ------------索引文件,不是纯文本的。btmp即bad login,用于记录尝试登录的信息。

  # lastb 命令进行查看

(2)、wtmp

  /var/log/wtmp ------------wtmp,即win login,用于记录成功登录信息。

  # last 命令进行查看 

  # last -n 5 ---------显示最近5条记录

(3)、secure

  /var/log/secure ------------记录认证授权日志,为纯文本文档。

(4)、dmesg

  /var/log/dmesg ------------记录系统引导过程中的输出信息,纯文本文档。

  可以使用编辑器查看,也可以使用dmesg命令来查看。


3、将rsyslog日志机记录于MySQL中的步骤如下:

(1)、# yum install rsyslog-mysql

(2)、在MySQL中创建授权用户

    mysql> grant all on Syslog.* to 'sladmin'@'127.0.0.1' identified by 'slpass';

    mysql> grant all on Syslog.* to 'sladmin'@'localhost' identified by 'slpass';

    mysql> grant all on Syslog.* to 'sladmin'@'172.16.%.%' identified by 'slpass';

(3)、使用SQL脚本创建数据库和数据表

    # mysql -usladmin -hlocalhost -p < /usr/share/doc/rsyslog-7.4.7/mysql-createDB.sql

(4)、在rsyslog的配置文件中配置使用MySQL -------------/etc/rsyslog.conf

      ### MODULES ###

      $ModLoad ommysql


      ### RULES ###

      facility.priority  :ommysql:DB_HOST,DB_NAME,DB_USER,DB_PASS

(5)、重启rsyslog服务


4、loganalyzer 组件 ------------------进行日志分析。

 步骤:

(1)、需要架构LAMP平台。

(2)、安装loganalyzer

    # tar loganalyzer-4.1.5.tar.gz

    # cd loganalyzer-4.1.5

    # cp -a src /PATH/TO/SOME_VHOST/loganalyzer

    # cp contrib/*.sh /PATH/TO/SOME_VHOST/loganalyzer

    # cd /PATH/TO/SOME_VHOST/loganalyzer

    # chmod +x *.sh

    # ./configure.sh

    # ./secure.sh

    # chmod 666 config.php

(3)、通过浏览器访问  

    http://HOST/loganalyzer



二、文件服务器

1、文件系统基础

(1)、文件服务器的实现方式:(3种)

   FTP ---------------基于应用层

   NFS ---------------基于内核级文件系统(基于文件系统)

   CIFS(通用互联网文件系统) -------跨OS的网络文件系统(基于文件系统)

(2)、网络存储:(2种)

   NAS ------------网络附加存储,文件系统级别的存储接口

   SAN ------------存储区域网络,块设备级别的存储接口


2、FTP ------------文件传输协议,采用的是C/S架构。

(1)、FTP基础

  FTP 默认为【明文传输数据】,用户名和密码均为明文,运用ftps、sftp进行安全增强。

  FTP的两种【套接字】:控制连接套接字(tcp/21)、数据连接套接字(tcp/20)

  FTP的TCP的两种【连接】:控制连接、数据连接

  FTP两种【数据传输的模式】:文本格式、二进制格式

  FTP数据【连接的两种建立方式】:主动模式、被动模式

  FTP【安全增强】的两种方式:ftps、sftp

(2)、FTP协议的实现

  服务器端:windows:IIS、Serv-U

            Linux:wuftpd、proftpd、pureftp、【vsftpd】

  客户端:命令行界面工具(CLI)、图形界面工具(GUI)。


3、vsftp ----------------FTP的服务器端实现

(1)、vsftp程序环境:

  主配置文件: /etc/vsftpd/vsftpd.conf

  辅助配置文件: /etc/vsftpd/other_file

  主程序文件: /usr/sbin/vsftpd

  默认的匿名用户访问的数据根目录:/var/ftp

  系统文件:/usr/lib/systemd/system/vsftpd.service

  

(2)、主配置文件 ----------------------/etc/vsftpd/vsftpd.conf

  格式:Directive=Value

  在格式中,注意以下三点:

    1、指令位于绝对行首

    2、等号两侧不允许出现空格

    3、布尔值必须大写

  

  在主配置文件中,常用的指令如下(9类):----------------------/etc/vsftpd/vsftpd.conf

    1、全局的指令:

       write_enable=YES

    2、匿名用户授权:

       anonymous_enable=YES

       anon_upload_enable=YES

       anon_mkdir_write_enable=YES

       anon_other_write_enable=YES

       anon_umask=022

    3、系统用户:

       local_enable=YES

       local_umask=022

    4、禁锢系统用户于其家目录中:

       chroot_local_user=YES ---------------所有用户禁锢

       chroot_list_enable=YES

       chroot_list_file=/etc/vsftpd/chroot_list

    5、定义传输日志:

       xferlog_enable=YES

       xferlog_file=/var/log/xferlog

       xferlog_std_format=YES

    6、用户访问控制:

       userlist_enable=YES

       userlist_deny=YES ----------------黑名单

       userlist_file=/etc/vsftpd/user_list

    7、认证机制:----------------PAM认证

       pam_service_name=vsftpd -----------------主要认证用户账户的身份

       tcp_wrappers=YES -----------------TCP_WRRAPERS认证

    8、被动模式:

       pasv_enable=YES

       pasv_max_port=61000

       pasv_min_port=60000

    9、限速:-----------------单位是Byte/S

       local_max_rate=128000

       anon_max_rate=50000


  配置vsftpd:三种用户类别分别是,匿名用户、系统用户、虚拟用户。



4、vsftpd的虚拟主机 ----------------区分不同的虚拟主机,仅依靠套接字的不同

(1)、vsftp虚拟主机

 vsftpd的虚拟主机:(区分)

   listen_port=21 --------添加入

   listen_address=172.16.2.1 ----------当前用户有效的ip地址

 三类vsftp虚拟主机如下:

  1、基本【ftp】服务器虚拟主机:--------------/etc/vsftpd/vsftpd.conf

    listen_port=21

    listen_address=172.16.69.1

  2、存储虚拟用户于【文件】的虚拟主机:----------/etc/vsftpd/vuser_file.conf

    listen_port=21

    listen_address=172.16.69.101

  3、存储虚拟用户于【MySQL】的虚拟主机:------------/etc/vsftpd/vuser_mysql.conf

    listen_port=21

    listen_address=172.16.69.201


(2)、vsftp虚拟用户

 vsftpd的【虚拟用户】:利用文件系统的数据库文件存放用户账户和密码,也可以,利用MySQL存放用户账户和密码。分别设定不同虚拟用户的访问权限。

 虚拟用户【账户存储】:文件、MySQL数据库、Oracle、Redis、LDAP

 vsftp本身不具备用户账户身份验证功能,认证功能托管给pam。-------身份验证(pam:插入式认证模块)


(3)、【基于文件】来存放【虚拟用户】的步骤如下:

  1、创建文件

  【创建】用于保存虚拟用户的文件,奇数行为用户名,偶数行为密码。添加用户,直接在文件中添加,让后加载。若要删除用户,要先删除数据库,再删除数据。

  例:

    # touch VUSER_FILE

    tom

    123456

    jerry

    123123

  

  2、文本文件【转换】为数据库文件

    db_load -T -t hash -f /PATH/TO/VUSER_FILE /PATH/TO/USERDB.db

  

  3、设定PAM的认证方式 -------------其配置文件,【不要.db的扩展名】

  修改:/etc/pam.d/vusers.file

    auth required /lib64/security/pam_userdb.so db=/PATH/TO/USERDB -----------USERDB不要.db的扩展名

    account required /lib64/security/pam_userdb.so db=/PATH/TO/USERDB

  

  4、身份【映射】,映射虚拟用户身份

  # useradd LOCAL_USER

  

  5、修改虚拟主机的配置文件 -------------------/etc/vsftpd/vsftpd.conf

    anonymous_enable=NO

    guest_enable=YES

    guest_username=LOCAL_USER

    pam_service_name=vusers.file

    local_root=/myftp/ftpdata

    anon_upload_enable=YES

    anon_mkdir_write_enable=YES

    anon_other_write_enable=YES



(4)、对于所有的虚拟用户【分别设定权限】,步骤如下:

  1、在虚拟主机的主配置文件中添加指令user_config_dir0 ---------------------/etc/vsftpd/vsftpd.conf

    user_config_dir=/PATH/TO/CONFIG_DIR

  2、创建出这个目录,并且在目录下创建出与虚拟用户名相同的文件

    anon_upload_enable=YES

    anon_mkdir_write_enable=YES

    anon_other_write_enable=YES

    local_root=/myftp/ftpdata/alice

    anon_umask=022


(6)、基于【MySQL】来存放虚拟用户的步骤如下: ---------------对于centos6

  1、编译安装pam的MySQL【驱动】 (需要预先安装编译环境 ----------注意4个)

    # yum -y install pam-devel mysql_devel

    # tar xf pam_mysql-0.7RC1.tar.gz

    # cd pam_mysql-0.7RC1

    # ./configure --with-pam=/usr --with-mysql=/usr --with-pam-mods-dir=/lib64/secutiry

    # make -j 4 && make install

  2、创建数据库、数据表、授权用户

    mysql> create database vsftpd;

    mysql> use vsftpd;

    mysql> create table users (username char(20),password char(48));

    mysql> insert into users values ('centos',PASSWORD('qhdlink')),('gentoo',PASSWORD('qhdlink'))

    mysql> grant all on vsftpd.* to 'vsftpd'@'localhost' identified by 'vsftppass';

    mysql> grant all on vsftpd.* to 'vsftpd'@'127.0.0.1' identified by 'vsftppass';

    mysql> grant all on vsftpd.* to 'vsftpd'@'172.16.%.%' identified by 'vsftppass';

  3、【创建】pam的认证文件 ---------------/etc/pam.d/vusers.mysql

    /etc/pam.d/vusers.mysql

    auth required /lib64/security/pam_mysql.so user=vsftpd passwd=vsftppass host=127.0.0.1 db=vsftpd table=users usercolumn=username passwdcolumn=password crypt=2

    account required /lib64/security/pam_mysql.so user=vsftpd passwd=vsftppass host=127.0.0.1 db=vsftpd table=users usercolumn=username passwdcolumn=password crypt=2

  4、创建映射用户

    # useradd mysqluser

  5、修改虚拟主机的配置文件 -------------------/etc/vsftpd/vsftpd.conf

    anonymous_enable=NO

    guest_enable=YES

    guest_username=LOCAL_USER

    pam_service_name=vusers.mysql

    user_config_dir=/PATH/TO/MYSQL_USER_CONFIG



5、NFS -----------网络文件服务器

 安装nfs,即安装nfs-utils。

(1)、nfs服务器配置文件:(2个)

    /etc/exports

    /etc/exports.d/*


(2)、nfs主配置文件 -------------/etc/exports

  格式:Shared_path  Machine_Name1(Security_options) Machine_Name2(Security_options) ...

  Shared_path --------------绝对路径,共享的目录


  Machine_Name -----------single host、wildcards、IP networks

    single host:单独主机,IP地址或主机名

    wildcards:使用*或?来做通配,如果只写一个*则表示所有主机;

    IP networks:IP网段,NETWORK/NETMASK, NETWOEK/PREFIX_LEN

    192.168.100.0/255.255.255.0

    172.16.0.0/16


  Security_options(2类)----------General Options、User ID Mapping

    General Options:ro(只读)、rw(读写)、sync(同步存储)、async(异步存储)、nohide(不隐藏)

    User ID Mapping:root_squash(压缩root用户权限)、all_squash(压缩所有的本地用户权限)


          

三、文件服务器之间的联系 -------------Samba

1、Samba的协议

  smb协议 --------------服务消息块协议(139/tcp、445/tcp)

  NetBios协议 -------------简短主机名的解析(137/udp、138/udp)

  cifs文件系统

2、Samba功能:(5类)

  文件系统共享、打印机共享、NetBios协议、Workgroup model、Domain Model

3、Samba的程序环境:(5类)

  samba

  samba-client

  samba-common

  samba-commom-tools

  samba-*libs

4、Samba文件

  Samba主配置文件:/etc/samba/smb.conf

  Samba主程序:smbd、nmbd

  Samba的UNIT文件:smb.service、nmb.service

  Samba客户端程序:smbclient、mount.cifs(mount -t cifs)


5、samba主配置文件 ------------------/etc/samba/smb.conf(2类)

(1)、Global Settings ---------------全局配置

  [global] ---------3段

      Network-Related Options

      Logging Options

      Standalone Server Options

  

  samba服务的四个安全级别share、user、server、domain

(2)、Share Definitions ---------共享定义

  Samba的共享定义,包括三类:homes、printers、share_fs。

  常用的共享命令有:comment、path、public、browseable、guest ok、writable、【write list】、read only、valid users、create mode、dir mode、directory mode。


6、samba的配置文件中可用的【宏列表】:

  %v --------------Samba专用的宏变量,Samba程序的版本号

  %m ---------------客户端主机的IP地址(客户端主机的NetBIOS名称)

  %H ------------当前用户的家目录的路径;

  %U -------------当前用户的用户名;

  %g -----------当前用户的属组的组名;

  %h -------------当前samba主机的HOSTNAME;

  %I ------------客户端主机的IP地址;

  %T -------------当前的系统日期和时间;

  %S -------------当前有效的的登录用户


7、Samba用户管理:

(1)、smbpasswd命令 ------------配置Samba用户(smbpasswd)

  常用选项:

  -a ------------添加samba用户

  -x -----------删除samba用户

  -d ----------禁用samba用户

  -e -----------启用被禁用的samba用户

(2)、pdbedit命令 ------------配置Samba用户(tdbsam)

  常用选项:

  -L ---------------列出所有被成功添加的samba用户

  -a -------------------添加samba用户

  -u username ----------指明要管理的用户

  -x -------------删除samba用户

  -t ----------------从标准输入接收字符串作为samba用户的密码

(3)、testparm命令 -----------测试配置文件语法是否正确


 共享目录的访问方式:smbclient交互式访问、挂载访问

(4)、smbclient命令 ----------------共享目录的访问方式、smbclient客户端工具

  常用选项:

  -L SERVER_IP -----------查看指定服务器上的samba共享目录列表

  -U USERNAME -------------指定以特定用户的身份来访问或查看

  -N ----------------在使用匿名用户或来宾用户的时候无需输入密码

  # smbclient -U USERNAME //SERVER_IP/DIR_SHARED_NAME ----------访问共享目录

  

  # mount -t cifs -o username=USERNAME[,password=PASSWORD] //SERVER_IP/DIR_SHARED_NAME MOUNT_POINT --------挂载访问

  # mount.cifs -o credentials=/root/smbuser.txt //SERVER_IP/DIR_SHARED_NAME MOUNT_POINT

  在挂载访问中,需创建用于保存samba用户的文件,如:/root/smbuser.txt, 权限600。该文件中的用户名和密码的书写格式为:username=USERNAME、password=PASSWORD。但常用credentials=FILE来引用用户名和密码。


(5)、smbstatus命令 ------------------查看服务器上的共享目录的访问状态

  常用选项:

  -b -----------显示简要格式的输出信息

  -v ------------显示详细格式的输出信息


  例:创建一个共享目录

    # mkdir /myshare

    # chmod 1777 /myshare


    [myshare]

      comment = my shared directory for LAN

      hosts allow = 172.16.

      path = /myshare

      public = no

      browsable = yes

      write list = @smbusers centos

      create mask = 0644

      dir mask = 0755




     本文转自little_ding 51CTO博客,原文链接:http://blog.51cto.com/12496428/1967779,如需转载请自行联系原作者






相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
1月前
|
存储 数据采集 分布式计算
Hadoop-17 Flume 介绍与环境配置 实机云服务器测试 分布式日志信息收集 海量数据 实时采集引擎 Source Channel Sink 串行复制负载均衡
Hadoop-17 Flume 介绍与环境配置 实机云服务器测试 分布式日志信息收集 海量数据 实时采集引擎 Source Channel Sink 串行复制负载均衡
41 1
|
1月前
|
分布式计算 资源调度 数据可视化
Hadoop-06-Hadoop集群 历史服务器配置 超详细 执行任务记录 JobHistoryServer MapReduce执行记录 日志聚合结果可视化查看
Hadoop-06-Hadoop集群 历史服务器配置 超详细 执行任务记录 JobHistoryServer MapReduce执行记录 日志聚合结果可视化查看
30 1
|
2月前
|
关系型数据库 MySQL 应用服务中间件
服务器端日志在哪里
服务器端日志在哪里
|
3月前
|
Ubuntu Linux 测试技术
在Linux中,已知 apache 服务的访问日志按天记录在服务器本地目录/app/logs 下,由于磁盘空间紧张现在要求只能保留最近7天的访问日志,请问如何解决?
在Linux中,已知 apache 服务的访问日志按天记录在服务器本地目录/app/logs 下,由于磁盘空间紧张现在要求只能保留最近7天的访问日志,请问如何解决?
|
3月前
|
Prometheus 监控 Cloud Native
Web服务器的日志分析与监控
【8月更文第28天】Web服务器日志提供了关于服务器活动的重要信息,包括访问记录、错误报告以及性能数据。有效地分析这些日志可以帮助我们了解用户行为、诊断问题、优化网站性能,并确保服务的高可用性。本文将介绍如何使用日志分析和实时监控工具来监测Web服务器的状态和性能指标,并提供具体的代码示例。
372 0
|
4月前
|
Java Scala C++
云计算存储问题之中心NFS服务器如何解决
云计算存储问题之中心NFS服务器如何解决
|
4月前
|
Linux 网络安全
NFS 服务器安装
NFS(Network File System)网络文件系统,它最大的功能就是可以通过网络,让不同的机器、不同的操作系统可以共享彼此的文件。当我们在 NFS 服务器设置好一个共享目录后,其他的有权访问 NFS 客户端就可以将这个共享目录挂载到文件系统自定义的挂载点,挂载好后客户端在本地能够看到服务端共享目录中的所有数据
82 1
|
4月前
|
存储 XML Java
seata2.0服务器日志位置修改
这个过程要求您对Seata配置和Linux文件系统有基本的认识。调整配置文件时要非常细心,因为配置错误会直接影响Seata服务的运行。通过以上步骤,您可以有效地修改Seata服务器的日志位置,并确保日志文件按照您的需要被妥善地管理和存储。
139 3
|
4月前
|
监控
查看服务器/IIS日志、log、访问信息基本方法
除了手动查看,你也可以使用日志分析工具,如Log Parser、AWStats等,这些工具可以帮助你更方便地分析日志数据。
600 1
|
4月前
|
存储 弹性计算 运维
可观测性体系问题之ECS管控对其所有日志的管理如何解决
可观测性体系问题之ECS管控对其所有日志的管理如何解决
42 0
下一篇
无影云桌面