AutoOps 1.8 版本

本文涉及的产品
RDS AI 助手,专业版
RDS MySQL DuckDB 分析主实例,集群系列 4核8GB
简介:

AutoOps

AutoOps 是一款基于 2.0 版本django 开发的,主要面向linux运维工程师使用,管理linux资产信息,Mysql数据库,批量执行命令、脚本,获取流量图,web ssh管理,技术文档等功能。

欢迎大家测试使用,有问题可反馈。

Demo

  • 地址: http://114.115.132.147:8003 账号admin 密码1qaz.2wsx

  • 交流群号: 620176501 欢迎交流!

  • 后台地址 http://114.115.132.147:8003/admin 账号admin 密码1qaz.2wsx

  • 博客: http://hequan.blog.51cto.com/

  • github: https://github.com/hequan2017/autoops/

  • 码云: https://gitee.com/hequan2020/autoops

架构图

DEMO

更新记录

  • 1.8预览版 加强mysql查询展示功能。

  • 1.7.8 更换后台为xadmin

    • tasks.task.任务

    • tasks.task.monitor_job #定时获取CPU、内存 、流量

    • tasks.task.clean_history_host_monitor #清除1周前的主机性能历史记录数据

    • tasks.task.cmd_job #可定时执行命令,输入 host,命令 即可。

    • 注意: xadmin暂时不支持 对象权限组件django-guardian,需要设置的时候,可以登陆dadmin(为默认admin)

    • 注意: xadmin 认不到 tasks任务的名字,需要的名字如下:

    • 1.7.7 更换webssh启动方式。

    • 1.7.6 代码库功能上线,带分发。

    • 1.7.4 更新ansible版本。 增强命令行 功能。具体方法参考ansible 模块。

    • 1.6 Mysql数据库操作: 自动审核 + 执行 (目前只适用于Mysql)

    • 1.4 更新django 为2.0

    • 1.3 新增 技术文档 板块。

    • 1.2 权限管理完善。 增加附件上传下载功能。

    • 1.1.5 新增 权限管理。 根据后台用户组,区分不同权限。如:在后台先建一个 测试机 组,把普通用户加入到此组。在前端添加资产时,在产品线中会出现测试机 。 测试机组下的用户 只管管理测试机产品线的资产。

    • 1.1 新增 平台登录记录、web登录记录、密码修改等功能。


    功能

    • asset资产

      • api http://114.115.132.147:8003/asset/api/asset.html

      • 自动获取服务器信息

      • 全部导出

      • CPU 内存 流量图

    • names 用户(预留模块)

      • 加密解密 password_crypt.py ## 如果是自己的生产环境,建议更换里面的密钥。

    • tasks任务

      • shell

      • python

      • 命令行

      • 工具

    • webssh 登陆

    • library 技术文档 (真正运维人员的管理平台,自带技术文档,有问题不用再去别的地方找)

      • DjangoUeditor 富文本编辑器

    • 代码库

      • 代码库

      • 主机分发

    • 数据库自动审核-- 命令执行 回滚

      • Inception

    • 后台管理

      • admin

      • 根据后台用户组进行区分。admin有最高权限。

      • 例如:新建 运维组、开发组 , 新建 运维组 里面的 hequan 账号

      • 那么 hequan 只能看见 运维组下面的服务器、数据库,执行工具也只能选择 运维组的。 hequan 无法添加服务器、数据库。

    环境

    • Python 3.6.4 #可以参考 script/install_python3.6.4.py

    • Django 2.0

    • Python 2.7 (用来启动 supervisor)

    • Centos 7.4

    • supervisor 管理无法

      • uwsgi web服务启动

      • webssh

      • celeryd 队列任务

      • celerybeat

      • celerycam

      • celeryflower

      • Inception mysql 数据库审核


    安装

    • 开发环境部署:

      1. 下载,安装基本环境,安装目录为/opt下,如是其他目录,请修改supervisor.conf中的相应设置即可。

    cd /opt yum install git   sshpass    redis  -y  systemctl enable redis.service  systemctl start  redis.service  git  clone  https://github.com/hequan2017/autoops.git      cd   autoops/ pip3 install -r requirements.txt        cd /usr/local/src wget https://codeload.github.com/sshwsfc/xadmin/zip/django2 unzip django2 cd xadmin-django2/ python setup.py  install

    添加的资产里面, 建议执行 yum install ipmitool dmidecode -y以获取更多信息

    1. 安装 supervisor

    chmod +x    /opt/autoops/script/inception/bin/* pip2   install    supervisor          ## 没有pip2 版本的 ,可以参考 script/install_pip2.sh echo_supervisord_conf    > /etc/supervisord.conf  mkdir /etc/supervisord.d/       vim /etc/supervisord.conf      ##进行相关设置           [inet_http_server]             ##HTTP登录账号密码 port=0.0.0.0:9001  username=user password=321 [include] files = /etc/supervisord.d/*.conf
    cp   /opt/autoops/script/supervisor.conf               /etc/supervisord.d/

    环境设置

    • 数据库: 请修改 autops/settings文件, 如果没有mysql,请选择上面那种。如果有,则可以启用mysql,设置相关连接地址。 关于mysql安装方法,可参考我的博客 http://hequan.blog.51cto.com/5701886/1982428

    DATABASES = {      'default': {         'ENGINE': 'django.db.backends.sqlite3',          'NAME': os.path.join(BASE_DIR, 'db.sqlite3'),      }  }     DATABASES = {        'default': {            'ENGINE': 'django.db.backends.mysql',            'NAME': 'autoops',            'USER': 'root',            'PASSWORD': '123456',            'HOST': '192.168.10.24',            'PORT': '3306',         } }
    • 修改 autoops/settings 自定义参数

    DEBUG = True                            ## 实际生产环境使用,请关闭    False BROKER_URL = 'redis://127.0.0.1:6379/0'                  ##Redis地址,一般情况不用修改 Webssh_ip = '114.115.132.147'      ##WebSSH 软件的 访问IP,也就是本机外网IP,改这个地方就好了。 Webssh_port='9000'             ##端口号,默认即可。如有修改,需要修改  webssh/main.py文件 define('port', default=9000, help='listen port', type=int) Inception_ip = '127.0.0.1'         ## 此为 Inception 软件地址,  默认为本机地址,一般不用修改 Inception_port = '6669'            ## 此为 Inception 软件端口号 inception_remote_system_password='654321'    ## 设置回滚备份(mysql)服务器相关参数,并同步修改一下 script/inc.cnf 里面的设置 inception_remote_system_user='root' inception_remote_backup_port='3306' inception_remote_backup_host='192.168.10.100'   ##设置备份数据库地址
    • 修改一个文件 /usr/local/lib/python3.6/site-packages/django/db/backends/mysql/base.py 注释35 36 以下两行,找不到可以忽略。

    if version < (1, 3, 3):     raise ImproperlyConfigured("mysqlclient 1.3.3 or newer is required; you have %s" % Database.__version__)
    • 由于Inception 并不原生支持pymysql,所以需更改pymysql相关源码。

    在script/ 文件夹下有已经修改的connections.py 和 cursors.py 直接替换即可。
    替换位置为 /usr/local/lib/python3.6/site-packages/pymysql 下的 connections.py 和 cursors.py 两个文件 注: 如果想知道,修改了哪里,可参考script/备注。

    cp /opt/autoops/script/connections.py   /usr/local/lib/python3.6/site-packages/pymysql/connections.py cp /opt/autoops/script/cursors.py    /usr/local/lib/python3.6/site-packages/pymysql/cursors.py
    • 初始化数据库(可删除文件夹的 db.sqlite3)

    python manage.py makemigrations python manage.py  migrate python manage.py  createsuperuser             ##创建管理员
    • autoops 登陆的端口号 在 supervisor.conf 里面 第2行 ,默认是 0.0.0.0:8003 。如有修改端口号,请把supervisor 里的uwsgi 服务关闭,再启动。

    • 启动supervisor进程管理

    /usr/bin/python2.7   /usr/bin/supervisord -c /etc/supervisord.conf

    加到linux 开机启动里面 chmod +x /etc/rc.d/rc.local 把上面的命令放到这个文件里面

    • 启动: 统一用supervisor 管理进程, 打开 0.0.0.0:9001 账号user 密码321 进入进程管理界面,管理uwsgi,webssh,celery,Inception 等启动关闭。 DEMO

    • 登陆后台,设置定时获取主机图,设置数据中心、用户组。

    • 设置定时获取主机信息任务。 先创建执行的时间频率,再创建任务,创建后,观察队列任务是否执行成功。 如不成功,重启所有supervisor中的 celery服务。 DEMO


    开发设置

    • 如果想在windows 下的 pycharm打开, 先pip 安装好模块,ansbile无法装在windows上,忽略掉。然后注释下面的代码。 注释xadmin

    asset/views.py from   tasks.ansible_2420.runner import AdHocRunner, CommandRunner from  tasks.ansible_2420.inventory import BaseInventory tasks/views.py    from   tasks.ansible_2420.runner import AdHocRunner, CommandRunner from  tasks.ansible_2420.inventory import BaseInventory release/views.py from   tasks.ansible_2420.runner import AdHocRunner from  tasks.ansible_2420.inventory import BaseInventory

    生产环境

    • 如果想在生产环境部署、启动, 用nginx去处理。 可以参考 http://hequan.blog.51cto.com/5701886/1982769 , 请把supervisor.conf 中 关于uwsgi的部分删除掉, 用以下方式控制UWSGI的启动 关闭.

    uwsgi  --ini    /opt/autoops/script/uwsgi.ini     # 启动uwsgi配置  也可以把这个命令写到开机的文件里面 uwsgi  --stop   /opt/autoops/script/uwsgi.pid    # 关闭uwsgi uwsgi  --reload  /opt/autoops/script/uwsgi.pid   #重新加载
    • nginx 配置文件修改如下。 此方法也要启动 uwsgi。

    root         /opt/autoops;             location / {         include uwsgi_params;         uwsgi_connect_timeout 30;         uwsgi_pass unix:/opt/autoops/script/uwsgi.sock;              }          location /static/   {             alias  /opt/autoops/static/;             index  index.html index.htm;     }

    截图

    DEMODEMODEMODEMODEMODEMO


    贡献者

    1.0

    • 何全










    本文转自 295631788 51CTO博客,原文链接:http://blog.51cto.com/hequan/1937439,如需转载请自行联系原作者
    目录
    相关文章
    |
    Oracle 关系型数据库 MySQL
    Qt数据库开发的一些冷知识
    Qt数据库开发的一些冷知识
    |
    监控 Python
    【python】实现cpu/内存监控的功能(非常简单)
    【python】实现cpu/内存监控的功能(非常简单)
    |
    7月前
    |
    网络虚拟化
    配置OptionC方式跨域VPN示例
    本文介绍了跨域BGP/MPLS IP VPN的配置方法。公司总部(CE1)与分部(CE2)分别通过不同运营商AS10和AS20接入,同属vpn1。配置思路包括:1) 配置IGP协议实现骨干网互通;2) 配置MPLS基本能力和LDP建立LSP;3) 配置VPN实例并绑定接口;4) 建立EBGP对等体交换路由;5) 在ASBR-PE上发布带标签的路由;6) 配置MP-EBGP对等体关系。操作步骤涵盖IP地址配置、MPLS骨干网互通、VPN实例接入及路由验证,确保跨域通信正常。
    |
    编译器 C++ Windows
    win10 环境下配置 openGL的freeglut、glew等库,使用openGL
    win10 环境下配置 openGL的freeglut、glew等库,使用openGL
    7933 0
    |
    Java Nacos 数据库
    使用 nacos 搭建注册中心及配置中心
    使用 nacos 搭建注册中心及配置中心
    365 5
    |
    人工智能 弹性计算 API
    通义万相AI绘画创作体验评测
    从使用者的角度解读通义万相AI绘画创作方案的优与劣
    11675 12
    |
    JavaScript Java 测试技术
    基于springboot+vue.js的企业资产管理系统附带文章和源代码设计说明文档ppt
    基于springboot+vue.js的企业资产管理系统附带文章和源代码设计说明文档ppt
    276 8
    |
    负载均衡 监控 安全
    中间件功能之数据交换
    中间件在数据交换中起关键作用,负责数据的可靠、高效和安全传输。其主要功能包括:数据格式转换、数据路由、数据同步、数据过滤与验证、负载均衡、安全控制及日志记录与监控。通过这些功能,中间件确保了不同系统间数据的无缝对接、一致性、质量和安全性,提升了数据交换的效率。
    297 4
    |
    运维 安全 Linux
    Softether详解(一)——V*N与softether概述
    Softether详解(一)——V*N与softether概述
    1024 3
    |
    API Go 网络架构
    Kratos 大乱炖 —— 整合其他Web框架:Gin、FastHttp、Hertz
    Kratos默认的RPC框架使用的是gRPC,支持REST和protobuf两种通讯协议。其API都是使用protobuf定义的,REST协议是通过[grpc-gateway](https://github.com/grpc-ecosystem/grpc-gateway)转译实现的。使用protobuf定义API是具有极大优点的,具有很强的可读性、可维护性,以及工程性。工程再大,人员再多,也不会乱。 一切看起来都是很美好的。那么,问题来了,我们现在使用的是其他的Web框架,迁移就会有成本,有风险,不可能一下子就把历史存在的代码一口气转换过来到Kratos框架。那我可以在Kratos中整合其他
    1290 0

    热门文章

    最新文章