Skip to content

Latest commit

 

History

History
289 lines (258 loc) · 19.2 KB

Manual.md

File metadata and controls

289 lines (258 loc) · 19.2 KB

AdminSet 用户手册

Hostname 主机名

adminset程序依赖主机名,所以被控机器、客户机,都需要设置主机名,主机名唯一,并且可以被解析
请在 /etc/hosts 或是DNS中加入主机名的解析。

Install 安装部署

安装需要使用yum源请保证可用,或使用本地yum源。
如果ubuntu客户端需要ansible等管理功能,需要开启root登录(配置脚本会自动开始,如不需要请手工关闭)

服务端安装

1.1、下载代码
    git clone https://github.com/guohongze/adminset.git
1.2、执行安装脚本-自动(推荐安装方式)
    adminset/install/server/auto_install.sh
    如果手动安装则跳过此步。
    关闭防火墙
    访问:http://your_server_ip
    使用用户名admin 密码Adminset123

1.3、执行安装脚本-手动(不建议,如果使用自动安装则跳过此步骤)
    1.3.1 adminset/install/server/server_install.sh
    安装过程需要输入管理员数据库等交互信息,如果安装中断再次执行server_install.sh即可.
    安装过程中会生成rsa密钥,位于/root/.ssh 目录下,如果已经存在,忽略即可。
    1.3.2、手动安装交互信息说明
    1)如果系统开启了selinux会提示:Do you want to disabled selinux?[yes/no]
       选择yes。(默认yes)
    2)YUM源选择提示do you want to use an internet yum repository?[yes/no]
       没有本地的yum源请选择yes,如果有本地的YUM源(包括epel源)请选择no。(默认值yes)
    3)数据库选择提示:do you want to create a new mysql database?[yes/no]
       本地没有数据库选择yes自动下载安装mariadb数据库,如已经存在mysql或mariadb数据库选择no,然后填写相关信息主机、端口、用户名、密码。(默认值yes)
    4)mongodb选择提示:do you want to create a new Mongodb?[YES/no]
       本地没有mongodb选择yes自动下载安装mongodb数据库,如已经存在mongodb数据库选择no,然后填写相关信息主机、端口、用户名、密码。(默认值yes)
    5)创建超管用户提示,please create your adminset' super admin: 输入超管用户名、邮件、密码。
    6)访问:
       http://your_server_ip
       使用自己在安装过程中创建的super admin用户名密码

客户端安装

说明:为保证注册IP是管理IP(后续会被ansible等调用),客户端的IP抓取目前使用主机名解析,否则报错。 如:主机名为cn-bj-web01 请在/etc/hosts中加入相应的解析 192.168.x.x cn-bj-web01,这样再执行adminset_agent.py 可以保证正常运行。 centos7不进行解析也可获取主机IP.

step1: 准备安装
    修改文件install/client/adminset_agent.py :
    客户端正常使用需要修改脚本中的两个字段:
    token = 'HPcWR7l4NJNJ'        #token是上传到服务器的密钥可以在WEB界面的系统配置中自定义<br>
    server_ip = '192.168.47.130'  #此项目为adminset server的IP地址,支持域名<br>

step2: 执行安装
    拷贝install/client/ 目录到客户机的任意位置并执行:
    cd client
    /bin/bash install.sh

step3: 客户端管理
    service adminsetd start|stop|restart|status
    客户端会被默认安装在/var/opt/adminset/client/ 目录下
    agent日志文件/var/opt/adminset/client/agent.log
    agent默认每3600秒上传一次资产和硬件信息,可以在adminset_agent.py中自定义
    agent每周一凌晨会清空所有之前生成的日志,如需要历史日志,请自行备份。
注意:客户端全部功能需要配置服务器到客户端的ssh免密登录。

自动免密钥登陆(此功能为可选,可以手动建立SSH信任)

如果实现全自动ssh免密登入客户机需要如下几个条件:
1)客户机的所有密码都相同。
2)在服务器的配置管理>密钥设置ssh password中写入客户机的密码并保存。
3)这样当客户机第一次上报资产信息到服务器中去会自动触发ssh密钥分发,自动分发成功能后ansible等其它功能不需要手动再配置ssh免密登陆。

程序目录

安装脚本会将文件安装在/var/opt/adminset
main为程序代码
config 配置
pid pid文件
logs 日志
data 常用数据
workspace 持续部署模块工作目录
client 为客户端目录

站点导航用法

在站点管理中输入常用的运维工具系统后会自动出现在站点导航界面。

资产管理

主机表(host):
    每个主机选择一相对应的机房。
机架表(cabinet):
    一个机柜包含多个主机。
机房表(idc):
    一个机房包含多个机柜。
属组表(group):
    每个主机可以属于不同的组,多对多关系。
    组的作用在于任务编排模块的功能在调用组时的依据,比如ansible管理目标机器以组为单为时。
    组与主机的设置是多对多,属于逻辑组。
    组可以被角色调用,用于授权用户可以使用这些组中的主机WEBSSH功能。

install/client/adminset_agent.py 开启后会自动上报主机相关信息到CMDB
获取主机信息
http://your_server_ip/cmdb/get/host/?token=your_token&name=host_name
获取所有主机:
http://your_server_ip/cmdb/get/host/?token=your_token&name=all
获取组信息:
http://your_server_ip/cmdb/get/group/?token=your_token&name=group_name
获取所有组:
http://your_server_ip/cmdb/get/group/?token=your_token&name=all

资产的导入出导出:

导出:点击资产管理界面导出按钮,导出格式为csv。
导入:必须使用adminset导出的的csv格式进行导入。
      在导入时如果自定义所在机房必须是adminset系统中存在的机房。
      在导入时设备类型必须是下列之一,物理机、虚拟机、容器、网络设备、安全设备、其它。
      在导入时设备状态必须下列之一,使用中、未使用、故障、其它。

应用管理

1 产品线,一个产品线包含多个项目,表关系为一对多。每个产品线或项目有负责人是多对一。
2 项目管理
    2.1)源类型,必须与源地址对应,如源码服务器为gitlab选择git,svn选择svn
    2.2)源地址将会对持续交付产生影响,持续交付中的部署动作将会调用这些信息作为源文件的下载信息。
       支持svn svn协议 如 svn://svn.adminset.com/project
       支持svn http协议 如 http(s)://svn.adminset.com/project
       支持git ssh协议 如 git@gitlab.com/website/project.git 使用ssh协议时请确认相关密钥已经加入到git服务器相应账号中。
       支持git http协议 如 http(s)://github.com/website/project.git
       支持git http协议 如 http(s)://username@gitlab.com/website/project.git
    2.3)程序部署路径为程序部署在目标服务器的路径,程序将调用rsync做全量或增量同步。
       格式举例: /data/www/project
    2.4)配置文件路径功能暂时没有实装,留空白,或加上只相当于注释作用。
 3 认证管理
    3.1)此条目与持续交付模块中的条目里的“认证信息”有关,如果在创建条目则会显示在持续交付模块的认证信息中。
    3.2)此条目与webssh的用户名密码和端口有关,如果要使用WEBSSH功能必须指定相关认证信息。

启用webssh

1)在应用管理>认证管理>添加认证下新建条目,填写ssh用户名,密码,端口号等信息。
2)在资产管理中选择主机点击编辑,选择对应的账号信息。
3)点击webssh按钮即可连接。
4)webssh权限系统: 超管拥有所有权限。
   4.1)普通用户则需要对webssh进行授权,授权先在 用户管理-权限管理模块中需要新建一个URL为/webssh/ 的权限,
   4.2)然后再到资产管理-属组管理中新建一个组,将普通用户可以访问的主机加入到这个组中。
   4.3)回到用户管理-角色管理,新建一个角色,把WEBSSH授权组下可选的组选中。
   4.4)回到用户管理,编辑用户选择对应角色。
注意(可选参考):
webssh服务器使用8888端口,webssh服务开放在0.0.0.0上
生产环境请在/usr/lib/systemd/system/webssh.service中修改启动参数为:
ExecStart=/usr/bin/wssh --xsrf=False --address='x.x.x.x' --maxconn=100 --log-file-prefix=/var/opt/adminset/logs/webssh.log
x.x.x.x IP不要使用公网地址,使用内网服务器的地址。

定时任务用法

首先新建interval 或crontab
新建任务填写名字
选择间隔或crontab
在Keyword arguments(任务指令):处的写法是json格式:
    执行命令<br>
    {"host":"c1", name:"service tomcat restart"}
    执行脚本<br>
    {"host":"c1", name:"reboot.sh"}
拉到最下边Task (registered)
setup.tasks.command是直接向目标机器发送命令
setup.tasks.scripts是在目标机器上执行一个你已经上传到服务器中的脚本,默认路径/var/opt/adminset/data/scripts
注意:已经运行任务以后,再去修改任务不会立即生效,需要重启beat组件,在任务编排的后台管理中可以重启。
      这是由于celery的BUG导致,会在社区发布稳定版本以后修复。

ansible用法

1、自动设置证书认证
通过adminset_agent自动上报的服务器,可以自动设置免密登入(认书认证)
前提是已经在客户端做了hosts解析,并且密码与在服务器的系统配置>密钥设置>ssh password
相同,也就是说如果自动分发密钥必须在系统配置中提前输入密码并保存,系统默认带的密码是root。
注意:系统只有在第一次上报信息时会调用ssh密钥分发.如果以后想使用自动密钥分发需要在资产管理中删除服务信息,然后再自动上报即可。

2、手工设置认证书认证。
配置免密钥登陆客机(ansible和shell管理客户机需要此配置)
在服务器上执行
ssh-keygen -q -N "" -t rsa -f /root/.ssh/id_rsa
ssh-copy-id -i /root/.ssh/id_rsa.pub {客户机IP}
输入客户机密码后认证成功可以ssh免密登入

CMDB自动上报主机以后,在ansible页面执行"同步数据"按钮 将主机信息写入ansible的hosts文件(源hosts文件会被备份到ansible所在目录)
然后将playbook 或是role脚本上传到/var/opt/adminset/data/playbook 或/var/opt/adminset/data/roles

shell用法

依赖免密登入(与ansible同)
CMDB自动上报主机以后,shell界面可以直接调用主机。
然后将常用脚本上传到/var/opt/adminset/data/scripts 中shell脚本栏将会自动发现脚本。

持续交付用法

依赖免密登入(与ansible同)
持续交付模块具体作用为从源码服务器拉取代码到服务器本地,然后再通过rsync同步到project中指定的目标服务器中。持续交付的部署条目依赖应用管理模块中的项目,是一对一关系。
1)部署策略,目前只支持直接部署一种模式。
2)版本信息,可以不填写版本信息,默认将抓取默认分支
   源服务器为git时 写入git的tag名称 或是分支名如gitlab中的tag为1.8.0 则写入1.8.0,如果按分支发布则写相应分支名。
   源服务器为svn时 写入svn的tag或分支路径如: tags/v1.0 或 branches/br_dev01
3)构建清理,勾选后将清除前一次拉取的代码,如果想增量下量代码时请不要勾选此项,不勾选此项将会使用git pull拉取运程代码。
4)shell,代码发布后执行的shell,默认会在远程部署目标服务器上依次执行。
5)同步删除,默认为TRUE,使用rsync的 --delete参数。
5)本地执行,勾选后shell中的代码将在adminset所有服务器本地执行。
6)认证信息:
   a)如果下载使用的是git的http模式或SVN需要用户名密码等信息,在下拉中选择相应的用户名密码,注意一定要勾选“源码认证”,否则将会改变部署本身的用户名密码。
   b)如果你的被部署机器使用了非root和非ssh 22端口部署,在不勾选“源码认证”的情况下选择相应的认证信息。
7)所在服务器,部署的目标服务器,将会被持续交付模块的部署动作调用。
8)清理按钮不会终止部署任务,只会清理部署的状态,用于部署任务意外中止后任务卡进度条的情况。
9)在程序源码的根目录放入exclude.txt文件之后,部署程序将排除其声明的目录或文件,书写格式参考rsync --exclude-from 文件写法。
10)持续交付的普通用户授权:
    1)在用户所在的角色管理-可选部署中选择此用户可以进行的部署任务。
    2)给普通用户授权对应的功能按钮,比如建立URL为/delivery/delideploy/的权限并授权,这样普通用户就能看到部署按钮了。

监控平台用法

当adminset_agent.py自动上报信息,监控会自动发现并配置,无需干预.
当监控页面打开时,前端JS每10秒会异步抓取监控数据
agent默认每60秒上传一次监控数据,可以在adminset_agent.py中自定义
注意:监控平台依赖机房、组、或产品线,如果新加入一台服务器不属于任何机房、组或产品线,那么它将不会出现在监控平台中。
      如果需要在监控平台显示,最简单的方法就是将服务器加入某个机房或组或产品线的项目中。

权限管理

1、新建权限如:
名字:资产管理
URL:/cmdb/asset/
2、新建角色:
名字:资产管理员
可选择权限:资产管理
3、新建用户
在角色一栏选择:资产管理员

权限系统最佳实践

1)左边主菜单栏会根据用户权限自动显示或隐藏。
2)所有功能按钮会根据用户权限自动显示或隐藏。
3)如果要显示左边菜单栏只需要在用户的任何一个相关权限内包括左边主菜单栏的关键字即可。
  示例:包括权限URL /cmdb/asset/ 将自动显示资产管理/主机管理菜单
4)制作用户权限列表可以参考浏览器中显示的URL
    /cmdb/idc/ 显示IDC显面
    /cmdb/cabinet/ 显示机柜管理
    /cmdb/group/ 显示属组管理
5)普通用户默认没有任何功能,也就不显示任何功能按钮,只有在进行授权以后相应按钮才会出现。
    增加 /cmdb/assetadd/ 会显示资产添加按钮并自动显示。
    增加 /cmdb/assetdel/ 会显示主机删除按钮并自动显示。
    增加 /cmdb/assetedit/ 会显示主机编辑按钮并自动显示。
6)源代码中每个app中的url.py文件可以做为授权URL的参考文件。

LDAP认证

支持openldap和WindowsAD,启动LDAP认证以后原有本地账号也可使用。
启用LDAP:
1、在adminset->系统配置 界面的LDAP区域选择ldap_enable True
2、ldap_server 必填信息,例:ldap://ldap.scimall.net.cn
3、ldap_port 可选信息,如果修改过ldap服务器的端口,请填写。
4、base_dn 必填信息,例:ou=dev,dc=gldap,dc=com
5、ldap_manager 必填信息,例:cn=admin,dc=gldap,dc=com
6、ldap_password 必填信息,LDAP管理账户密码。
7、ldap_filter 必选信息,根据实际情况选择。
8、require_group 可选信息,允许登入的ldap组,例:cn=enable,dc=gldap,dc=com 此组需要在LDAP服务器中创建,objectClass类型必须为posixGroup
9、nickname 必选信息,用户名,例:cn
10、is_active 可选信息,自动激活ldap某个组的账号,如果不写此信息ldap用户默认在adminset中为禁用状态,此组需要在LDAP服务器中创建,objectClass类型必须为posixGroup
11、is_superuser 可选信息,自动激活ldap中某个组的账号为超管,此组需要在LDAP服务器中创建,objectClass类型必须为posixGroup

文件管理

可以通过WEB直接对adminset 服务端的脚本文件进行管理。
这些文件可以直接被任务编排模块直接调用。

组件启动管理

service adminset {start|stop|restart} # gunicorn管理程序
service nginx {start|stop|restart}    # web server
service redis {start|stop|restart}    # 缓存和任务列表
service mariadb {start|stop|restart}  # 数据库,账号资产等信息
service celery {start|stop|restart}   # 异步任务主程序
service beat {start|stop|restart}     # 任务调用
service mongod {start|stop|restart}   # 监控数据库
service webssh {start|stop|restart}   # web终端功能
service adminsetd {start|stop|restart}   # 客户端

升级与更新

强烈建设在升级或更新adminset之前先备份数据库,并在测试环境验证通过,因为adminset在快速的发展过程中,每版本功能与结构变化较大。
1) 同中版号升级(如0.2x升级到0.26)
    下载相应版本的代码到本地,建议下载到/opt/adminset,然后执行:
    chmdo +x adminset/install/server/rsync.sh
    adminset/install/server/rsync.sh
2)不同中版号更新(如0.2x升级到0.3x):
    下载相应版本的代码到本地,建议下载到/opt/adminset,然后执行:
    chmdo +x adminset/install/server/update.sh
    adminset/install/server/update.sh
3)二次开发
    rsync.sh脚本只做增量,rsync参数不带--delete选项,不会在生产环境删除代码中已删除的条目,不更新组件配置文件,不会生成新的ORM数据库条目。
    update.sh脚本带--delete选项,同步代码,重新发布各组件的配置文件,并重新生成ORM数据文件(makemigrations migrate)。
    update.sh 可带一个参数,参数为需要更新的应用名,如变更了appconf模块的models只更新appconf可以使用update.sh appconf来更新,如果变更了两个模块直接写两个模块名即可./update.sh cmdb appconf。
    注意:如果做表结构变更,把新生成的{app_name}/migrations中的000X_initial.py文件提交到代码中,以保证更新时ORM配置正确。 
4) 自动化部署
    在自动化部署软件如jenkins或adminset中,拉取代码到本地后,再用命令将其复制到更新目标机器的/opt/adminset 目录,然后执行:
    adminset/install/server/update.sh 或rsync.sh(同中版号)。(这一切的前提要求已经初次安装过adminset服务端)

安全

强烈建议您不要将程序对公网开放
如果需要公网访问请使用VPN
建议生产环境中使用https配置服务器,并对命令执行、webssh等模块进行安全强化
由于开发方便,在django的settings中开启了DEBUG,在生产中需要关闭并指定自己的域名。
adminset设计初衷为超级管理员工具集成平台,所以后台权限都使用超管权限,如果生产环境中不符合安全要求,需要自定义各后台权限调用。

开发者交流

QQ3群:730232593