Python 从零搭建 Conf_Web 配置管理平台-白红宇

Python 从零搭建 Conf_Web 配置管理平台

阅读量：4473 次

发布时间：2019-06-08

本文共 4274 字，大约阅读时间需要 14 分钟。

作者:Eagle

某船舶行业科技公司，运维工程师，51Reboot学员。通过在51Reboot学习，由运维工程师转至运维开发工程师。完成公司自动化平台的构建，对运维开发有了自己的理解，空闲时间写了这么一个小的项目来和大家分享一下。

环境

CentOS 6/7 x64

Python： 2.7.6

Etcd： 3.2.18

Confd： 0.16.0

Nginx： 1.12.1

效果演示

一拓扑图：

二涉及软件

etd：分布式KV存储系统，一般用于共享配置和服务注册与发现。是ETOS存储格式类似于文件系统，以根“/”开始下面一级级目录，最后一个是Key，一个关键对应一个值。

etcd集群：使用Raft协议保证每个节点数据一致，由多个节点对外提供服务。这里只用单台。

confd：管理本地应用配置文件，使用etcd或consul存储的数据渲染模板，还支持redis，zookeeper等.confd有一个手表功能，通过HTTP API定期监测对应的etcd中目录变化，获取最新的价值，然后竟染模板

Nginx： Nginx是一款轻量级的Web服务器/反向代理服务器以及电子邮件代理服务器，并在一个BSD-like协议下发行。来自俄罗斯的程序设计师l gor Sysoev所开发，供俄国大型的入口网站及搜索引擎Rambler使用。其特点是占有内存少，并发能力强，事实上nginx的并发能力确实在同类型的网页服务器中表现较好。

三软件部署

环境说明：建议使用Cento7.X X64

1）安装 etcd（这里安装的单机，集群环境根据自己的需求选取）

# yum install etcd -y# sed -i  's/localhost/0.0.0.0/g'  /etc/etcd/etcd.conf  #配置监听地址# systemctl   start  etcd  &&  systemctl  enable  etcd  #启动服务设置开机动

2）安装 nginx

#cd  /usr/local/src #wget  http://nginx.org/download/nginx-1.12.1.tar.gz #git clone https://github.com/yaoweibin/nginx_upstream_check_module.git   #tar  -zxvf  nginx-1.12.1.tar.gz  #cd nginx-1.12.1 #patch  -p1

3）安装 confd

下载地址https://github.com/kelseyhightower/confd/releases

下载完毕丢到系统里面

#cp confd / usr / bin / confd ＃哪个confd在/ usr / bin中/ confd

4）创建配置文件目录

# mkdir -p /etc/confd/{conf.d,templates} conf.d          # 资源模板，下面文件必须以toml后缀 templates       # 配置文件模板，下面文件必须以tmpl后缀

5）创建 confd 配置文件

# vi /etc/confd/conf.d/app01.conf.toml   [template]   src = "app01.conf.tmpl"                              #默认在/etc/confd/templates目录下   dest = "/usr/local/nginx/conf/vhost/app01.conf"      #要更新的配置文件   keys = [      "/Shopping",                                      #监测的key   ]   reload_cmd ="/usr/local/nginx/sbin/nginx -s reload"   #最后执行的命令

6）创建confd模板

# vi  /etc/confd/templates/app01.conf.tmpl       upstream {
    {getv "/Shopping/nginx/cluster1/proxy_name"}} {     {
    {range getvs "/Shopping/nginx/cluster1/upstream/*"}}       server {
    {.}};     {
    {end}}     check interval=5000 rise=1 fall=5 timeout=4000 type=http;     check_http_send "HEAD / HTTP/1.0\r\n\r\n";     check_http_expect_alive http_2xx http_3xx;   }        server {      server_name   {
    {range getvs "/Shopping/nginx/cluster1/server_name/*"}} {
    {.}} {
    {end}};      location / {        proxy_pass        http://{
    {getv  "/Shopping/nginx/cluster1/proxy_name"}};        proxy_redirect off;        proxy_set_header Host $host;        proxy_set_header X-Real-IP $remote_addr;        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;     }       location /status {           check_status;           access_log   off;          }   }

7）启动 confd 并设置开机启动

开机启动脚本会随文档附带

拷贝至/etc/init.d/confd,只需要更改等改为连接地址即可

＃/ etc / init.d / confd start && chkconfig --add confd && chkconfig confd on

四配置平台部署

1）Github 克隆平台代码安装平台依赖

# git  clone  https://github.com/1032231418/Conf_Web.git # cd Conf_Web/ospweb/ #virtualenv   env                  #建议创建一个沙盒环境跑该平台 # source  env/bin/activate         #使用沙盒环境 # pip install -r requirement.txt   #安装相关软件

2）创建数据库并将表刷入数据库

# vi opsweb/settings.py   #这里数据库信息改为自己的数据库信息     DATABASES = {         'default': {         'ENGINE': 'django.db.backends.mysql',         'NAME': 'confd',         'HOST': '192.168.8.114',         'USER': 'root',         'PASSWORD': '123456',         'PORT': 3306,       }     }          ETCD_Server = "192.168.0.221"        #这里改为自己etcd 的ip地址     ETCD_Port = 2379      # python manage.py   migrate          #提交迁移文件至数据库,将表刷入数据库

3）创建超级管理员账号