OpsThoughts

1.Install dependent package(CentOS7)yum install python-pip 2.Get install source codegit clone https://github.com/liftoff/GateOne.git cd GateOne/ python setup.py install 3. Start this service will Generate the configuration file(/etc/gateone/*)/etc/gateone # GateOne's default install dir service gateone start 4. You will see some messages flash by, wait untill you see something like:GateOne will by default run on 443(https), and will allow access only from the hostname that it autodetects,...

今年断断续续在工作之余学习了一下 Python Web框架,下面简要说下学的东西主要有以下几个： Flask(包括各个子系统组件) + Bootstrap主要是第一个接触的就是Flask这个框架,期初给我的感觉就是开发起来非常的快捷、方便,各个子系统也有单独的学习资料,所以从一开始我也就一直断断续续的在折腾；Bootstrap DiaoBao了. SaltStack API(netapi/rest_cherrypy)这个就不用说了吧，运维人都知道；在掌握了SaltStack在命令行的用法之后就需要去学习、探索更多更便利的方法来实现我们想要的效果； Zabbix API监控利器 zabbix, 更不用说了。由于工作上的所需,增减服务器是常有的事,那怎么快速的去添加/删除主机呢,当然就要让接口帮忙去处理啦； 下面是demo的雏形：登录系统使用的是Flask自带的Flask-Login组件，验证码用的是Google的ReCAPTCHA,当然这个在Flask表单中已经集成了；  SaltStack 命令执行,调用的是SaltApi,这里需要手动填写主机名,是个需要优化的地方. 当...

1、docker pull gitlab-ce 2、mkdir -p /data/gitlab/{config,data,logs} 3、docker run --detach \ -p 443:443 -p 80:80 -p 2222:22 \ --name gitlab-ce \ --restart=always \ --volume /data/gitlab/config:/etc/gitlab \ --volume /data/gitlab/logs:/var/log/gitlab \ --volume /data/gitlab/data:/var/opt/gitlab \ docker.io/gitlab/gitlab-ce 或者省略第一个步骤直接创建目录，然后run起来；docker run --detach -p 4433:443 -p 880:80 -p 2222:22 --name gitlab-ce --restart=always --volume /data/gitlab/config:/etc/gitlab --volume /d...

最近有些需求、想法，毕竟devops的风还是很强烈的啊，所以就跟风学学dev方面的东西； flask是一个很小巧很方便的webframe，听朋友说起django非常的重，于是我就在还有点python基础的能力下选择flask学学；准备用这个框架开发新的平台，首先就要有用户登录页面，用flask可以这样实现： 代码结构： flasky├── run.py├── static│   ├── av1.jpg│   ├── av2.jpg│   ├── av3.jpg│   ├── bootstrap.min.css│   ├── bootstrap.min.js│   ├── bootstrap-responsive.min.css│   ├── excanvas.min.js│   ├── fullcalendar.css│   ├── fullcalendar.min.js│   ├─...

安装yum install -y libtool && \ wget https://github.com/stedolan/jq/releases/download/jq-1.5/jq-1.5.tar.gz && \ tar -xf jq-1.5.tar.gz -C /usr/local && \ cd /usr/local/jq-1.5 && \ ./configure --disable-maintainer-mode && \ make LDFLAGS=-all-static && \ make install && \ cp /usr/local/jq-1.5/jq /sbin/ \ echo "程序已安装: `which jq`" 举个栗子，如：我这里有个API请求，在终端中得到的结果是一串json字符串，但是看起来不是那么规整，一下子还很难判断是什么格式；[root@localhost ~]# curl -s http://SERVER_IP/heal...

今天在使用flask-login添加用户认证的时候服务器出现了报错 而我的 base.html是这样写的： 去看官方文档吧，选择对应版本的文档(我这里是0.3.1): 再看看其前面的版本是不是这样定义的：  看吧 版本问题造成。

世有伯乐，然后有千里马。千里马常有，而伯乐不常有；故虽有名马，祗辱于奴隶人之手，骈死于槽枥之间，不以千里称也。 马之千里者，一食或尽粟一石。食马者不知其能千里而食也；是马也，虽有千里之能，食不饱，力不足，才美不外见，且欲与常马等不可得，安求其能千里也？ 策之不以其道，食之不能尽其材，鸣之而不能通其意，执策而临之曰：“天下无马！”呜呼！其真无马邪？其真不知马也！

1.删除用户mongo>use db1 mongo>show users; mongo>db.dropUser("User_name") 2.备份mongodump -h 127.0.0.1:27017 -d health_init -u=health_init -p=health_init -o /tmp/ 3.恢复mongorestore -d health_test --drop -u=dachenadm -p=dachen@ad /tmp/health_ini 4.授权：#创建一个角色： use amdin;db.createRole({role:'sysadmin',roles:[],privileges:[{resource:{anyResource:true},actions:['anyAction']}]}) #授权一个用户 use health;db.createUser( { user: "health", pwd: "healthnx", roles: [{ role: "sysadmin", db:...

我们在执行Jenkins的项目构建的时候一般都是通过web管理界面中的”构建”来执行项目构建操作，但是除此之外我们还可以通过项目配置中的”构建触发器”来触发构建操作，其中”构建触发器”有一种方式是通过配置令牌远程触发项目构建；要启用Token(令牌)远程触发项目构建首先要保证Jenkins服务安装了build-token-root 插件，并且配置了Jenkins的身份验证(不是必须)。 该如何使用这个插件呢？ 打开一个Jenkins Project –> 配置 然后在我们自己的工作机上编写一条远程执行的命令即可，其实就是一条POST请求，如： 在我们工作机上直接执行该curl请求就可以执行项目的构建啦，而不再需要点击页面中的”构建”，用这种方式主要还是习惯吧，敲命令的感觉还是挺好的；一般为了方便我都是写到一个脚本里面去执行，如果有多个项目也可以通过传参啊，多个参数(项目)一起执行构建；看自己的工作环境而定吧，在解决问题的情况下，加快个人工作效率的情况下还是怎么简单怎么来吧。下图就是我执行了这条命令的结果，跟我们手动在web界面点击”构建”是一样的效果。

1. 查看磁盘：[root@localhost ~]# fdisk -l ...... 磁盘 /dev/sdb：21.5 GB, 21474836480 字节，41943040 个扇区 Units = 扇区 of 1 * 512 = 512 bytes 扇区大小(逻辑/物理)：512 字节 / 512 字节 I/O 大小(最小/最佳)：512 字节 / 512 字节 磁盘 /dev/sdc：21.5 GB, 21474836480 字节，41943040 个扇区 Units = 扇区 of 1 * 512 = 512 bytes 扇区大小(逻辑/物理)：512 字节 / 512 字节 I/O 大小(最小/最佳)：512 字节 / 512 字节 ...... 2. 对两块磁盘进行lvm格式分区fdisk /dev/sdb/ --> n --> p --> 分区号(默认) --> 起始扇区(默认) --> last扇区(默认) # 修改分区格式 t --> 8e Linux LVM(分区格式为lvm) --> w (保存) # 退出后对...

问题： 今天开发同事在执行jenkins自动化构建时，由于执行一个mysql更新的操作导致构建失败，报错如下： 这个文件主要是开发用于执行构建部署的时候更新数据库的sql文件，里面有大量的插入语句； 登录到测试服务器将jenkins中的语句在命令行执行了一遍还是报同样的错误 看到这个报错貌似与存储引擎有关系，于是登录到mysql中执行了以下操作 解决思路 1.看了下具体错误代码 在tmp下没有这个文件？但是这个文件时临时生成的，本来就应该没有啊！ 那就是创建的时候出错了?! 2.查看了一下磁盘空间，我滴个乖乖，原来第一块磁盘满了 好吧，清理了一些文件 再次执行构建，顺利完成！

将之前在51CTO的所有博客整理了一番, 点击文章名称就可以跳到51cto读阅啦^o^ 集群/高可用/负载均衡LVS_NAT实现过程… LVS_DR实现过程… Keepalived基础知识 Linux HA集群之DRBD详解 基于keepalived的Haproxy高可用配置 分布式分布式缓存varnish简介 分布式文件系统MogileFS简介 数据库Mysql知识总结（一） Mysql知识总结（二） Mysql知识总结（三） MariaDB/Mysql之主从架构的复制原理及主从/双主配置详解(一) MariaDB/Mysql之主从架构的复制原理及主从/双主配置详解(二) MariaDB之备份恢复准则（三） MariaDB之基于mysqldump与lvm-snapshot备份恢复Databases or Tables（一） MariaDB之基于Percona Xtrabackup备份大数据库【完整备份与增量备份】（二） Linux 剖析Linux系统-小倒腾之Linux DIY定制裁剪(附带简单网络功能)o_o(一) Linux系统-小倒腾之Linux DIY定制裁剪(New ...

一、注册微信公众号首先申请微信公众平台https://mp.weixin.qq.com/一个人最多申请5个公众号，申请完之后就可以根据腾讯的提示使用微信公众号了，然后用你自己的微信扫描关注微信号。 通过扫描过后就可以看到已经有一个用户关注啦；于是我们这里需要查看用户的ID 点击 “用户管理”，然后点击一下用户的头像，这时候我们可以在浏览器的地址栏就可以看到一个这个，其中红色部分就是用户的微信ID啦，先记下这个ID https://mp.weixin.qq.com/cgi-bin/singlesendpage?t=message/send&action=index&tofakeid=250995555&token=94167798&lang=zh_CN   二、下载并配置微信公众平台私有接口1.获取代码 git clone https://github.com/lealife/WeiXin-Private-API 2.修改zabbix配置文件 [root@Control-machine ~]# cp -r WeiXin-Private-...

在我们执行saltstack的时候，minion端会返回一大堆的执行结果显示在master端，那如何将每一次slat执行的结果这些结果保存起来便于日后查询，这里就用到了saltstack的返回程序Returners，可以保存在Redis，Mongodb，MySQL等这些程序当中； 注意这的返回并不是将执行结果返回给master，master再写入到MySQL或者Redis中，而是salt-minion端直接向MySQL或者Redis中写， 下面是操作步骤： 1.安装软件包 master端：yum install -y MySQL-python mysql mysql-serverminion端：yum install -y MySQL-python 2.建立数据库，创建salt所需要的数据库及表结构 CREATE DATABASE `salt` DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci; USE `salt`; ---- Table structure for table `jids`DROP TA...

上篇博文主要总结了一下elk、基于kafka的zookeeper集群搭建，以及系统日志通过zookeeper集群达到我们集群的整个过程。下面我们接着下面这个未完成的几个主题 4.Kibana部署; 5.Nginx负载均衡Kibana请求; 6.案例：nginx日志收集以及MySQL慢日志收集; 7.Kibana报表基本使用;   Kibana的部署;Kibana的作用，想必大家都知道了就是一个展示工具，报表内容非常的丰富； 下面我们在两台es上面搭建两套kibana 1.获取kibana软件包 [root@es1 ~]# wget https://download.elastic.co/kibana/kibana/kibana-4.1.2-linux-x64.tar.gz[root@es1 ~]# tar -xf kibana-4.2.0-linux-x64.tar.gz -C /usr/local/ 2.修改配置文件 [root@es1 ~]# cd /usr/local/[root@es1 local]# ln -sv kibana-4.1.2-linux-x64 ...

背景：最近线上上了ELK，但是只用了一台Redis在中间作为消息队列，以减轻前端es集群的压力，Redis的集群解决方案暂时没有接触过，并且Redis作为消息队列并不是它的强项；所以最近将Redis换成了专业的消息信息发布订阅系统Kafka, Kafka的更多介绍大家可以看这里：传送门  ,关于ELK的知识网上有很多的哦， 此篇博客主要是总结一下目前线上这个平台的实施步骤，ELK是怎么跟Kafka结合起来的。好吧，动手！ ELK架构拓扑：然而我这里的整个日志收集平台就是这样的拓扑： 1，使用一台Nginx代理访问kibana的请求; 2，两台es组成es集群，并且在两台es上面都安装kibana;（以下对elasticsearch简称es） 3，中间三台服务器就是我的kafka(zookeeper)集群啦; 上面写的消费者/生产者这是kafka(zookeeper)中的概念; 4，最后面的就是一大堆的生产服务器啦，上面使用的是logstash，当然除了logstash也可以使用其他的工具来收集你的应用程序的日志，例如：Flume，Scribe，Rsyslog...

最近在使用 logstash来做日志收集 并用 elasticsearch来搜索，因为日志没有进行过滤，没几天就发现elasticsearch的索引文件大的吓人，之前还真没清理过。其实要说清理 也简单，直接到 elasticsearch data文件夹里删掉就行了，但怎么也得做的有点技术含量不是？ 上网站看了看文档，其实也挺简单一条命令就行了 1, # curl -XDELETE ‘http://localhost:9200/logstash-*’ 2, 清理掉了所有的索引文件，我发现curl删除比rm删除要快出很多 下面是主页上的详细介绍，其他部分可以自己看， http://www.elasticsearch.org/guide/reference/api/delet

一、运维技能图 做为一个运维工程师，你知道你应该学习什么？怎么学习吗？朝哪个方向发展吗？下面一张运维工程师技能图，让你了解！ 图片链接，点我^_^ 二、自动化运维路线图 运维自动化在国内已经声名远躁了，随着互联网快速的发展，运维不单单是几个脚本，几个文档可以胜任的！DevOps在国内很受热捧，但是真正的自动化之路，你走到了哪？你知道该怎么走吗？下面的武功心法图告诉你该怎么走！ 图片链接，点我^_^ 三、云计算知识大宝典 从2013年开始，我国云计算持续快速发展，产业规模不断扩大，产业链日趋完善，产业环境不断优化。在这种情况下，不少创业者看到了市场，不少云计算公司崛起。但是人才在哪里，哪些是真正的云计算人才？云计算人才他应该会什么，下面Cloud computing image告诉你 图片链接，点我^_^ 由于原作者制作的图片较大，这里不能正常的显示，点击链接然后扩大可清晰看到！ 天下武功唯快不攻，这句话运用到互联网，就是你最快、最好、最早的掌握了互联网的最新技术，你就是比较吃香的人才！就像最新比较人们的容器Docker技术一样，如果你是先行者，你现在至少是一家Dock...