prometheus自动发现pod配置

按照传统的方法来部署prometheus监控实际发现，新增某个东西的时候都要去一个个配置job很麻烦，不如自动发现pod和svc，把新生成的pod和svc等资源，自动加入到系统的pod和svc监控中去。实际上我们使用的官方k8s部署prometheus已经帮我们完成。我们在部署pod和svc的时候增加配置即可。

yum 安装nginx 增加lua-nginx-module和nginx-gridfs

安装LuaJIT

1

yum install -y luajit luajit-devel

yum安装的Nginx添加第三方模块支持tcp

需求：生产有个业务是四层转发，nginx1.9开始支持tcp层的转发，通过stream实现的。
实现：在Centos7.6下yum直接安装的nginx，添加新模块支持tcp转发；重新编译Nginx并添加 –with-stream 参数。

linux ssh只允许指定的用户登录

linux ssh只允许指定的用户登录的方法按大类分有两种，一种是通过pam模块配置，一种是通过sshd配置文件配置，通过pam来进行控制比较好一点，新建用户直接吧用户添加到文件，删除用户直接在文件里面增加。重启sshd就可以。

mysql 主从

修改 mysql-master1 的配置

1
2
3
4
5
6
7
8
9
10

skip-name-resolve
server-id = 1
log-bin = mysql-bin
sync_binlog = 1
binlog_checksum = none
binlog_format = mixed
log-slave-updates = 1
binlog-ignore-db = mysql
binlog-ignore-db = test
expire_logs_days = 7

mysql 5.6 版本yum安装

添加mysql yum 源

到mysql官方下载mysql源

1
2
3
4

yum -y install https://repo.mysql.com/yum/mysql-5.6-community/el/6/x86_64/mysql-community-release-el6-5.noarch.rpm

yum clean all
yum makecache

redis 数据迁移

常见redis迁移工具

• redis-dump: redis-dump 是一个将redis数据导入/导出为json格式数据的小工具。
• redis-port : 最初是 codis 项目相关工具，支持实时同步redis 数据到 codis/redis等中。
• redis-migrate-tool： 是唯品会开源的redis数据迁移工具,可用于异构redis集群间的数据在线迁移。
• redis-shake : 是阿里云的redis数据同步的工具。支持redis主从->redis-cluster，cluster-cluster等多种redis架构的数据同步。
  阅读全文 »

mongodb 还原

介绍

由于近期公司做数据迁移，从金融云迁移到普通云。涉及到mongodb数据库。数据库有几百G的数据文件。之前mongodb 做的副本集模式。在新环境下mongodb 同样也是做副本集。

elasticsearch数据迁移

迁移原因

公司从金融云迁移到普通云，需要吧elasticsearch的数据迁移到普通云来，elasticsearch的版本一致。ik分词，集群都提前做好

迁移方式

第三方工具迁移或elasticsearch本身快照方式迁移，elasticsearch快照方式迁移需要对原有的es进行配置和重启。这里采用的是第三方工具进行迁移Elaticsearch-dump，Elaticsearch-dumpgithub地址

ETCD 存储 k8s 所有数据信息

ETCD 是k8s集群极为重要的一块服务，存储了集群所有的数据信息。同理，如果发生灾难或者 etcd 的数据丢失，都会影响集群数据的恢复，k8s中只用kube-apiserver和etcd进行数据交互。etcdctl版本: 3.3.18，kubernetes: v1.17.3。均采用二进制安装