网站被恶意请求，拉黑IP是重要的手段，如果每次拉黑都要到nginx上配置，未免太low了；我们需要更方便的控制nginx IP黑名单。1.方案黑名单持久化到mysql （常见的方案是redis，但不利于控制，如：不同的IP设置不同的有效期、IP的CRUD、统计等等）；通过lua-nginx-module，在nginx中开辟一块内存（lua_shared_dict），lua将黑名单定期从...

1.前言对于互联网公司来说，nginx的请求日志简直就是一座金矿，如果不能充分利用，简直太可惜了。初期一般都是输出到日志文件，要查什么就awk\grep\uniq\sort...，能满足不少统计需求，但最大的缺点是不直观，不方便监控（目前虽然用了ELK，但是有些信息我还是用shell统计，两者互补）。整理下实施ELK最起码要实现的需求：查询条件（精确匹配）：一级域名、二级域名、客户真实IP、HTT

1.前言跨平台、异构数据库之间的数据同步，方案有限，Oracle OGG算比较靠谱的一个：优点：性能好，大数据量速度快，对线上库性能的影响忽略不计；缺点：安装配置、维护有点麻烦，尤其是后期有字段变更时；个人觉得适合部署在小范围、大数据量、对性能要求较高的同步需求。本案例以Oracle(10.10.10.1) -> mysql(10.10.10.2)说明其部署过程以及注意事项。原理说明

1.目前我们用的activemq，面临一些问题activemq高可用基于leveldb的复制，但activemq从5.*开始，leveldb已经不再有任何更新The LevelDB store has been deprecated and is no longer supported or recommended for use. The recommended store is Kaha...

1.前言自从踏进互联网运维这个行当，就无时不刻不在为高可用费神。nginx、tomcat、缓存、队列、数据库，每个环节高可用的最基本要求是避免单点故障，能够自动failover。mysql的高可用方案说起来很多，但真正想在你家的生产环境大面积使用，发现这个有缺点、那个不完美。之前用过MHA一段时间，代码较复杂（可能因为我没搞过perl），作者不再更新，总担心误切、脑裂……，至于高大上的pxc\..

学习了下calico的iptables规则，挺复杂的，没想到iptables能这么用。。。iptables中的链涉及到不少简写：hep: host endpointwl: workload endpointfw: from workload endpointtw: to wordkoad endpointfip: floating IP (为某容器绑定的一个非容器段的IP地址：如n...

数据库跑一段时间后，因为查询性能、磁盘容量，运维管理等方面的原因，需要将在线数据挪到历史库(不同的服务器）。如我们的在线订单只留3个月数据，3个月以前的就需要到历史库查了。自动归档常见的方式有pt-archiver，但我还是觉得自己写存储过程更靠谱。。。思路：在线库实例打开federated支持，创建数据库dborder(业务库), linkhis(归档用);历史库创建历史表dbo...

1.主从切换因为数据库迁移、升级、主库停机维护等原因，需要将从库升为主，主要步骤如下：1.主库锁库，禁止写入mysql> flush table with read lock;确认Executed_Gtid_Set不再变化，并记录mysql> show master status\G*************************** 1. row ******...

1. 背景我司目前数据库之间的数据同步都是oracle goldengate(ogg)方案，该方案的特点：优点：基于数据库的变更日志同步（oracle redo\mysql binlog），速度很快，对数据库性能影响很小，适合大量数据同步的场景缺点：同步表变更字段、新增表，需要修改数据库服务器上的很多配置文件，比较繁琐，在exact、pump、replicate进程很多的情况下，易...

k8s1.8引入的特性，限制容器存储空间的使用；对于容器资源隔离来说，非常有用，万一应用程序失控，写大量日志把node空间写满，影响就大了。使用很简单，和cpu\memcache一样，如：resources:requests:cpu: 1memory: 2048Miephemeral-storage: 2Gilimits:cpu: 2...