8月17日 · 2022年
gRPC开发过程中遇到的问题记录
219 4 0
8月3日 · 2022年
SQLAlchemy因密码含有@符号连接MySQL失败
273 1 0
6月17日 · 2022年
Flyer：基于FastAPI的轻量级API开发框架
660 1 0
3月18日 · 2022年
APISIX高级路由之301/302跳转配置
880 8 0
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
1344 2 0
2月25日 · 2022年
分享一个APISIX网关返回502的典型案例
454 3 0
12月23日 · 2021年
解决百度搜索出现安全中心提醒
451 19 0
12月12日 · 2021年
APISIX运维优化之解决长尾请求（耗时抖动）问题
965 9 0
11月14日 · 2021年
APISIX运维优化之配置文件自动化生成方案
1459 2 0
12月28日 · 2013年
WordPress引用百度Ting音乐方法
2586 0 10
12月8日 · 2014年
百度站长平台robots工具升级后的新发现
3632 6 17
12月18日 · 2016年
Nginx内容替换模块http_substitutions_filter_module及实用案例分享
1504 25 28
脚本编程阅读更多![]()
一开始搭建中国博客联盟，既有博友提醒我，做网址大全这类网站维护很麻烦，需要大量的精力去Debug一些已夭折的网站，更是拿松哥的博客大全举例。当然，我也是深以为然。前些时间，看到梦轩丽人的boke123网址大全的维护记录，好像是纯手工检查，张戈实在是佩服的五体投地，太有毅力了。现在博客联盟也收录的博客也已破200了，全部来自自主提交，不管你是草博还是名博，张戈不会强买强卖。由于大部分都是建站... 
前些天，一位开发同事找到我，说他测试环境的 mongodb 经常挂掉，要我写一个监控或复活的脚本。我觉得很奇怪，测试环境又没啥负载，经常挂掉肯定有非常规原因。跑过去看了一下日志，发现存在stop记录，我就纳闷了，没人操作他还会自己stop。这明显不是挂掉了，于是到history中看了下同事的启动命令：/usr/local/mongodb/bin/mongod --dbpath=/usr... ![]()
分享一个我曾经写过的功能代码：工具身份切换脚本，主要用于脚本执行期间其他身份(如administrator等)的切换，从而获取到所需权限。使用说明：1.将下面的代码保存为bat脚本，如switch.bat，其中的【你要加权执行的外部程序或脚本】需要根据实际情况修改成你将要执行的文件路径2.在你切换前启动的脚本中加入 call "%~dp0switch.bat" (%~dp0表示... 
张戈博客很久以前分享过一个CC攻击的防御脚本，写得不怎么样，不过被51CTO意外转载了。博客从此走上了经常被人拿来练手的不归之路。当然，还是有不少朋友在生产环境使用，并且会留言询问相关问题。根据这些问题的需求，我花了一些时间重新写了一个比较满意的轻量级CC攻击防御脚本，我给它取了一个比较形象的名字：CCKiller，译为CC终结者。一、功能申明分享之前我必须先申明... 
最近实在太忙，没时间研究和折腾，所以也没有什么可以分享到博客的。果然，个人博客坚持原创太不不容易了。张戈博客上线2年多，从1天多更，到一天1更、一周一更，直到现在2星期可能有一更的节奏。。。好了，废话不说了。翻了翻在工作上的印象笔记，发现还是有一些存货可以分享的。挺久之前，组内新申请了一批开发测试机，需要部署环境。除了一些常见的软件要安装之外，还有一个我之前很少用到的Samba。... 一、起因昨天，开发组兄弟发现resin日志出现不少支付宝业务报错信息，用户用支付宝购买了产品，钱到账后公司系统却未返回支付成功状态！这还得了？用户明明支付成功了，结果却显示未到账！！！必须赶紧解决，用户投诉是小，用户流失就大了！仔细分析日志后，发现是解析支付宝接口域名（mapi.alipay.com）时出现延时，导致获取不到支付成功的返回信息！检查发现OpenSUSE的name... 公司最近用上了 SendCloud 的邮件代发服务，于是就有了各种监控需求。比如每天发信额度是不是要超标了或是邮件是否堵塞了等等。最近经常接触 python，所以这次也一样，继续学习使用 python 来完成各种脚本需求。SendCloud 提供了很多对外查询的 API，只要 Get 或 Post 传递用户名和 KEY 即可获得想要的各种数据，比如最简单的【已使用额度】就可以在用户... 
这次生产环境上线了多台Linux服务器，需要全部纳入Zabbix监控范畴，一台一台的去装Zabbix Agentd插件那就太苦逼了，所幸Zabbix客户端插件是支持绿色安装的，就写了个简单的一键安装脚本，然后配合 Secure CRT 的多窗口交互命令一次性就可以搞定了。正常启动Zabbix客户端服务其实只需要2个文件： zabbix_agentd 和 zabbix_agentd.... 上次写到《服务器日志备份超节省空间的思路》，压缩后磁盘占用由93%降到了62%，效果还是不错的！为什么不直接删除呢？其实是因为这些日志涉及到支付等重要业务，保存半年以上也算是保守的做法。今早，又发现几例磁盘空间报警，占用率都在90%+，关键居然是根分区！这要是日志突然暴涨，把根分区撑爆了，那就可以体验到“菊花一紧”的快感了吧？索性利用CRT的全局命令把磁盘空间占用率超过75%的服务... 
上一篇文章发布了备份网站到七牛的第一版，这次应回复要求先公布同步原理及shell源码，让喜欢折腾的人有力可使。其实，这个备份工具的原理非常简单，就是借用了官方的同步工具，配合简单的shell语句即可完成。一、备份原理简介qrsync 是一个根据七牛云存储API实现的简易命令行辅助上传同步工具，支持断点续上传，增量同步，它可将用户本地的某目录的文件同步到七牛云存储中，同步或上传几百GB甚...
8月22日 · 2014年
Shell+Curl网站健康状态检查脚本，抓出中国博客联盟失联站点
6141 8 12
6月4日 · 2015年
Linux下的mongodb服务脚本，以备不时之需
5730 24 8
12月17日 · 2013年
身份切换脚本，免登入切换权限的利器
925 3 1
9月28日 · 2015年
CCKiller：Linux轻量级CC攻击防御工具，秒级检查、自动拉黑和释放
16172 224 285
6月25日 · 2016年
巧用echo命令解决Samba批量添加用户难题
5320 35 19
6月26日 · 2014年
Linux操作系统DNS解析(nameserver)监控脚本
7121 6 20
3月29日 · 2015年
SendCloud邮件队列状态和已使用额度的Python监控脚本
3629 5 2
4月8日 · 2015年
zabbix agentd客户端插件Shell一键自动安装脚本
603 7 5
7月21日 · 2014年
nginx日志切割及7天前的历史日志删除脚本
6539 16 16
8月5日 · 2014年
VPS服务器备份网站到七牛云存储的shell脚本（第二版）
3762 2 14
操作系统阅读更多![]()
上一篇文章的最后，作者提到了文章的参考来源，我特意前往访问了下，发现写得非常不错，特转过来，可以结合阅读，以便更容易理解CPU负载这个概念。你可能对于 Linux 的负载均值（load averages）已有了充分的了解。负载均值在 uptime 或者 top 命令中可以看到，它们可能会显示成这个样子：load average: 0.09, 0.05, 0.01很多人会这样理解负载... 
这两天，监控频繁发来服务器磁盘空间90%+的报警，打扰睡觉不说，塞得满满的总是不舒服的。刚来公司才20天，对于部分细节上的运维了解得还不是很到位，比如这备份机制是怎样的？于是，将几台空间老报警的服务器的文件及任务计划仔细看了下，总算是摸清楚了这新公司的重要日志的备份机制了：由于最终存储备份的2台机器用的是增量同步备份，从而越来越大。而日志要留着以备查验，只好考虑做压缩备份了。... 
这几天复习运维知识，也没怎么关注业界新闻，可等我一关注，又“捅娄子”了，Linux继上次CVE-2014-6271漏洞爆发以来，再次爆发一个严重漏洞：CVE-2015-0235-Linux glibc高危漏洞，正在使用Linux系统的个人或企业，看到消息请立即修复！下面是我转载的检测和修复方法，我个人服务器Centos 6.5已成功修复：一、漏洞概述2015/01/28... ![]()
记得博主以前被问到CPU负载如何才算高的时候，出过一次糗，具体就不记录了。。。在网上找了一篇比较详细的Linux下的CPU负载算法教程，科普一下。不感兴趣，或看不懂的朋友无视即可，不必浪费时间哈。昨天查看Nagios警报信息，发现其中一台服务器CPU负载过重，机器为CentOS系统。信息如下：2011-2-15 (星期二) 17:50 WARNING - load av... 
今天突然发现项目更新脚本在拉代码的时候抛出了一个如下错误：svn: E155004: Working copy \'/home/svn/***/trunk/staticfiles\' locked.svn: E155004: \'/home/svn/***/trunk/staticfiles\' is already locked.svn: run \'svn cleanup\' to remov... 
Redis的安装配置很简单，而且很早之前就装过Redis，可这几天再次安装时居然又遗忘了一些细节，看来好记性不如烂笔头，还是在博客记录一下比较好，至少不用总是抱度娘大腿了。今天编译安装了几次，发现居然没在prefix指定目录生成文件？？看了半天结果发现PREFIX我用了小写字母。。。看来还是得记录一次正确的操作步骤，免得再次出现这种窘迫。一、选择版本前往官方网站：h... 
在家手痒，又把本本的系统换成了Linux。收到公司服务器的报警之后，突然想起需要用VPN远程处理。只好又折腾下linux下的远程桌面了。下面简单的记录下（绝非教程贴）：一、主角：rdesktoprdesktop是linux下支持Windows远程桌面连接的客户端程序，在linux系统下可通过它远程访问Windows桌面，支持多种版本。rdesktop是sourceforge下支持G... 
简单使用：awk ：对于文件中一行行的独处来执行操作 。awk -F ：\'{print $1,$4}\' :使用‘：’来分割这一行，把这一行的第一第四个域打印出来 。AWK命令介绍awk语言的最基本功能是在文件或字符串中基于指定规则浏览和抽取信息，awk抽取信息后，才能进行其他文本操作，完整的awk脚本通常用来格式化文本文件中的信息 1. 调用awk... cronsun 是一个分布式任务系统，单个节点和 Linux 机器上的 crontab 近似。是为了解决多台 Linux 机器上 crontab 任务管理不方便的问题，同时提供任务高可用的支持（当某个节点死机的时候可以自动调度到正常的节点执行）。支持界面管理机器上的任务，支持任务失败邮件提醒，安装简单，使用方便，是替换 crontab 一个不错的选择。... 
昨天下午，RTX群里面公司负责游戏运营的MM发来求助：我还真是孤陋寡闻，以前还真没见过这个问题，赶紧度了度，很快就帮MM解决了问题。 解决办法也很简单：方法①、 关闭所有浏览器，右键点击“网络邻居”，选择“属性”，在“本地连接”上点击右键，选择“修复”即可。方法②、在DOS窗口下（如果是XP，点击屏幕左下角的“开始”，“运行”，输入“cmd”回车）输入：ip...
4月30日 · 2014年
详解Linux系统的CPU负载均值
4890 2 17
7月10日 · 2014年
服务器日志备份超节省空间的思路
857 5 11
1月29日 · 2015年
CVE-2015-0235:Linux glibc高危漏洞的检测及修复方法
825 0 13
4月29日 · 2014年
教你如何查看Linux的CPU负载
1113 34 6
12月21日 · 2014年
[svn: E155004]svn update报database is locked错误的解决办法
1128 12 20
4月17日 · 2015年
Linux系统编译安装Redis以及主从复制配置小记
640 16 6
7月28日 · 2014年
Linux下通过rdesktop连接Windows远程桌面
20281 15 8
3月8日 · 2014年
Linux：awk命令详解
8613 28 27
11月19日 · 2017年
替代crontab，统一定时任务管理系统cronsun简介
2337 50 37
7月25日 · 2014年
解决ping域名时出现“TTL传输中过期”的问题
8102 160 14
WEB应用阅读更多在以前的公司曾安装过Varnish，可惜还没摸热就离职了，这次接着倒腾了下Varnish，并搭建成功，特来记录下，以备后用。一、测试环境系统版本：CentOS 6.4 x64WEB环境：Nginx+PHP+MySQLVarnish：3.0工作原理：简单的说，在本次测试中，Varnish将来自80的请求转发到后端的nginx8080端口，当匹配到请求是jpg、css、... ![]()
今天，不知道写什么，就找来一篇很详细的Nginx安装教程，“滥竽充数”了，另外后面附上马哥关于nginx讲解的核心视频教程。Nginx（发音同 engine x）是一款轻量级的Web 服务器/反向代理服务器及电子邮件（IMAP/POP3）代理服务器，并在一个BSD-like 协议下发行。由俄罗斯的程序设计师Igor Sysoev所开发，供俄国大型的入口网站及搜索引擎Rambler（俄文：Рам... 
最近我在负责一个统一接入层的建设项目，涉及到Haproxy和ospf的运维部署，本文分享一下我在部署Haproxy之后整理的运维部署规范，并实现了Haproxy的多配置文件管理方案。一、部署安装1、下载源码包最新stable版本下载地址：http://www.haproxy.org/download/1.7/src/haproxy-1.7.9.tar.gz2、编译安装tar z... 
张戈博客曾分享过不少关于七牛云存储的一些经验技巧，对七牛感兴趣或者遇到相关问题的朋友可以看一看以前的相关文章： 七牛&又拍云CDN云存储节省GET次数的小技巧 WordPress简单代码开启七牛CDN及集成七牛缩略图的方法 浅谈网站使用七牛云存储之后的robots.txt该如何设置？ Linux/vps本地七天循环备份和七牛远程备份脚本前段时间，百度云加... 张戈博客分享过很多关于缓存加速的教程，自己也是不断的在摸索，追求最佳的网站静态缓存加速方案。在这里简单的总结一下：1、使用虚拟主机的朋友推荐使用缓存插件或php 代码版缓存方案=>点此直达2、使用独立主机的朋友推荐使用Nginx的Fastcgi纯静态缓存方案=>点此直达在我分享了Nginx的Fastcgi缓存之后，有不少朋友已折腾成功。不过有朋友反馈，不知道在多... 最近一直在帮一个购买了张戈博客付费服务的朋友做网站防护，为了简单抵挡一下竞争对手的DDoS攻击，他给网站开启了Incapsula的免费CDN服务。开启CDN之后，我之前给他写的Shell防护脚本也就宣告无效了，因为不管是正常访问还是攻击访问，脚本拿到的IP都是CDN节点的，而我不可能把CDN的节点IP也给禁用了，那就都不能访问了。为了解决这个窘迫，我想到了以前看过的Nginx访问限... Configmap的方式来配置APISIX。最开始我们就采用 Configmap的方式在腾讯云TKE上部署APISIX，当网络区域越开越多时，每个TKE集群都需要去定义一套config.yaml对应的Configmap，管理非常繁琐。因此，这里我们利用Python的Jinja2插件来自动化渲染APISIX的配置文件，整体非常方便！... APISIX的高级路由非常厉害，可以基于任意变量来做转发路由，比如可以基于Header、cookie、querystring参数等。而我们这里历史上有个非常变态的用法：基于Body里面某个参数的值来路由，即不同的值要转发到不同的后端IP:PORT（这个问题主要是因为服务拆分时偷懒，没有推动客户端修改请求留下的尾巴）。... 说到Nginx的内容替换功能，大部分人应该都听说过Nginx内置的的subs_filter替换模块，但是这个模块有个缺憾，就是只能替换一次，而且还不支持正则表达式，这就有些鸡肋了。不过，我们可以集成一个第三方的替换模块：ngx_http_substitutions_filter_module，来实现我们的各种需求。经过测试，这个模块至少有如下实用功能：①、支持多次替换②... 张戈博客不久前分享过Nginx开启缓存为WordPress加速的教程，其中分享了2种缓存模式：代理模式和本地模式。我一直以为单个 ngx_cache_purge 缓存模块只支持proxy代理模式，结果热心的网友回复，其实这个模块也是支持本地缓存的，而且WordPress还有配套的插件！看来还是我孤陋寡闻了！我像发现了新大陆一般，立马进入折腾状态，幸不辱命，已经成功部署！最爽... 记录ipvsadm 启动报错的解决办法，并附上详细的ipvsadm参数说明报错信息：[root@localhost ~]# service ipvsadm start Clearing the current IPVS table: [确定] Applying IPVS configuration: /etc/init.d/ipvsadm: line 62: /etc/sysconfig/ipvsadm: 没有那个文件或目录... 概述我们经常会听到“不会开发的运维不是个好运维”，确实在运维工作当中，娴熟的开发经验能让运维工作如鱼得水，事半功倍！高级的运维除了需要精通Shell脚本编程之外，最好还需要掌握一门高级语言，比如Python、Golang、PHP、Lua等。高级语言除了可以解决一些更复杂的运维场景，还可以帮助我们更好的理解业务，做好业务运维，毕竟知己知彼才能百战不殆。经常看到很多运维同学写接口通常...
9月22日 · 2014年
http加速器Varnish的vcl配置小记(lnmp环境)
513 2 2
5月23日 · 2014年
菜鸟教程：Ngnix安装详解
4314 7 9
9月2日 · 2017年
Haproxy安装部署文档及多配置文件管理方案
1934 21 8
5月10日 · 2015年
为WordPress开启Nginx缩略图功能，七牛从此陌路
4572 17 31
10月6日 · 2015年
Nginx配置多站点下的Proxy_cache或Fastcgi_cache缓存加速
6583 14 19
12月29日 · 2014年
Nginx在CDN加速之后，获取用户真实IP做并发访问限制的方法
17271 24 12
11月14日 · 2021年
APISIX运维优化之配置文件自动化生成方案
1459 2 0
10月28日 · 2021年
APISIX高级路由之通过Body参数转发请求
1460 4 0
12月18日 · 2016年
Nginx内容替换模块http_substitutions_filter_module及实用案例分享
1504 25 28
5月30日 · 2015年
Nginx开启fastcgi_cache缓存加速，支持html伪静态页面
6873 38 128
4月2日 · 2014年
ipvsadm启动报错解决办法,另附ipvsadm详细参数
5173 8 10
6月17日 · 2022年
Flyer：基于FastAPI的轻量级API开发框架
660 1 0
