8月17日 · 2022年
gRPC开发过程中遇到的问题记录
454 9 0
8月3日 · 2022年
SQLAlchemy因密码含有@符号连接MySQL失败
596 1 0
6月17日 · 2022年
Flyer：基于FastAPI的轻量级API开发框架
891 3 0
3月18日 · 2022年
APISIX高级路由之301/302跳转配置
1176 9 0
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
1787 3 0
2月25日 · 2022年
分享一个APISIX网关返回502的典型案例
629 3 0
12月23日 · 2021年
解决百度搜索出现安全中心提醒
514 19 0
12月12日 · 2021年
APISIX运维优化之解决长尾请求（耗时抖动）问题
1189 9 0
11月14日 · 2021年
APISIX运维优化之配置文件自动化生成方案
1754 2 0
2月27日 · 2014年
解决Tomcat数据连接池无法释放
9002 10 12
9月10日 · 2016年
分享张戈博客自用的仿百度打赏功能
11487 631 110
7月22日 · 2015年
Nginx通过二级目录（路径）映射不同的反向代理，规避IP+端口访问
3380 81 9
脚本编程阅读更多
上次写到《服务器日志备份超节省空间的思路》，压缩后磁盘占用由93%降到了62%，效果还是不错的！为什么不直接删除呢？其实是因为这些日志涉及到支付等重要业务，保存半年以上也算是保守的做法。今早，又发现几例磁盘空间报警，占用率都在90%+，关键居然是根分区！这要是日志突然暴涨，把根分区撑爆了，那就可以体验到“菊花一紧”的快感了吧？索性利用CRT的全局命令把磁盘空间占用率超过75%的服务... ![]()
最近老是有用户申请开通某网站的访问权限，我接手之前浏览权限的设置方法是修改tomcat下的server.xml配置文件，通过定义allow="IP.."的访问规则来控制浏览权限。这种方法有个很不好的地方，每加一次权限，你就得重启一次tomcat，用户老是挤牙膏一样，一次一两个IP的发邮件来申请开通，不但很烦人，而且对正在使用的用户体验也非常的糟糕！于是我决定要改善这个糟糕的局面。在Linu... 
说到shell可控多线程，网上分享的大部分是管道控制的方案。这种方案，张戈博客也曾经实战并分享过一次：《Shell+Curl网站健康状态检查脚本，抓出中国博客联盟失联站点》，感兴趣的朋友可以看看。下面张戈博客再分享另一种更容易理解的入门级可控多线程shell脚本方案：任务切割、各个击破。先来 1 段场景描述：某日，在鹅厂接到了这个任务，需要在Linux服务器中，对几... 最新更新：张戈博客已推出功能更强大的轻量级CC攻击防御脚本工具CCKiller==>传送门前天没事写了一个防CC攻击的Shell脚本，没想到这么快就要用上了，原因是因为360网站卫士的缓存黑名单突然无法过滤后台，导致WordPress无法登录！虽然，可以通过修改本地hosts文件来解决这个问题，但是还是想暂时取消CDN加速和防护来测试下服务器的性能优化及安全防护。前天写的Sh... 
这次生产环境上线了多台Linux服务器，需要全部纳入Zabbix监控范畴，一台一台的去装Zabbix Agentd插件那就太苦逼了，所幸Zabbix客户端插件是支持绿色安装的，就写了个简单的一键安装脚本，然后配合 Secure CRT 的多窗口交互命令一次性就可以搞定了。正常启动Zabbix客户端服务其实只需要2个文件： zabbix_agentd 和 zabbix_agentd.... 
昨天，同事告诉我发现一个诡异的问题，grep无法搜索shell中的变量，着实很惊讶。到他所说的服务器上试了下，还真是不行！大概就是这样一个要求：①、有个文本为userid.txt，里面每一行一个用户id，类似如下：00010003000500070009②、另外还有一个文本为record.txt，里面是所有用户的操作记录，一行一条，并且包含有id，类似如下：...
7月21日 · 2014年
nginx日志切割及7天前的历史日志删除脚本
6605 16 16
1月10日 · 2014年
Win平台Web访问白名单设置脚本(IP安全性原则)
3479 0 0
11月8日 · 2015年
分享一个入门级可控多线程shell脚本方案
5482 30 13
11月5日 · 2014年
Linux系统防CC攻击自动拉黑IP增强版Shell脚本
26134 55 53
4月8日 · 2015年
zabbix agentd客户端插件Shell一键自动安装脚本
650 7 5
11月15日 · 2014年
grep无法查找shell传过来的变量？先注意一下文本格式吧！
12135 21 6
操作系统阅读更多![]()
本人是Linux运维工程师，对这方面有点心得，现在我说说要掌握哪方面的工具吧。说到工具，在行外可以说是技能，在行内我们一般称为工具，就是运维必须要掌握的工具。我就大概列出这几方面，这样入门就基本没问题了。Linux系统如果是学习可以选用Redhat或CentOS，特别是CentOS在企业中用得最多，当然还会有其它版本的，但学习者还是以这2个版本学习就行，因为这两个版本都是兄... ![]()
刚在我的订阅里面看到这篇文章，在爆笑之余也让跟我一样的运维农民工们发人深省，所以转过来分享一下。妹子啊妹子，网上找的东西也不能直接照搬啊，太萌了~~哈哈！作者也是挺萌的，重要服务器给妹子当成练手的工具，看来荷尔蒙又出来作恶了，嘿嘿！下面且看事件始末：经历了两天不懈努力，终于恢复了一次误操作删除的生产服务器数据。对本次事故过程和解决办法记录在此，警醒自己，也提示别人莫犯此错。... 
这两天，监控频繁发来服务器磁盘空间90%+的报警，打扰睡觉不说，塞得满满的总是不舒服的。刚来公司才20天，对于部分细节上的运维了解得还不是很到位，比如这备份机制是怎样的？于是，将几台空间老报警的服务器的文件及任务计划仔细看了下，总算是摸清楚了这新公司的重要日志的备份机制了：由于最终存储备份的2台机器用的是增量同步备份，从而越来越大。而日志要留着以备查验，只好考虑做压缩备份了。... ![]()
今天发现一个疑难杂症：发现批量发布一个新版本程序时，发现有一台没有成功。亲自登陆上去看了下，发现原来是发布帐号在某个目录下创建目录失败了！人工 touch 试了下，发现提示没有权限。然后 ls -l 看了下，发现一切正常：[root@10.12.212.132:/data/TNM2/release]# ll 36240-rw-r--r-- 1 publish user... 
虽然 MAC 地址由厂商指定，但用户可以改变它，这就是传说中的“MAC 地址欺骗”。你可能会疑惑，弄这个有什么用？好吧，玛思阁举个例子，比如，电信宽带的PP拨号很多时候就是绑定MAC地址的，换一台电脑可能就会拨号失败，这时候的解决办法就是在新机器上克隆已绑定的那个MAC地址即可！一般大部分人仅知道如何对Windows系统的网卡进行克隆，而本文将向大家展示在 Linux 上进行 MAC 地址克隆的方法。... ![]()
Linux下出现IP冲突，是不会像Windows那样，在右下角弹出冲突提示的。博主就出过一次糗，记得当时是在VM虚拟机里面安装了4个redhat，测试LVS集群。结果发现其中一台RealServer老是掉线，重启network服务后能正常几分钟，然后又掉线了。。。4个Redhat都是VM克隆出来的、完全一致的系统，仅其中一台出问题，所以博主觉得匪夷所思！直到，后来我的办公电脑（宿主）网线直接没... 
今天突然发现项目更新脚本在拉代码的时候抛出了一个如下错误：svn: E155004: Working copy \'/home/svn/***/trunk/staticfiles\' locked.svn: E155004: \'/home/svn/***/trunk/staticfiles\' is already locked.svn: run \'svn cleanup\' to remov... 这两天接到的任务是给JAVA开发项目组部署【JAVA+MySQL主从+Redis主从】运行环境。部署过程中大问题倒没有，小问题却不少，因此也涨了不少经验值。后续有时间我会一一整理记录下来，沉淀而不忘分享。今天，装完一台redis，并配置好redis.conf后，想偷懒直接用scp传到另一台redis，省去全部重新编辑的麻烦。结果一执行就出现下面这个错误：bash: scp: c... 这是一个Linux系统常见的故障，网络上也能轻易的找到解决办法，我也只是在工作中遇到了这个问题，所以在博客记录下，以备不时之需。一、报错截图：图为resin的报错日志，很明显提示了Too many open files： 二、临时解决临时的解决办法很简单，先执行ulimit -n 65535，然后重启resin即可。Ps：请注意启动环境是否生效：... ![]()
从2006年毕业至今，从事IT行业已经接近8个年头。一路走来有很多心路历程和技术心得都写在了51CTO的博客中，不少文字现在看来已显稚嫩，但是这正是我真实的成长之路。这八年，从最基础的网络管理员开始，从最下层的IT工作比如说做水晶头做起，慢慢的走过国企、干过外企，做过网络管理员、系统工程师、项目经理、Linux讲师，经历过众多重大的项目（包括政府部门、国家重要民生相关项目），流过汗熬过夜，...
12月18日 · 2013年
详解Linux运维工程师必备技能
2975 12 1
5月24日 · 2014年
妹子你真萌：一次心惊肉跳的服务器误删文件的恢复过程
3232 7 44
7月10日 · 2014年
服务器日志备份超节省空间的思路
888 5 11
12月19日 · 2013年
分享一个Linux无法创建文件夹，但是目录权限却显示正常的问题和解决
6893 4 0
4月3日 · 2014年
Linux ：MAC 地址克隆方法
1272 3 25
5月4日 · 2014年
在Linux中发现IP地址冲突的方法
4461 3 8
12月21日 · 2014年
[svn: E155004]svn update报database is locked错误的解决办法
1226 12 20
3月27日 · 2015年
linux/scp命令报“bash: scp: command not found lost connection”错误的解决办法
1250 14 3
10月15日 · 2014年
Linux系统最大文件打开数优化，解决Too many open files报错
1023 4 3
12月30日 · 2013年
Linux从零到高手的进阶心得
652 9 2
WEB应用阅读更多说到Nginx的内容替换功能，大部分人应该都听说过Nginx内置的的subs_filter替换模块，但是这个模块有个缺憾，就是只能替换一次，而且还不支持正则表达式，这就有些鸡肋了。不过，我们可以集成一个第三方的替换模块：ngx_http_substitutions_filter_module，来实现我们的各种需求。经过测试，这个模块至少有如下实用功能：①、支持多次替换②... 上上篇文章《nginx平滑升级&新增模块》提到了公司的https访问需求。当我新增了SSL模块之后，却发现以前还真没部署过https访问。下面整理我的部署过程，并收集了一下Apache和Tomcat这2种Linux下常用的WEB软件配置SSL的简单简单步骤，以便回头翻阅。一、下载证书成功申请SSL证书之后，就可以下载到配置SSL的证书了！一般情况下，都可以选择下载相应WEB... 
最近给张戈博客全站开启了https，所以对这块关注比较多。昨天脑补的时候发现http2.0只支持SSL加密的网站，即https。于是心血来潮，给张戈博客开启了http 2.0，尝尝鲜。查了下资料，发现Nginx不久前发布的 1.9.5版本支持http2.0，而1.8.x时代只是对SPDY进行了支持。一直用的1.62稳定版，此次为了测试http2.0，直接进行了版本跳跃，升级到了1.9.5版... ![]()
博客建站已过2个月了，大部分文章总是在记录博客的折腾史，估计大部分喜欢折腾的博主都有这样的时期吧！现在博客基本算是定型稳定，是时候写点与主题相关的博文了，否则，不知道的还以为我这是WP折腾博客呢！这几天，老大发新年任务了，把新技术的研究就交给了我，其中又一项就是Jboss的集群。说实话，对于Jboss，我真的谈不上熟练，因为长期都在管理Tomcat平台。揽到这个任务，我倒也非常高兴，终于可以... 
最近在配置Haproxy代理的时候发现一个很有意思的事情：Haproxy在代理http请求会无脑加一个X-Forwarded-For（后文简称XFF），而不是将自身的IP地址加到已存在的XFF列表之后，WTF！还有这种神操作？确认无误之后，我到Haproxy的github开了一个issue反馈了这个BUG（issue地址），最终了解到了Haproxy就是这样设计的，并得到了解决方案，而且这个is... 自从APISIX网关推广使用以来，在我们部门已经有很多生产业务接入使用。有一天被拉进了一个问题群，被告知APISIX网关性能有问题，整体表现还不如之前的ZUUL网关。纳尼？APISIX性能再怎么不济也不至于比ZUUL差吧？废话少说，直接上手弄了个串行请求对比测试了一下生产环境的APISIX网关和ZUUL网关，结果大跌眼镜！正常情况下，APISIX的耗时都优于ZUUL网关，但是AP... 
很久没写文章了，博客已经长草了，今天挤点时间分享一些小干货，也是回应一下不少站长朋友的留言问题。有不少站长朋友问张戈博客的静态文件为啥是另外一个域名？有啥好处？如何实现？其实这算是一种动静分离的做法，不过我这里用了偷懒的办法实现，而非彻底的动静分离，不过最终效果的区别并不大。先啰嗦一下动静分离的概念和好处。一、动静分离我们的网站简单来说分为2种数据... 
我们都知道网络上的爬虫非常多，有对网站收录有益的，比如百度蜘蛛（Baiduspider），也有不但不遵守robots规则对服务器造成压力，还不能为网站带来流量的无用爬虫，比如宜搜蜘蛛（YisouSpider）（最新补充：宜搜蜘蛛已被UC神马搜索收购！所以本文已去掉宜搜蜘蛛的禁封！==>相关文章)。最近张戈发现nginx日志中出现了好多宜搜等垃圾的抓取记录，于是整理收集了网络上各种禁止垃圾蜘蛛... 
这个问题不知道有没有人遇到过，反正度娘和谷姐都没能帮到我！困扰了我挺长时间了，今天偶尔将代码放到Apache服务器下测试时，意外解决了！问题是这样的，我搭建了一个网站icon图标抓取的API接口，正常情况下对象的传参是通过$_GET[\'url\']获取的，因此常规获取图标的地址应该是：http://domain.com/?url=zhang.ge或http://domai... 
张戈博客目前用的是Nginx的fastcgi缓存方案，属于纯净态缓存模式，所以前台登录态什么的基本都没了。如果要兼顾前台登录态，又想速度快，有没有解决方案？之前在分享张戈博客优化方案时提到，要实现网站轻度缓存，方案还是有的，比如 DB Cache Reloaded、Redis、memcached等。最近恰好遇到一个数据缓存需求，因此尝试了下memcached方案，下面简单分享下我的... 
很多业务系统都用到了Haproxy这个高性能反向代理负载均衡器。在日常运维当中，Haproxy后端节点的上（接入）、下（剔除）线操作绝对是家常便饭，而且人工重启的时候经常有胆颤心惊的感觉。下面分享一种命令行操作Haproxy后端节点平滑上下线的技巧。一、新增配置Haproxy自带了一个非常实用的管理页面，我们可以在harpxoy.cfg新增如下配置，开启Haproxy监控管理页面功...
12月18日 · 2016年
Nginx内容替换模块http_substitutions_filter_module及实用案例分享
1581 25 28
12月27日 · 2014年
Linux+Nginx/Apache/Tomcat新增SSL证书，开启https访问教程
23189 51 24
12月8日 · 2015年
升级Nginx1.9.5以上版本，开启博客网站http2.0时代
6792 17 18
2月18日 · 2014年
LVS中采用Jboss作为RealServer的配置要点
592 0 6
4月12日 · 2019年
惊现Haproxy重复添加X-Forwarded-For问题（附官方解决办法）
3788 10 7
12月12日 · 2021年
APISIX运维优化之解决长尾请求（耗时抖动）问题
1189 9 0
2月3日 · 2018年
小网站最简单实用的动静分离优化方案
11267 48 45
9月25日 · 2014年
服务器反爬虫攻略：Apache/Nginx/PHP禁止某些User Agent抓取网站
2103 39 67
3月3日 · 2015年
Apache/Nginx伪静态规则匹配http://出现的问题与解决
821 4 9
5月2日 · 2016年
WordPress启用memcached动态缓存以及报错解决
18691 38 87
2月24日 · 2018年
Haproxy进阶管理：命令行控制后端节点上下线
980 11 11
