1月16日 · 2025年
FastTTS：支持私有化部署和源阅读无缝对接的语音合成服务
547 10 2
8月17日 · 2022年
gRPC开发过程中遇到的问题记录
2966 39 4
8月3日 · 2022年
SQLAlchemy因密码含有@符号连接MySQL失败
2934 14 2
6月17日 · 2022年
Flyer：基于FastAPI的轻量级API开发框架
3582 6 0
3月18日 · 2022年
APISIX高级路由之301/302跳转配置
3406 10 0
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5186 6 1
2月25日 · 2022年
分享一个APISIX网关返回502的典型案例
2317 7 1
12月23日 · 2021年
解决百度搜索出现安全中心提醒
1737 27 4
12月12日 · 2021年
APISIX运维优化之解决长尾请求（耗时抖动）问题
3398 11 0
3月29日 · 2016年
MySQL主从报错解决：Failed to initialize the master info structure
1497 6 9
2月24日 · 2018年
Haproxy进阶管理：命令行控制后端节点上下线
1766 11 11
4月30日 · 2014年
详解Linux系统的CPU负载均值
5451 2 17
脚本编程阅读更多![]()
昨天，发布了《完美实现移动主题在360网站卫士缓存全开情况下的切换》一文，通过JS实现了主题在移动端访问时的自动切换，最后提到了可以在电脑版和移动版的footer里面加上手动切换链接，实现手动版本切换功能。今早发现，电脑版切换到移动版是没问题了，但是移动版切换到电脑版，JS将会再次工作uaredirect.js会再次做UA判断，然后由又跳回了电脑版！ 也就是说，手机上浏览无法手动切换到电脑... 
说到shell可控多线程，网上分享的大部分是管道控制的方案。这种方案，张戈博客也曾经实战并分享过一次：《Shell+Curl网站健康状态检查脚本，抓出中国博客联盟失联站点》，感兴趣的朋友可以看看。下面张戈博客再分享另一种更容易理解的入门级可控多线程shell脚本方案：任务切割、各个击破。先来 1 段场景描述：某日，在鹅厂接到了这个任务，需要在Linux服务器中，对几... 
最近实在太忙，没时间研究和折腾，所以也没有什么可以分享到博客的。果然，个人博客坚持原创太不不容易了。张戈博客上线2年多，从1天多更，到一天1更、一周一更，直到现在2星期可能有一更的节奏。。。好了，废话不说了。翻了翻在工作上的印象笔记，发现还是有一些存货可以分享的。挺久之前，组内新申请了一批开发测试机，需要部署环境。除了一些常见的软件要安装之外，还有一个我之前很少用到的Samba。... 
此工具可将标准版的sitemap.xml转换成电脑版—移动版的对应关系sitemap，用于百度开放适配&360移动适配的文件提交。工具用批处理制作，仅起到批量转换的辅助功效，免去手动制作的麻烦！可以用于移动适配的提交测试！张戈不会php，而shell又不能普遍适用，所以只能挑了自己比较拿手的批处理来制作这个辅助工具！因为批处理的局限性，做出来的工具只能用于尝鲜测试使用！或长期不更新的CMS企业网站来提交移动适配sitemap。另外，响应式站点亦无需提交适配！... 
上一篇文章发布了备份网站到七牛的第一版，这次应回复要求先公布同步原理及shell源码，让喜欢折腾的人有力可使。其实，这个备份工具的原理非常简单，就是借用了官方的同步工具，配合简单的shell语句即可完成。一、备份原理简介qrsync 是一个根据七牛云存储API实现的简易命令行辅助上传同步工具，支持断点续上传，增量同步，它可将用户本地的某目录的文件同步到七牛云存储中，同步或上传几百GB甚... 最近一直在开发自动化运维发布平台，底层命令行、文件通道主要基于paramiko模块，使用过程中遇到各种各样的问题，本文主要用于收集问题及解决记录，以备后续使用。一、Error reading SSH protocol banner连接错误这个关键词，在百度、谷歌一搜一大把的提问，也有少部分给出了解决方案，但是最终都无法解决，我经过不断尝试和解读paramiko源码，终于搞定了这个问题，在此... 难得今天晚上9点前赶回家，而且最近草稿箱也压了不少“湿货”，就挑一篇发出来好了！不过在发文章之前先吐槽一下那个从昨天攻击张戈博客到现在还在继续的无聊蛋疼之人！本来就算开启了云加速全缓存也是扛不住的，因为静态中混着动态请求，比如浏览计数。还好灵机一动，对这些动态做了点小手脚，现在基本毫无压力了！粗略分析一下这个攻击博客的小人，无外乎是2种人：①、最近张戈博客流量大涨，估计遭人... ![]()
Jboss的研究稍有卡壳，那就来点基础教程好了。与众多脚本语言一样，Shell脚本在执行时出错是很常见的，最简单的原因无外乎脚本在编写的过程中出现了语法错误或者不小心输错了命令等。找出脚本中的错误是很重要的能力。比如，我经常不小心会把echo命令写成了ehco，那么执行就会出现下面这种情况：[root@localhost ~]# sh testtest: line 2: ehco:... 最近手头有个业务是基于Apache Karaf开发的，运行在K8S里面，跑了一堆的bundle，偶尔里面挂一两个bundle容器是没什么感知的，但是业务可能会局部异常。要推动业务优化的话，周期就会拉得很长，因此先弄个定时拨测来监控下bundle是不是都在正常运行的。看了下要查看Karaf里面的bundle需要ssh进去执行bundle list命令，因此基于之前的经验利用Python p...
5月26日 · 2014年
js获取url中?后的参数，修复移动版无法切换到电脑版的BUG
4498 3 18
11月8日 · 2015年
分享一个入门级可控多线程shell脚本方案
6175 31 12
6月25日 · 2016年
巧用echo命令解决Samba批量添加用户难题
6061 35 19
5月16日 · 2014年
百度开放适配&360移动适配专用Sitemap格式转换工具
8645 13 52
8月5日 · 2014年
VPS服务器备份网站到七牛云存储的shell脚本（第二版）
4412 2 14
6月16日 · 2017年
Python远程控制模块paramiko遇到的问题及解决记录
5843 32 17
3月24日 · 2015年
bat/cmd批处理连接SqlServer数据库查询脚本
2524 12 10
2月19日 · 2014年
Shell脚本的简单排错法及调试程序bashdb
9434 20 32
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5186 6 1
操作系统阅读更多
重量网络最近买了一个腾讯云的VPS，一直在折腾着，偶然请我帮忙敲几行命令解决一些小问题。这不，今天他通过yum在线安装了一个vsftp后，发现不太会用，就按照网上的教程东搞西搞。最后发现无法上传文件了，就给我操作了一把。用SecureCRT远程登录后，我做了如下检查：①、打开了vsftp配置文件（/etc/vsftpd/vsftpd.conf）检查write_enable状... 
部门刚上线了一个新系统，发现一个BUG，于是开发直接上机器调试，他认为是文件目录权限不够的问题，于是想用chmod -R 777 先给这个程序目录全部权限试试。结果，那家伙手一抖命令敲成了：chmod 777 -R /*而且想都不想就回车了，然后弹出一堆 /proc/*** 没权限更改目录权限的错误提示，我一看就冷了一大截。。。里面让他ctrl +C 终止命令。不出所想，系... 最近在上海新建机房的时候，给了我2台M2机型服务器，在做初始化的时候发现有一堆磁盘：[root@Centos64:~]# fdisk -l | grep \'300.1 GB\' | sortDisk /dev/sda: 300.1 GB, 300069052416 bytesDisk /dev/sdb: 300.1 GB, 300069052416 bytesDisk /dev/sdc: 3... 这两天工作是用几台PC机给开发组搭建本地测试环境：CentOS-6.4-x86_64 + ant + svn。为了操作简单及系统稳定，全部系统采用最小化安装方法。又出于拓展考虑，决定给每台测试机建立一个本地yum仓库，方便安装缺失组件，而不再受到依赖性的困扰。下面分享一下利用iso镜像搭建本地yum仓库的简单步骤：一、准备工作下载或拷贝CentOS或RedHat的iso镜像... 概述：网络管理是基础运维中一个很重要的工作，在看似平静的网络运行中，其实暗流汹涌，要保证业务系统稳定运行，网络运维者必须要了解网络的流量状态、各个网段的使用情形，带宽的利用率、网络是否存在瓶颈等，同时，当网络发生故障时，必须能够及时发现问题，迅速定位问题，进而解决问题，这就需要一些网络监测工具的辅助，本节将介绍一款小巧但功能很强大的网络实时流量监测工具iftop。一、iftop概述ifto... 
嗨，我正在写一个简单的程序，我要让这个程序打印出一个整数。 #include <stdio.h> int main() { int linux = 701; printf("%d", linux); return 0; } 够简单吧。真的吗？我把它存成了code.c现在我... ![]()
今天，在站长交流群里面，又一个站长抱怨服务器每星期都必须手动重启一次，否则QQ登陆功能无法使用，原因是服务器时间快了5分钟以上，腾讯服务器拒绝提供API服务。本以为只要加一个简单的linux时间同步任务计划即可，结果我拿到root后，发现并不是那么一回事。在我正确添加了ntpdate 任务计划之后，手动执行了时间同步命令，发现时间依然没有变化。手动执行 date -s 16:00:... ![]()
初识nfs还是在测试lvs负载均衡的时候，为了保证代码的一致性，将一台Realserver作为nfs服务器，而其他Realserver均以nfs将代码挂载过来。这样就保证了代码的一致性，但也是由很大隐患的，一旦那台Realserver宕机，那就全军覆没了...好了，废话不多说，进入nfs挂载简单步骤。一、安装nfs一般redhat是默认安装了nfs服务的，如果非默认安装且取消勾选nfs的话... ![]()
时常，某个程序或软件并没有语法错误，并且你检查它的相关内容也确实没有发现问题。这是因为你用普通文本编辑器软件来查看的时候，有许多字符没有显示出来，但在终端使用cat命令可以很容易地检测出是否存在这些字符。首先，我们创建一个简单的文本文件，写入一些特殊字符。打开终端，运行命令：printf \'testing\012\011\011testing\014\010\012more tes...
6月12日 · 2014年
解决Centos下vsftp无法上传文件的问题，附vsftp配置详解
29932 47 22
1月14日 · 2014年
Linux系统chmod误操作目录权限恢复方法
1241 4 8
9月3日 · 2016年
Linux系统LVM逻辑卷创建过程以及自动化脚本
7116 54 27
7月4日 · 2014年
利用Centos或RedHat的iso镜像搭建本地yum仓库
1300 5 16
9月29日 · 2014年
Linux网络实时流量监测工具iftop的安装使用
7906 14 1
1月13日 · 2014年
事实证明Linux永远是NO.1
3114 6 3
8月27日 · 2014年
Linux系统date命令无法修改或同步时间的解决办法
7668 7 7
1月23日 · 2014年
Redhat设置NFS挂载的简单步骤
7540 2 0
12月30日 · 2013年
Linux终端：用cat命令查看不可见字符
1121 0 1
WEB应用阅读更多自从APISIX网关推广使用以来，在我们部门已经有很多生产业务接入使用。有一天被拉进了一个问题群，被告知APISIX网关性能有问题，整体表现还不如之前的ZUUL网关。纳尼？APISIX性能再怎么不济也不至于比ZUUL差吧？废话少说，直接上手弄了个串行请求对比测试了一下生产环境的APISIX网关和ZUUL网关，结果大跌眼镜！正常情况下，APISIX的耗时都优于ZUUL网关，但是AP... 记录ipvsadm 启动报错的解决办法，并附上详细的ipvsadm参数说明报错信息：[root@localhost ~]# service ipvsadm start Clearing the current IPVS table: [确定] Applying IPVS configuration: /etc/init.d/ipvsadm: line 62: /etc/sysconfig/ipvsadm: 没有那个文件或目录... ![]()
博客建站已过2个月了，大部分文章总是在记录博客的折腾史，估计大部分喜欢折腾的博主都有这样的时期吧！现在博客基本算是定型稳定，是时候写点与主题相关的博文了，否则，不知道的还以为我这是WP折腾博客呢！这几天，老大发新年任务了，把新技术的研究就交给了我，其中又一项就是Jboss的集群。说实话，对于Jboss，我真的谈不上熟练，因为长期都在管理Tomcat平台。揽到这个任务，我倒也非常高兴，终于可以... 
我们都知道网络上的爬虫非常多，有对网站收录有益的，比如百度蜘蛛（Baiduspider），也有不但不遵守robots规则对服务器造成压力，还不能为网站带来流量的无用爬虫，比如宜搜蜘蛛（YisouSpider）（最新补充：宜搜蜘蛛已被UC神马搜索收购！所以本文已去掉宜搜蜘蛛的禁封！==>相关文章)。最近张戈发现nginx日志中出现了好多宜搜等垃圾的抓取记录，于是整理收集了网络上各种禁止垃圾蜘蛛... 
张戈博客不久前分享过Nginx开启缓存为WordPress加速的教程，其中分享了2种缓存模式：代理模式和本地模式。我一直以为单个 ngx_cache_purge 缓存模块只支持proxy代理模式，结果热心的网友回复，其实这个模块也是支持本地缓存的，而且WordPress还有配套的插件！看来还是我孤陋寡闻了！我像发现了新大陆一般，立马进入折腾状态，幸不辱命，已经成功部署！最爽... 概述我们经常会听到“不会开发的运维不是个好运维”，确实在运维工作当中，娴熟的开发经验能让运维工作如鱼得水，事半功倍！高级的运维除了需要精通Shell脚本编程之外，最好还需要掌握一门高级语言，比如Python、Golang、PHP、Lua等。高级语言除了可以解决一些更复杂的运维场景，还可以帮助我们更好的理解业务，做好业务运维，毕竟知己知彼才能百战不殆。经常看到很多运维同学写接口通常... 
最近在配置Haproxy代理的时候发现一个很有意思的事情：Haproxy在代理http请求会无脑加一个X-Forwarded-For（后文简称XFF），而不是将自身的IP地址加到已存在的XFF列表之后，WTF！还有这种神操作？确认无误之后，我到Haproxy的github开了一个issue反馈了这个BUG（issue地址），最终了解到了Haproxy就是这样设计的，并得到了解决方案，而且这个is... 
很久没写文章了，博客已经长草了，今天挤点时间分享一些小干货，也是回应一下不少站长朋友的留言问题。有不少站长朋友问张戈博客的静态文件为啥是另外一个域名？有啥好处？如何实现？其实这算是一种动静分离的做法，不过我这里用了偷懒的办法实现，而非彻底的动静分离，不过最终效果的区别并不大。先啰嗦一下动静分离的概念和好处。一、动静分离我们的网站简单来说分为2种数据... 说到Nginx的内容替换功能，大部分人应该都听说过Nginx内置的的subs_filter替换模块，但是这个模块有个缺憾，就是只能替换一次，而且还不支持正则表达式，这就有些鸡肋了。不过，我们可以集成一个第三方的替换模块：ngx_http_substitutions_filter_module，来实现我们的各种需求。经过测试，这个模块至少有如下实用功能：①、支持多次替换②... 在实际业务场景中，APISIX限速太笼统，达不到业务要求，最终，我们自己在limit-count插件基础上进行改造，重新设计一个限速机制，能够针对不同的服务给不同的Consumer设置差异化的访问限速，满足生产环境更精细化的限速需求。... 
好久没打理博客，突然收到CDN流量预警，发现平均每天40G流量消耗！what？就现在这个访问量，不存在的。看了下CDN日志发现有小人一直在请求博客页面，其中被请求最多的就是CCkiller防御工具那个文章地址。呵呵，我就写一个简单的防御小工具，惹着你啦？实际上我用了CDN，也并没有安装这个工具，所以想试探、想测试效果的麻烦自己去安装使用，攻击我博客毫无意义，挂了又能怎么样？废话就扯... 
4月27日，有幸参加了由Aftership组织、CloudFlare的大牛孟鑫主讲的《CloudFlare 最新边缘API，打造无服务器(Serverless)架构》课程，感觉收获颇丰。因为这个课程非常接地气，大部分内容都在实战，而不像有些分享一味的讲理论、拼PPT，听得云里雾里，分享的时候是一个样子，真正你去尝试的时候却是另外的样子，duang~，当然，还有一个原因就是张戈博客目前也在用Clo...
12月12日 · 2021年
APISIX运维优化之解决长尾请求（耗时抖动）问题
3398 11 0
4月2日 · 2014年
ipvsadm启动报错解决办法,另附ipvsadm详细参数
6200 8 10
2月18日 · 2014年
LVS中采用Jboss作为RealServer的配置要点
1044 0 6
9月25日 · 2014年
服务器反爬虫攻略：Apache/Nginx/PHP禁止某些User Agent抓取网站
4315 39 67
5月30日 · 2015年
Nginx开启fastcgi_cache缓存加速，支持html伪静态页面
9774 43 117
6月17日 · 2022年
Flyer：基于FastAPI的轻量级API开发框架
3582 6 0
4月12日 · 2019年
惊现Haproxy重复添加X-Forwarded-For问题（附官方解决办法）
4919 10 7
2月3日 · 2018年
小网站最简单实用的动静分离优化方案
12862 48 45
12月18日 · 2016年
Nginx内容替换模块http_substitutions_filter_module及实用案例分享
2711 25 28
11月3日 · 2021年
APISIX插件开发之精细化限速插件
3309 10 0
9月8日 · 2018年
解决网站404页面返回200状态码问题
7015 20 14
7月7日 · 2019年
CloudFlare边缘计算Workers尝鲜初探：博客跳转中间页
3704 62 42
