1月16日 · 2025年
FastTTS：支持私有化部署和源阅读无缝对接的语音合成服务
594 11 0
8月17日 · 2022年
gRPC开发过程中遇到的问题记录
2978 39 4
8月3日 · 2022年
SQLAlchemy因密码含有@符号连接MySQL失败
2944 14 0
6月17日 · 2022年
Flyer：基于FastAPI的轻量级API开发框架
3617 6 0
3月18日 · 2022年
APISIX高级路由之301/302跳转配置
3426 10 0
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5201 6 1
2月25日 · 2022年
分享一个APISIX网关返回502的典型案例
2327 7 1
12月23日 · 2021年
解决百度搜索出现安全中心提醒
1745 27 4
12月12日 · 2021年
APISIX运维优化之解决长尾请求（耗时抖动）问题
3423 11 0
3月1日 · 2014年
张戈博客成功启用移动端主题：Mobile Pack
5978 1 86
8月24日 · 2014年
360网站卫士的CDN缓存加速功能详解
9279 6 23
3月29日 · 2015年
SendCloud邮件队列状态和已使用额度的Python监控脚本
4116 5 2
脚本编程阅读更多![]()
在之前的工作中，由于分区域管理，TCP设置有差异，所以编写过很多关于IP切换的脚本，作为大批量电脑维护的脚本，最重要的就是兼容性，可不能就测试的那几台电脑通过了，然后发布给同事使用的时候，出现各种状况！其中比较难解决的问题就是获取网络连线的实际名称,大部分人使用的IP设置脚本都是将【本地连接】写死在代码中，可实际上并不是所有电脑都叫本地连接；比如有的用户电脑可能升级了网卡驱动，或者更换了网... 
说到shell可控多线程，网上分享的大部分是管道控制的方案。这种方案，张戈博客也曾经实战并分享过一次：《Shell+Curl网站健康状态检查脚本，抓出中国博客联盟失联站点》，感兴趣的朋友可以看看。下面张戈博客再分享另一种更容易理解的入门级可控多线程shell脚本方案：任务切割、各个击破。先来 1 段场景描述：某日，在鹅厂接到了这个任务，需要在Linux服务器中，对几... 
导读：2个月前，张戈博客分享了一篇Python+Shell定时备份网站到阿里云OSS的教程，已经有非常多的站长朋友用上了，反馈还不错，也有不少朋友提出了很多优化建议，比如上传完成后能否删除本地压缩包之类的，本文将继续分享另一种云端备份方案。一、优点分析内网传输：和阿里云OSS一样，腾讯云COS同样支持内网和外网文件传输，对于腾讯云服务器，使用内网传输绝对是最快、最稳定的备... 最近我在改造手头负责的一个HTTP Restful API服务，集成对gRPC协议（在鹅厂叫tRPC，是gRPC的本土衍生版本）的支持。由于是从0学习这个协议，因此也踩了不少坑，这里用一篇文章来记录下，希望可以帮助到同样从0学习gRPC的朋友。列表参数赋值老的Rest接口中，大量用到了列表参数，看了下pb协议，给这个参数定义如下：message Foo { rep... 最新更新：张戈博客已推出功能更强大的轻量级CC攻击防御脚本工具CCKiller==>传送门前天没事写了一个防CC攻击的Shell脚本，没想到这么快就要用上了，原因是因为360网站卫士的缓存黑名单突然无法过滤后台，导致WordPress无法登录！虽然，可以通过修改本地hosts文件来解决这个问题，但是还是想暂时取消CDN加速和防护来测试下服务器的性能优化及安全防护。前天写的Sh... 由于电信宽带和谐了443端口，近期我花了不少时间折腾了下近半年都没瞅一眼的博客。经过一番折腾（详见前文），博客总算可以运行在家里的NAS上，整体部署方案如下：图1. 张戈博客部署架构图一、预缓存从上图可以看到，由于中间用于代理转发的腾讯云CDN和阿里云CDN都是没有缓存的，如果CloudFlare的缓存过期，将需要绕过多层链路回源获取网页内容，相比速度就会慢很多。所以，需... ![]()
Tomcat重启脚本，送给有需要的JSP环境运维同行们~运行环境：XP/windows 2003测试通过,其他环境由于手头上条件限制未测试;脚本功能：在常规调用tomcat自带的关闭/重启脚本中加入假死判断，若出现假死则予以强行Kill掉相关JAVA进程;脚本特点：可在tomcat/Jboss/apache混合平台使用，针对性的只重启tomcat相关进程;注意事项：... 
此工具可将标准版的sitemap.xml转换成电脑版—移动版的对应关系sitemap，用于百度开放适配&360移动适配的文件提交。工具用批处理制作，仅起到批量转换的辅助功效，免去手动制作的麻烦！可以用于移动适配的提交测试！张戈不会php，而shell又不能普遍适用，所以只能挑了自己比较拿手的批处理来制作这个辅助工具！因为批处理的局限性，做出来的工具只能用于尝鲜测试使用！或长期不更新的CMS企业网站来提交移动适配sitemap。另外，响应式站点亦无需提交适配！... 
昨天，同事告诉我发现一个诡异的问题，grep无法搜索shell中的变量，着实很惊讶。到他所说的服务器上试了下，还真是不行！大概就是这样一个要求：①、有个文本为userid.txt，里面每一行一个用户id，类似如下：00010003000500070009②、另外还有一个文本为record.txt，里面是所有用户的操作记录，一行一条，并且包含有id，类似如下：...
12月30日 · 2013年
Windows下获取网络连线实际名称,加强IP类设置脚本的兼容性
3541 5 1
11月8日 · 2015年
分享一个入门级可控多线程shell脚本方案
6181 31 12
1月2日 · 2017年
利用腾讯云COS云对象存储定时远程备份网站
9152 94 81
8月17日 · 2022年
gRPC开发过程中遇到的问题记录
2978 39 4
11月5日 · 2014年
Linux系统防CC攻击自动拉黑IP增强版Shell脚本
28102 55 53
2月8日 · 2020年
网站预缓存工具，提升网站整体加载速度
6652 73 0
12月27日 · 2013年
Tomcat重启脚本For Windows
7360 19 4
5月16日 · 2014年
百度开放适配&360移动适配专用Sitemap格式转换工具
8673 13 52
11月15日 · 2014年
grep无法查找shell传过来的变量？先注意一下文本格式吧！
12620 21 6
操作系统阅读更多
Linux系统安装软件，不管是从性能还是从稳定考虑，优先推荐编译安装的方式都是无可厚非的。不过在编译安装的时候，偶尔会提示缺失一些依赖组件，比如curl-devel、libevent等。这时候，要去找相应的编译包或者rpm包又要耗费时间！而且，往往当你找到并开始安装的时候，很有可能又有新的依赖组件缺失提示！！郁闷死你。。。这时候，在线安装功能就可以出马了，比如Centos下的yum、ubunt... ![]()
跟了我5年多的本本已步入花甲，CPU严重老化，运行Windows异常吃力，于是考虑换成Linux试试。忙活了一天，测试了2个“家用”Linux发行版,一个是深度的Linux Deepin 2013,另一个是雨林木风的StartOS 5.1。在测试过程中也遇到一些有用的经验，现在就一一记录一下。这是在安装完StartOS后进行的记录，因为是安装在以前的C盘，就没继续分区来新增挂载点，直接挂了... ![]()
跟了我5年多的本本已步入花甲，CPU严重老化，运行Windows异常吃力，于是考虑换成Linux试试。忙活了一天，测试了2个“家用”Linux发行版,一个是深度的Linux Deepin 2013,另一个是雨林木风的StartOS 5.1。在测试过程中也遇到一些有用的经验，现在就一一记录一下。这些发行版和ubuntu一样，root帐号都是停用的，在我安装完后，发现进行一些操作时，提示权限不... 
这2天负责架设一个支付业务的webserver测试项目，安装svn客户端的时候出现了各种问题，来记录下。一、简单的说下安装过程：#下载wget http://subversion.tigris.org/downloads/subversion-1.6.9.tar.gzwget http://subversion.tigris.org/downloads/subversion... 
本系列文章一共三篇，分别为《脚本编程与 Linux 命令》、《接入层与网络基础》和《 MySQL 与 SQL 优化》，由腾讯高级工程师 luaruan(阮永顺) 原创、张戈博客整理分享，如有勘误请在博客留言。希望对需要学习、面试 Linux 运维的同学有所帮助。MSS与MTU的区别，默认大小各是多少？ 标准以太网接口缺省的MTU（最大传输单元）为1500 字节，是最大帧151... 最近接到一个 case：大数据分析那边反馈我们这边推送的数据同比去年同期少了很多。这是很不正常的，因为业务一直在增长。于是，我开始顺藤摸瓜的跟进。一开始就发现一个小问题：scp 推送文件脚本执行后居然会报错：[root@netdata :/data]# sh pushdata.shdos2unix: converting file pushdata.log to UNI... 这两天工作是用几台PC机给开发组搭建本地测试环境：CentOS-6.4-x86_64 + ant + svn。为了操作简单及系统稳定，全部系统采用最小化安装方法。又出于拓展考虑，决定给每台测试机建立一个本地yum仓库，方便安装缺失组件，而不再受到依赖性的困扰。下面分享一下利用iso镜像搭建本地yum仓库的简单步骤：一、准备工作下载或拷贝CentOS或RedHat的iso镜像... 1. 简介sed是非交互式的编辑器。它不会修改文件，除非使用shell重定向来保存结果。默认情况下，所有的输出行都被打印到屏幕上。sed编辑器逐行处理文件（或输入），并将结果发送到屏幕。具体过程如下：首先sed把当前正在处理的行保存在一个临时缓存区中（也称为模式空间），然后处理临时缓冲区中的行，完成后把该行发送到屏幕上。sed每处理完一行就将其从临时缓冲区删除，然后将下一行读入，进行处理和... 
最近入手了一台创宇云的VPS，然后将2个网站都给搬家了。作为一个运维工程师，终于不用再处处受制于人了，虚拟主机真的只能玩个球！拿到VPS并快速部署好环境后，开始着手完善一下安全设置，以下过程记录，供大家参考：一、用户权限安全设置root权限太高，误操作就相当危险，所以日常操作使用普通账号，只有特定时候才使用su切换到root身份。①、新建普通用户，比如zhangge... 
昨天下午，RTX群里面公司负责游戏运营的MM发来求助：我还真是孤陋寡闻，以前还真没见过这个问题，赶紧度了度，很快就帮MM解决了问题。 解决办法也很简单：方法①、 关闭所有浏览器，右键点击“网络邻居”，选择“属性”，在“本地连接”上点击右键，选择“修复”即可。方法②、在DOS窗口下（如果是XP，点击屏幕左下角的“开始”，“运行”，输入“cmd”回车）输入：ip...
8月13日 · 2014年
SUSE Linux系统在线安装软件命令zypper参数详解
11236 22 4
3月2日 · 2014年
给已安装的Linux新增Swap交换分区
1458 1 28
3月2日 · 2014年
启用某些Linux发行版的root帐号
1435 2 12
7月18日 · 2014年
Linux/SUSE安装svn客户端的问题记录
5353 6 11
11月29日 · 2018年
Linux运维基础技能： 接入层与网络基础
1951 20 18
8月19日 · 2015年
解决dos2unix/unix2dos报错，并在家目录下生成u2dtmp*文件问题
5527 5 3
7月4日 · 2014年
利用Centos或RedHat的iso镜像搭建本地yum仓库
1317 5 16
3月6日 · 2014年
Linux：sed命令详解
4089 6 34
8月28日 · 2014年
Linux/VPS系统安全设置整理
1348 9 12
7月25日 · 2014年
解决ping域名时出现“TTL传输中过期”的问题
11153 160 14
WEB应用阅读更多概述我们经常会听到“不会开发的运维不是个好运维”，确实在运维工作当中，娴熟的开发经验能让运维工作如鱼得水，事半功倍！高级的运维除了需要精通Shell脚本编程之外，最好还需要掌握一门高级语言，比如Python、Golang、PHP、Lua等。高级语言除了可以解决一些更复杂的运维场景，还可以帮助我们更好的理解业务，做好业务运维，毕竟知己知彼才能百战不殆。经常看到很多运维同学写接口通常... 
很多业务系统都用到了Haproxy这个高性能反向代理负载均衡器。在日常运维当中，Haproxy后端节点的上（接入）、下（剔除）线操作绝对是家常便饭，而且人工重启的时候经常有胆颤心惊的感觉。下面分享一种命令行操作Haproxy后端节点平滑上下线的技巧。一、新增配置Haproxy自带了一个非常实用的管理页面，我们可以在harpxoy.cfg新增如下配置，开启Haproxy监控管理页面功... 最近接到了一个需求：通过Nginx代理把现网一个自研代理程序给替换掉，感觉有点意思，也有所收益，简单分享下。需求背景部门的生产环境异常复杂，有部分第三方引入的系统位于特殊网络隔离区域，请求这些系统需要通过2层网络代理，如图所示：中心源系统请求目标系统API的形式各异，我简单收集了下，至少有如下3种：curl --digest -u admin:xxxxxx... Configmap的方式来配置APISIX。最开始我们就采用 Configmap的方式在腾讯云TKE上部署APISIX，当网络区域越开越多时，每个TKE集群都需要去定义一套config.yaml对应的Configmap，管理非常繁琐。因此，这里我们利用Python的Jinja2插件来自动化渲染APISIX的配置文件，整体非常方便！... 
这又是一个拖欠了很久的分享，很早就有朋友留言问评论打字炫彩、震动特效怎么实现的。这功能其实网上早就有人分享N遍了，有点搜索技巧和DIY能力的站长同学也早就实现了。这里还是继续分享一下我这边的一些改进，也许有朋友可以用得到。简单的改进：1、移动端关闭震动，移动端震动会显得很卡；2、添加震动开关，方便不喜欢的朋友进行关闭，采用Cookie记忆同一个浏览器点击关闭一次即可。P... 在决定全面铺开使用APISIX之前，Kong网关在我们的生产环境已经试用了将近一年，因此存在大量的生产环境API接口使用的是Kong HMAC鉴权。此次迁移到APISIX网关，为了减少客户端的改造工作，我们决定将Kong网关的HMAC鉴权插件移植到APISIX，同时将Kong的HMAC认证作为后续API接口的统一鉴权方案。... 上周有一个站长问到我一个问题，问fastcgi_cache和pagespeed加速有没有冲突。略微想了下，2个都是比较原生的主，应该不存在兼容问题。至于这个朋友问到这2个机制处理的先后问题，我思考了下。既然fastcgi_cache已经是缓存到本地的文件，那么pagespeed肯定是后处理的。通俗来说，就是当用户访问WEB时，Nginx 应该是先调用 fastcgi缓存，然后再进行page... 
这个问题不知道有没有人遇到过，反正度娘和谷姐都没能帮到我！困扰了我挺长时间了，今天偶尔将代码放到Apache服务器下测试时，意外解决了！问题是这样的，我搭建了一个网站icon图标抓取的API接口，正常情况下对象的传参是通过$_GET[\'url\']获取的，因此常规获取图标的地址应该是：http://domain.com/?url=zhang.ge或http://domai... ![]()
这年头原创技术博文真心难写，不可能每天都有灵感，也不可能每天都出问题。而且技术教程也非常全面，不管是百度一下，你就知道，还是谷歌一把，你就找到，基本要啥有啥，只有你想得到，没有你搜不到。。。如果突然发现搜不到了，那恭喜你，你又可以来个原创研究项目了！之所以开篇吐槽这么多，也是因为张戈今天确实没东西写，又不想转载， 就来点伪原创吧！主要是更换域名之后，确实需要很长一段时间的原创文章来取得搜索... 
最近给张戈博客全站开启了https，所以对这块关注比较多。昨天脑补的时候发现http2.0只支持SSL加密的网站，即https。于是心血来潮，给张戈博客开启了http 2.0，尝尝鲜。查了下资料，发现Nginx不久前发布的 1.9.5版本支持http2.0，而1.8.x时代只是对SPDY进行了支持。一直用的1.62稳定版，此次为了测试http2.0，直接进行了版本跳跃，升级到了1.9.5版... 记录ipvsadm 启动报错的解决办法，并附上详细的ipvsadm参数说明报错信息：[root@localhost ~]# service ipvsadm start Clearing the current IPVS table: [确定] Applying IPVS configuration: /etc/init.d/ipvsadm: line 62: /etc/sysconfig/ipvsadm: 没有那个文件或目录...
6月17日 · 2022年
Flyer：基于FastAPI的轻量级API开发框架
3617 6 0
2月24日 · 2018年
Haproxy进阶管理：命令行控制后端节点上下线
1777 11 11
1月20日 · 2019年
分享一个Nginx正向代理的另类应用案例
3180 6 13
11月14日 · 2021年
APISIX运维优化之配置文件自动化生成方案
3842 5 1
3月17日 · 2018年
网站集成打字震动特效JS代码改进版
1502 35 37
11月7日 · 2021年
APISIX插件开发之Kong网关HMAC鉴权插件（附客户端SDK）
2055 7 0
9月10日 · 2015年
实测Nginx服务器开启pagespeed加速效果
11695 20 21
3月3日 · 2015年
Apache/Nginx伪静态规则匹配http://出现的问题与解决
1370 4 8
5月18日 · 2014年
nginx配置文件参数详解
1808 7 32
12月8日 · 2015年
升级Nginx1.9.5以上版本，开启博客网站http2.0时代
7691 17 18
4月2日 · 2014年
ipvsadm启动报错解决办法,另附ipvsadm详细参数
6207 8 10
