1月16日 · 2025年
FastTTS：支持私有化部署和源阅读无缝对接的语音合成服务
535 10 2
8月17日 · 2022年
gRPC开发过程中遇到的问题记录
2948 39 4
8月3日 · 2022年
SQLAlchemy因密码含有@符号连接MySQL失败
2929 14 2
6月17日 · 2022年
Flyer：基于FastAPI的轻量级API开发框架
3561 6 0
3月18日 · 2022年
APISIX高级路由之301/302跳转配置
3391 10 0
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5173 6 1
2月25日 · 2022年
分享一个APISIX网关返回502的典型案例
2301 7 1
12月23日 · 2021年
解决百度搜索出现安全中心提醒
1732 27 4
12月12日 · 2021年
APISIX运维优化之解决长尾请求（耗时抖动）问题
3389 11 0
3月14日 · 2014年
DIY网站统计：WordPress排除管理员评论及精准友链数的方法
1335 1 43
1月19日 · 2014年
给博客加上一个快递查询功能
862 5 9
10月28日 · 2021年
APISIX高级路由之通过Body参数转发请求
4873 9 0
脚本编程阅读更多![]()
在之前的工作中，由于分区域管理，TCP设置有差异，所以编写过很多关于IP切换的脚本，作为大批量电脑维护的脚本，最重要的就是兼容性，可不能就测试的那几台电脑通过了，然后发布给同事使用的时候，出现各种状况！其中比较难解决的问题就是获取网络连线的实际名称,大部分人使用的IP设置脚本都是将【本地连接】写死在代码中，可实际上并不是所有电脑都叫本地连接；比如有的用户电脑可能升级了网卡驱动，或者更换了网... 
最近在折腾博客主题，通常来说大多数人认为换主题会影响SEO，实际上只要你把工作都做到位了，是没有任何问题的。比如，换主题后你得仔细检查标题和描述等内容是否发生改变、换主题后是否带来了大量的404页面等。当然，更细微的可能是换主题之后，网站的内链网络也发生了微妙的改变，但是整体的影响较小。总之，张戈博客这次更换主题基本上没有看到明显的SEO影响，反而出现几个新的关键词。好了，题外话到... 
说到shell可控多线程，网上分享的大部分是管道控制的方案。这种方案，张戈博客也曾经实战并分享过一次：《Shell+Curl网站健康状态检查脚本，抓出中国博客联盟失联站点》，感兴趣的朋友可以看看。下面张戈博客再分享另一种更容易理解的入门级可控多线程shell脚本方案：任务切割、各个击破。先来 1 段场景描述：某日，在鹅厂接到了这个任务，需要在Linux服务器中，对几... 
上一篇文章发布了备份网站到七牛的第一版，这次应回复要求先公布同步原理及shell源码，让喜欢折腾的人有力可使。其实，这个备份工具的原理非常简单，就是借用了官方的同步工具，配合简单的shell语句即可完成。一、备份原理简介qrsync 是一个根据七牛云存储API实现的简易命令行辅助上传同步工具，支持断点续上传，增量同步，它可将用户本地的某目录的文件同步到七牛云存储中，同步或上传几百GB甚... 由于电信宽带和谐了443端口，近期我花了不少时间折腾了下近半年都没瞅一眼的博客。经过一番折腾（详见前文），博客总算可以运行在家里的NAS上，整体部署方案如下：图1. 张戈博客部署架构图一、预缓存从上图可以看到，由于中间用于代理转发的腾讯云CDN和阿里云CDN都是没有缓存的，如果CloudFlare的缓存过期，将需要绕过多层链路回源获取网页内容，相比速度就会慢很多。所以，需... ![]()
申明：以下内容大部分搜集于网络，由个人整理成更容易理解的简明教程！一、原理阐述在linux下可以用几个最基本的命令制作一个自解压的程序。其原理是：利用cat 命令可以将两个文件连起来（用>>追加也能达到同样效果），前一个文件是shell脚本，负责执行解压和安装；后一个文件是一个压缩包。把这两个文件通过cat连接成一个新的可执行文件，前面是解压程序,后面是压缩包，当你执行... 最近在跟一个自动化发布平台的建设事项，其中Linux系统的远程控制通道则由我独立开发完成，其中涉及到了Linux系统远程命令和文件传输操作。因为之前写Linux系统密码管理系统的时候，用的是Paramiko的SSHClient。所以，我这次依然采用Paramiko来做实现，代码虽短，说起其中的坑，我也是一把辛酸一把泪的填上了。先上完整代码：# -*- coding: utf-8... 最近手头有个业务是基于Apache Karaf开发的，运行在K8S里面，跑了一堆的bundle，偶尔里面挂一两个bundle容器是没什么感知的，但是业务可能会局部异常。要推动业务优化的话，周期就会拉得很长，因此先弄个定时拨测来监控下bundle是不是都在正常运行的。看了下要查看Karaf里面的bundle需要ssh进去执行bundle list命令，因此基于之前的经验利用Python p... 
此文将整理一些简单实用、有趣易学的shell练习脚本，希望可以帮到一些想学习shell的初学者。张戈也会在闲暇时间不定期更新此文，对已有实例进行改进和注释，增强可读性和易懂性。当然我也会不定期的添加更多简单、有趣且实用的shell练习脚本，帮助一些有需要的入门学习者。一、编写一个脚本使我们在写一个脚本时自动生成”#!/bin/bash”这一行和注释信息。原文代码为：#!/bin/bas...
12月30日 · 2013年
Windows下获取网络连线实际名称,加强IP类设置脚本的兼容性
3531 5 1
5月3日 · 2015年
SEO技巧：Shell脚本自动提交网站404死链到搜索引擎
16133 67 74
11月8日 · 2015年
分享一个入门级可控多线程shell脚本方案
6172 31 12
8月5日 · 2014年
VPS服务器备份网站到七牛云存储的shell脚本（第二版）
4393 2 14
2月8日 · 2020年
网站预缓存工具，提升网站整体加载速度
6564 73 0
12月23日 · 2013年
Shell下制作自解压安装包,实现脚本的简单加密
5577 5 1
5月7日 · 2017年
分享一个自写的Python远程命令和文件（夹）传输类
8340 40 37
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5173 6 1
6月19日 · 2014年
[不定期更新]简单的shell脚本练习实例
1568 162 24
操作系统阅读更多![]()
本人是Linux运维工程师，对这方面有点心得，现在我说说要掌握哪方面的工具吧。说到工具，在行外可以说是技能，在行内我们一般称为工具，就是运维必须要掌握的工具。我就大概列出这几方面，这样入门就基本没问题了。Linux系统如果是学习可以选用Redhat或CentOS，特别是CentOS在企业中用得最多，当然还会有其它版本的，但学习者还是以这2个版本学习就行，因为这两个版本都是兄... ![]()
刚在我的订阅里面看到这篇文章，在爆笑之余也让跟我一样的运维农民工们发人深省，所以转过来分享一下。妹子啊妹子，网上找的东西也不能直接照搬啊，太萌了~~哈哈！作者也是挺萌的，重要服务器给妹子当成练手的工具，看来荷尔蒙又出来作恶了，嘿嘿！下面且看事件始末：经历了两天不懈努力，终于恢复了一次误操作删除的生产服务器数据。对本次事故过程和解决办法记录在此，警醒自己，也提示别人莫犯此错。... 
公司推Win7了，作为IT部门，铁定是先行测试的小白鼠。于是先给我们安装了Win7工作环境。一直以来，除了服务器，普通办公PC的管理员都是被桌面运维部收管的，其他IT部门使用的都是普通AD账号。对于我这样喜欢折腾测试软件的人来说，没有管理员权限是很痛苦的一件事情！还未推广Win7时，我就用了这个获取System权限的办法，变相的取得管理员权限，而网域监测系统却不会报警。废话不多说，直接上菜... 
概述：网络管理是基础运维中一个很重要的工作，在看似平静的网络运行中，其实暗流汹涌，要保证业务系统稳定运行，网络运维者必须要了解网络的流量状态、各个网段的使用情形，带宽的利用率、网络是否存在瓶颈等，同时，当网络发生故障时，必须能够及时发现问题，迅速定位问题，进而解决问题，这就需要一些网络监测工具的辅助，本节将介绍一款小巧但功能很强大的网络实时流量监测工具iftop。一、iftop概述ifto... 
这也是一个老方法了，只是今天用到了，就过来记录下。总觉得公司服务器磁盘不给力，有时候vim编辑的时候都会卡顿，IO经常90%+，很纳闷，就测试了一下磁盘的读写速度。一、测试写速度：time dd if=/dev/zero of=/tmp/test bs=8k count=1000000测试结果：565 MB/s二、测试读速度：time dd if=/tmp/te... ![]()
今天，在站长交流群里面，又一个站长抱怨服务器每星期都必须手动重启一次，否则QQ登陆功能无法使用，原因是服务器时间快了5分钟以上，腾讯服务器拒绝提供API服务。本以为只要加一个简单的linux时间同步任务计划即可，结果我拿到root后，发现并不是那么一回事。在我正确添加了ntpdate 任务计划之后，手动执行了时间同步命令，发现时间依然没有变化。手动执行 date -s 16:00:... 
本系列文章一共三篇，分别为《脚本编程与 Linux 命令》、《接入层与网络基础》和《 MySQL 与 SQL 优化》，由腾讯高级工程师 luaruan(阮永顺) 原创、张戈博客整理分享，如有勘误请在博客留言。希望对需要学习、面试 Linux 运维的同学有所帮助。MSS与MTU的区别，默认大小各是多少？ 标准以太网接口缺省的MTU（最大传输单元）为1500 字节，是最大帧151... 这次给博客添加了纯代码缓存之后，发现缓存文件竟然达到了50多MB！而我的服务器每次还需要同步至七牛，文件体积的增加都会增加文件远程同步备份的时间。因此，我第一想到的办法就是在网站ZIP压缩打包的时候排除缓存文件夹。下面是从网上找来的ZIP命令参数：zip Linux上适用的参数:-1 : 最快压缩，压缩率最差。-9 : 最大压缩，压缩率最佳。-b : 暂存文件的路径。这个参... ![]()
昨天，在新公司接到了第一个任务：统计所有服务器的几个信息。200多台呢！一个台一台的去执行命令也太苦逼了吧？于是度了下，找到了这个方法，感觉很不错！现在来分享下，希望对像我这样苦逼的人有所帮助！一、SecureCRT同时向多个session发送相同命令的方法对于要管理多台服务器的SA或DBA来说, 如果要在所有服务器上操作同样的命令, 一台台登陆操作是个很笨的方法. 一直以为SecureC...
12月18日 · 2013年
详解Linux运维工程师必备技能
3436 13 1
5月24日 · 2014年
妹子你真萌：一次心惊肉跳的服务器误删文件的恢复过程
3726 7 44
3月10日 · 2014年
Windows 7下获取System权限
1644 2 45
9月29日 · 2014年
Linux网络实时流量监测工具iftop的安装使用
7890 14 1
7月24日 · 2014年
Linux下用dd命令测试硬盘的读写速度
4412 14 17
8月27日 · 2014年
Linux系统date命令无法修改或同步时间的解决办法
7654 7 7
11月29日 · 2018年
Linux运维基础技能： 接入层与网络基础
1938 20 18
12月9日 · 2014年
Linux系统zip压缩命令详细参数，附文件排除选项的正确用法
2589 17 7
6月23日 · 2014年
SecureCRT全局发送相同命令，快速抓取服务器信息的方法
10577 8 11
WEB应用阅读更多在实际业务场景中，APISIX限速太笼统，达不到业务要求，最终，我们自己在limit-count插件基础上进行改造，重新设计一个限速机制，能够针对不同的服务给不同的Consumer设置差异化的访问限速，满足生产环境更精细化的限速需求。... ![]()
最近在复习运维常见的监控告警软件的时候，想起了zabbix，于是先用军哥的lnmp一键安装包快速搭建了lnmp环境，然后成功编译安装了zabbix，特地将安装过程和遇到的问题记录在此，以便自己或有需要的人来参考翻阅。由于已有php运行环境，所以只需要编译安装zabbix即可。一、安装依赖组件yum -y install net-snmp net-snmp-devel perl-DB... APISIX为了提高性能，默认会打开keepalived特性，预设会话保持时长为60s，我们在部署网关的时候也保留了这个优化特性，恰好我的上游服务基于Gunicorn+FastAPI开发框架，也开启了keepalived，会话保持默认设置为5s。这样就有问题了：网关和上游服务建立连接后60s内，新请求会继续复用这个连接，但是上游却在5s后主动关闭了连接，因为网关将新请求转发给上游时，才发现连接已经被关闭了，因此就出现了上述报错。... 
张戈博客不久前分享过Nginx开启缓存为WordPress加速的教程，其中分享了2种缓存模式：代理模式和本地模式。我一直以为单个 ngx_cache_purge 缓存模块只支持proxy代理模式，结果热心的网友回复，其实这个模块也是支持本地缓存的，而且WordPress还有配套的插件！看来还是我孤陋寡闻了！我像发现了新大陆一般，立马进入折腾状态，幸不辱命，已经成功部署！最爽... ![]()
上午共享的那个varnish安装手册，个人看了下，有点不知所云，好吧~看来还是先安装玩玩！苦逼公司服务器没法连外网，不能用什么wget或yum命令直接下载安装，每每看到别人博客贴出的在线安装代码时，总有一股羡慕嫉妒“恨”冒了出来。。。好吧，既然没法上外网，那只能麻烦点通过下载源码来编译安装了！Varnish 3.0.4下载地址： http://repo.varnish-cache.... 昨天在公司微信群，CTO分享了这个消息，对运维来说以后基于TCP协议的后端业务的高可用又多了一个新的选择，实在是棒极了！一直以来，Nginx 并不支持tcp协议，所以后台的一些基于TCP的业务就只能通过其他高可用负载软件来完成了，比如Haproxy。这算是一个nginx比较明显的缺憾。不过，在1.90发布后这个认知将得到改写：2015-04-28ngin... Configmap的方式来配置APISIX。最开始我们就采用 Configmap的方式在腾讯云TKE上部署APISIX，当网络区域越开越多时，每个TKE集群都需要去定义一套config.yaml对应的Configmap，管理非常繁琐。因此，这里我们利用Python的Jinja2插件来自动化渲染APISIX的配置文件，整体非常方便！... 
将2个网站搬到阿里云，一个是因为阿里云稳定，另一个就是牛逼轰轰的云盾了。之前在博客联盟群里模拟CC攻击过搭建在阿里云ECS上的博客，结果云盾毫无反应，而网站已经挂了。这次特意细看了一下云盾上的CC防护功能，发现有部分朋友估计并未正确使用WAF。所以，我在本文就简单的分享一下阿里云盾-WAF网站防御的正确使用方法。一、域名解析大部分朋友，只是开启了云盾就不管了，这也就是很多朋友受到C... 好久没打理博客，突然收到CDN流量预警，发现平均每天40G流量消耗！what？就现在这个访问量，不存在的。看了下CDN日志发现有小人一直在请求博客页面，其中被请求最多的就是CCkiller防御工具那个文章地址。呵呵，我就写一个简单的防御小工具，惹着你啦？实际上我用了CDN，也并没有安装这个工具，所以想试探、想测试效果的麻烦自己去安装使用，攻击我博客毫无意义，挂了又能怎么样？废话就扯... 最近一直在帮一个购买了张戈博客付费服务的朋友做网站防护，为了简单抵挡一下竞争对手的DDoS攻击，他给网站开启了Incapsula的免费CDN服务。开启CDN之后，我之前给他写的Shell防护脚本也就宣告无效了，因为不管是正常访问还是攻击访问，脚本拿到的IP都是CDN节点的，而我不可能把CDN的节点IP也给禁用了，那就都不能访问了。为了解决这个窘迫，我想到了以前看过的Nginx访问限... 
我负责的几个公司内部网站，仅集成了php原生memcache组件，不支持memcached分片存储的自动容灾方案，近期出现过几例因memcache服务器故障引起WEB爆卡的尴尬事，所以接到了一个给现网php集成memcached模块的需求。内部的个别系统有多老、多难用我就不吐槽了，slackware、suse用过的人都知道。。。不说了，总之老老实实的编译安装吧。memcached这... 
昨天一个网友通过QQ联系我，说按照我博客之前分享的http2配置教程不能生效，想请我帮忙看看。经过测试，使用谷歌浏览器访问他的测试站点，确实没有开启http2，但他的配置和编译参数都正确的，这有点奇怪了。不过昨天太忙就没有继续帮他分析，他只好将服务器账号和密码都留言给了我。今天中午我抽空在他服务器重新编译测试了一把，才发现原来是这么一个梗！他在编译Nginx之前，使用的是yum...
11月3日 · 2021年
APISIX插件开发之精细化限速插件
3291 10 0
1月28日 · 2015年
zabbix监控在lnmp环境下编译安装小记
4245 5 9
2月25日 · 2022年
分享一个APISIX网关返回502的典型案例
2301 7 1
5月30日 · 2015年
Nginx开启fastcgi_cache缓存加速，支持html伪静态页面
9741 43 117
3月13日 · 2014年
HTTP加速器varnish安装小记(1)
3919 3 32
4月29日 · 2015年
Nginx发布1.9.0版本，新增支持TCP代理和负载均衡的stream模块
1899 53 10
11月14日 · 2021年
APISIX运维优化之配置文件自动化生成方案
3815 5 1
2月28日 · 2015年
阿里云盾网站安全防御(WAF)的正确使用方法
4176 43 23
9月8日 · 2018年
解决网站404页面返回200状态码问题
7011 20 14
12月29日 · 2014年
Nginx在CDN加速之后，获取用户真实IP做并发访问限制的方法
18502 24 12
3月5日 · 2017年
libmemcached编译安装报错解决记录
4374 18 27
11月11日 · 2016年
解决Nginx配置http2不生效，谷歌浏览器仍然采用http1.1协议问题
3068 28 30
