位置: 编程技术 - 正文

Linux Shell+Curl网站健康状态检查脚本,抓出中国博客联盟失联站点

编辑:rootadmin

推荐整理分享Linux Shell+Curl网站健康状态检查脚本,抓出中国博客联盟失联站点,希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:,内容如对您有帮助,希望把文章链接给更多的朋友!

一开始搭建中国博客联盟,既有博友提醒我,做网址大全这类网站维护很麻烦,需要大量的精力去Debug一些已夭折的网站,更是拿松哥的博客大全举例。当然,我也是深以为然。前些时间,看到梦轩丽人的boke网址大全的维护记录,好像是纯手工检查,张戈实在是佩服的五体投地,太有毅力了。

现在博客联盟也收录的博客也已破了,全部来自自主提交,不管你是草博还是名博,张戈不会强买强卖。由于大部分都是建站不过半年的新站,半路放弃、提前太监的博客估计还是有的,于是我决定还是把站点维护这个工作做起来。

上午用PHP做了一个放到了京东云试了下,发现检测速度一般,要等上半天(我写的php太蹩脚,就不献丑了)。

随后,我在VPS上写了一个多线程的网站状态检测脚本,直接从数据库load站点地址,然后用curl去检测返回码,发现速度非常好,基本1分钟内就能出结果以下是脚本代码:

Linux Shell+Curl网站健康状态检查脚本,抓出中国博客联盟失联站点

Ps:关于shell多线程脚本,后续文章会有一个详细说明,本文篇幅有限,就不多说了。以下是中国博客联盟第一次成员站点存活检测的结果:①、 非返回码的异常站点:

②、脚本抓取的无法访问站点:

人工访问筛选结果:wangyingxue.net(王英学博客):无法访问,经确认处于备案中 √www.tao.com(长江博客):可以访问 √blog.hack7d.com(Mcdull技术博客):无法访问 ×www..com(教师日记):可以访问 √www.3miaotu.com(三秒兔):无法访问 ×xiaoxiaomayi.com(小小蚂蚁博客):可以访问 √www.awrui.com(李文栋博客):可以访问 √

Ps:脚本检测机制为:8s内未连通的判定为异常,并重试3次,最后输出结果,若三次均异常则为。从图中和人工筛选可以看出,存在一些误杀,这个和8s的设定有一定关系。可以考虑设置为更长时间,得到更准确的结果,当然最终还是要结合人工确认的,所以也没多大关系。后续,中国博客联盟会制订一个检查周期,最短每星期检查一次,最长一个月检查一次,争取让每个展示的站点都能正常访问。当然,我也会将每次检查的结果公布在中国博客联盟的站长资讯专栏,方便所有成员查看。由于目前中国博客联盟部署在京东云擎,无法远程操控数据库,所以只好暂时用半自动的模式。等以后有时间搬到了阿里云等VPS上后,将会将脚本改成全自动状态,当有网站联系多次检测为失联状态时,将会暂时将其设置为隐藏状态。

CCKiller:Linux轻量级CC攻击防御工具,秒级检查、自动拉黑和释放 张戈博客很久以前分享过一个CC攻击的防御脚本,写得不怎么样,不过被CTO意外转载了。博客从此走上了经常被人拿来练手的不归之路。当然,还是有

SED单行脚本快速参考中文版(Unix 流编辑器) 英文标题:USEFULONE-LINESCRIPTSFORSED(Unixstreameditor)原标题:HANDYONE-LINERSFORSED(Unixstreameditor)整理:EricPement-电邮:pemente[at]northpark[dot]edu版本5.5译者:JoeHong-电邮

Shell if中的正则表达式使用详解 由于工作需要对用户提交的数据进行验证,这是一个简单的日期正则验证实例,有需要了解的同学可参考。shell中的if语句需要做一个正则判断,查了一下

标签: Linux Shell+Curl网站健康状态检查脚本,抓出中国博客联盟失联站点

本文链接地址:https://www.jiuchutong.com/biancheng/371425.html 转载请保留说明!

上一篇:分享一个入门级可控多线程shell脚本代码(入门级啥意思)

下一篇:CCKiller:Linux轻量级CC攻击防御工具,秒级检查、自动拉黑和释放

  • 职工薪酬纳税调减的情况
  • 耕地占用税的征收标准
  • 红利税是什么时候扣的
  • 农村信用社可计息贷款吗
  • 供电车间工人薪酬计入什么科目
  • 房地产企业年报台账怎么填
  • 利息税减少
  • 外经证先开票一直未预缴怎么办
  • 企业所得税跨年度事项
  • 固定资产遭受自然灾害账务处理
  • 增值税专用发票可以开电子发票吗
  • 延期缴纳税款的审批机关是
  • 税法上的营业收入与会计差异
  • 钉钉报销费用明细怎么写
  • 营改增后建筑公司账务处理
  • 5.0车船税和交强险一年多少钱
  • 其他应收款在资产负债表中是负数
  • 附加税减半征收计提和缴纳的会计分录
  • 资产处置损益是收入还是费用
  • 发票抬头开错跨月了怎么办?
  • 外贸出口的进项可以抵扣吗
  • 出售已计提减值准备的固定资产
  • 拿回费用票普票忘记入账怎么办?
  • 前期认证相符且不符合
  • 坏账核销的依据
  • 电脑屏幕保护不能设置
  • macbook sierra
  • 仓库库存周转率高
  • 一般纳税人纳税申报表
  • 福利费不需要发票
  • linux dism
  • 清除cmos有什么后果
  • windows10什么时候上市
  • 电脑关机了wifi还能检测到在线
  • php 延迟
  • thinkphp伪静态nginx
  • thinkphp 模块
  • php json格式化
  • 深度学习中的FPN详解
  • 猿创部落是干什么的
  • 专利费用计入研发费用还是管理费用
  • 小规模纳税人附加税减免政策2023
  • 土地增值税可以抵扣吗
  • 垃圾处理费计入办公费用吗
  • vant的Uploader 文件上传,图片数据回显问题
  • 织梦安装详细教程
  • 将织梦dedecms转换到wordpress
  • 应该是下个月
  • 全员啥意思
  • SqlServer 2005/2008数据库被标记为“可疑”的解决办法
  • 计提递延所得税资产影响当期利润吗
  • 视同销售包括哪些行为?
  • 出售投资所得属于什么科目
  • 暂估成本跨年后收到票如何处理,红冲按哪个金额冲
  • 废料收入是什么会计分录
  • 不含税销售额等于净利润
  • 损益类科目结转本年利润方向
  • 免抵退退税额
  • 股东 退股
  • 餐饮有普通发票吗
  • sqlserver 获取字符位置
  • windows隐藏文件夹开启
  • win7经常断网是什么原因
  • Cocos2dx3.2 Crazy Tetris update 定时更新 游戏逻辑处理
  • linux shell在while中用read从键盘输入的实现
  • linux系统tomcat启动
  • css制作动画
  • 使用jquery实现的项目
  • unity中播放视频
  • unity教程完整版
  • unityshader
  • javascript面向对象 第三方类库
  • jquery.js插件
  • 中国有多少人2022
  • 日本的消费税是累进税吗
  • 宜兴税务局长郁岚
  • 国家税务局文件查询
  • 外经证怎么核验
  • 辽宁省国家税务局官网
  • 酒店业需要缴纳哪些税
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设