脚本如何标记失效友情链接

wen 实用脚本 2026-06-26 27

自动化检测与维护终极指南

目录导读

引言：为何要自动化标记失效友情链接？
失效友情链接的常见表现与检测原理
基于Python的失效链接检测脚本详解
基于Shell脚本的快速检测方案
脚本标记、分类与输出报告的最佳实践
如何将脚本集成到CMS（如WordPress）中
常见问题与专家问答（FAQ）
总结与SEO维护建议

引言：为何要自动化标记失效友情链接？

友情链接是网站SEO建设的重要环节,但死链（Broken Links）会严重影响用户体验和搜索引擎排名，据统计，一个拥有500个友情链接的站点，每月可能产生5%-10%的失效链接，手动检查耗时且容易遗漏。

脚本标记失效友情链接的核心价值在于：

效率：10分钟内可检测数千个链接。
准确性：避免人工误判（如临时跳转与非200状态码的区别）。
可追溯：生成标记报告，便于后续联系站长或移除。

本文将从零开始,教你使用Python和Shell脚本检测并标记失效友情链接，并适配Google和必应的SEO规则。

失效友情链接的常见表现与检测原理

1 失效链接的特征

HTTP状态码：404（未找到）、410（已删除）、500（服务器错误）、301/302（永久/临时跳转，需结合场景判断是否视为失效）。
响应超时：超过预设时间（如10秒）无响应。
域名失效：DNS解析失败或域名未续费，变更：虽然状态码200，但页面内容与友情链接无关（如被篡改为赌博页面）。

2 检测原理

脚本通过发送HTTP请求（HEAD或GET方式），分析响应状态码与响应时间，若状态码非200且非友好的跳转（如301到首页），则标记为失效。

注意：部分网站会屏蔽脚本请求，建议使用浏览器UA头（User-Agent）并设置适当的请求间隔，防止被反爬。

基于Python的失效链接检测脚本详解

以下是一个完整的Python脚本示例（已针对SEO规则优化）：

import requests
import csv
import time
from urllib.parse import urlparse
def check_link(url, timeout=10):
    headers = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36'
    }
    try:
        # 仅发送HEAD请求，减少带宽消耗
        response = requests.head(url, headers=headers, timeout=timeout, allow_redirects=False)
        status_code = response.status_code
        # 如果HEAD被禁止，改用GET
        if status_code == 405:
            response = requests.get(url, headers=headers, timeout=timeout, allow_redirects=False)
            status_code = response.status_code
        return status_code
    except requests.exceptions.RequestException:
        return -1  # 标记为连接失败
def main(input_file, output_file):
    with open(input_file, 'r') as f:
        links = [line.strip() for line in f if line.strip() and not line.startswith('#')]
    results = []
    for i, link in enumerate(links):
        status = check_link(link)
        # 自定义“失效”判断标准（可根据实际调整）
        if status not in [200, 301, 302]:  # 假设301/302视为有效（实际需确认目标页）
            remark = '失效' if status == 404 else f'异常状态码:{status}'
        else:
            remark = '有效'
        results.append([link, status, remark])
        time.sleep(0.5)  # 礼貌间隔，避免被封
        print(f'[{i+1}/{len(links)}] {link} -> {remark}')
    # 输出CSV报告
    with open(output_file, 'w', newline='', encoding='utf-8-sig') as f:
        writer = csv.writer(f)
        writer.writerow(['链接', '状态码', '标记'])
        writer.writerows(results)
    print(f'检测完成，共{len(results)}条，失效/异常数：{sum(1 for r in results if r[2]!="有效")}')
if __name__ == '__main__':
    main('友链列表.txt', '友链检测报告.csv')

脚本要点说明：

使用HEAD请求：比GET更快，且不下载页面内容。
状态码判断：本脚本将非200、301、302的链接标记为异常，实际中，301重定向到首页可能仍算“有效”，需手动复核。
错误处理：网络超时、DNS异常均返回-1，便于统计。

基于Shell脚本的快速检测方案

对于Linux服务器环境,可以使用一行命令快速检测（依赖curl）：

#!/bin/bash
# 友链检测脚本 v1.0
input="links.txt"
output="broken_links.txt"
echo "链接,状态码,标记" > $output
while IFS= read -r url; do
    status=$(curl -o /dev/null -s -w "%{http_code}" --max-time 10 -A "Mozilla/5.0" "$url")
    if [ $status -eq 200 ] || [ $status -eq 301 ] || [ $status -eq 302 ]; then
        echo "$url,$status,有效" >> $output
    else
        echo "$url,$status,失效" >> $output
    fi
done < "$input"
echo "检测完成，结果已保存至 $output"

适用场景：轻量级、无需安装Python的服务器环境，但功能较简陋，无法精细处理异常。

脚本标记、分类与输出报告的最佳实践

1 标记分类标准

状态码范围	标记类型	处理建议
200	有效	保留
301/302	重定向	确认目标链接是否合理，否则视为诱饵
404	失效	立即移除或联系站长
500-599	服务错误	临时标记，等待恢复后复核
超时/无响应	连接失败	网络问题或域名死亡

2 输出报告优化

CSV格式：便于Excel打开筛选，字段包括：链接、状态码、响应时间、标记类型、检测日期。
HTML格式：生成带彩色标记的表格，例如红色背景表示失效，绿色表示有效，适合直接发邮件给站长。
日志记录：每次检测自动追加到日志文件，方便追踪历史变化。

如何将脚本集成到CMS（如WordPress）中

1 使用WordPress钩子（Hook）

在functions.php中添加：

add_action('wp_cron', 'custom_link_checker');
function custom_link_checker() {
    // 调用Python脚本（需配置服务器权限）
    exec('python3 /path/to/checker.py');
    // 或使用内置HTTP API
}

建议设置每周自动运行一次（通过WP-Cron与服务器真实Cron结合）。