核心用法
Technical SEO Checker 是一款面向技术SEO领域的专业审计技能，通过9步结构化诊断流程识别阻碍搜索引擎抓取、索引和排名的基础设施问题。核心审计维度包括：
1. 可抓取性审计 — 检查robots.txt配置、sitemap发现路径、重定向链、孤立页面及爬虫预算浪费（如分面导航参数爆炸）
2. 可索引性审计 — 验证覆盖率、排查阻塞信号（noindex、X-Robots、canonical冲突）、404/500错误
3. Core Web Vitals与速度 — 评估LCP（目标<2.5s）、INP（<200ms）、CLS（<0.1）及资源优化空间
4. 移动友好性 — 检测视口设置、布局适配、触控目标尺寸
5. HTTPS安全 — SSL证书健康、混合内容、HSTS及安全响应头
6. URL结构 — 参数规范、大小写一致性、重定向卫生
7. 结构化数据 — Schema验证与缺失机会识别（⚠️需渲染DOM验证JS注入的JSON-LD）
8. 国际化SEO — hreflang实现、return标签、x-default配置
特色能力：支持AI爬虫专项审计（GPTBot/ClaudeBot/PerplexityBot），提供"允许检索但阻止训练"的分割策略；内置网站迁移6阶段检查清单（基线快照→风险地图→重定向映射→ staging QA→切换清单→T+1/T+7/T+30差异追踪）；批量审计模式可处理50+URL的电商规模诊断。
显著优点
- 零依赖本地工具链：提供robots.py、sitemap.py、crawl.py、psi.py等Python脚本，无需外部API密钥即可执行基础审计
- 渲染差异检测：通过Firecrawl keyless免费层获取渲染后DOM，对比原始HTML暴露JS-SEO缺口
- 修复效果追踪：ledger.py支持记录→对比Core Web Vitals变化，量化优化成果
- 索引推送能力：修复后可调用IndexNow协议分钟级通知Bing、DuckDuckGo等引擎（Google除外）
- 平台专项模式：内置Shopify/WooCommerce/Headless/BigCommerce/Magento 2针对性检查清单
局限性与风险
- Google索引推送受限：Google Indexing API仅开放招聘/直播类页面，常规页面仍需依赖sitemap与传统发现机制
- 客户端渲染盲区：原始抓取无法捕获JS注入的内容与结构化数据，必须显式使用渲染DOM验证
- CrUX字段数据依赖：真实用户性能数据需外部连接，缺失时标记为N/A而非估算
- 证书透明度日志慢速：子域名发现依赖crt.sh接口，存在超时风险
- AI爬虫策略需人工决策：robots.txt模板依赖用户明确选择开放/封闭/分割立场
适合人群
- 技术SEO专员与网站性能工程师
- 电商平台运维团队（Shopify、Magento、Headless架构）
- 网站迁移项目负责人（CMS更换、域名迁移）
- 需要监控AI爬虫合规策略的内容平台
常规风险
- 误配置robots.txt风险：wildcard规则可能意外阻塞整站或关键页面目录
- 迁移重定向链断裂：旧URL未正确映射导致流量损失与排名下降
- 渲染差异导致索引不全：核心内容依赖客户端JS可能无法被搜索引擎抓取
- 批量审计样本偏差：模式级抽样可能遗漏边缘案例问题
数据来源标识严格区分Measured（工具实测）、User-provided（用户提供）、Estimated（模型推断），杜绝虚构指标。