网站能打开不等于 AI 能读懂。本文列出做站点诊断时反复出现的六个结构性错误：sitemap 更新日期全站相同导致抓取无优先级、正文靠 JavaScript 渲染爬虫只拿到空壳、页面标题模板化被判重复内容、robots 放行却没有 site

对 65 篇内容的站点做 26 天爬虫日志实测：字节爬虫访问 512 次、sitemap 被拉 34 次，但 85 条 URL 中只有 1 个内容页被抓、索引 0 条。用 Bing 89 页、Google 46 页、字节 1 页的同源对照排除内容质量问题，定位到抓取展开与 lastmod 全站同日期两个症结，并给出可复现的统计命令与修复代码。