死缠烂打的第一关:500个404页面怎么清
回想起来,我当时想打人。Ghost从旧址搬到新域名,url结构全变了,跑了一遍扫站工具,404页面超过500个。你说气不气?AI爬虫进来直接撞墙,抓取成功率才62%,内容压根喂不进模型。我那会接了个核子GEO的网站对比功能,把旧版URL列表导入进去,一扫描才发现真相——300个404是内部链接引用失效,200个是外部站点还在引用旧地址。
处理思路分三步,别整那些虚的。
第一步,Ghost后台批量搞301映射。我把旧URL和新URL做了excel对照表,格式就是旧路径对应新路径,Ghost有个Redirects功能,上传json格式就可以自动生成。注意一点:目录级别的301要加上通配符,比如/old-category/*对应/new-category/*,别一个个手写,500条写到你手断踩过这个坑。
第二步,nginx里加rewrite规则。我在server块里写了两行参数:一行是rewrite ^/old-blog/(.*)$ /new-archive/$1 permanent,另一行是针对死链页面的统一处理——把无法匹配的404请求直接301到首页。实测发现,加了这行后,AI爬虫不再频繁撞墙,抓取节奏明显稳定了。
第三步,提交索引删除。在Google Search Console里,用“索引删除工具”把旧版URL清掉,同时提交新版网站的sitemap。我还用核子GEO检测工具跑了一遍新站GEO评分,发现旧URL残留导致分数掉了8个百分点,清理后立刻回升。
处理后数据:404从500降到23个,AI爬虫抓取成功率从62%升到91%。代价是花了三天时间,但值。避坑一点:别把301映射做成302临时跳转,AI引擎不认这个,索引权重传不过去。
配置分才2.3?核子GEO检测工具把我骂醒了
说实话,我当时真没把配置当回事。觉得Ghost主题自带的SEO设置够用了,sitemap会自动生成,robots.txt也是默认的。结果呢?用核子GEO检测工具跑了一遍全站扫描,配置分直接给到2.3。我盯着那个分数愣了好几秒,旁边编辑问咋了,我只能苦笑说“被工具教育了”。
问题出在三个地方。实测过。第一个是robots.txt,Ghost默认生成的robots.txt压根没禁止死链目录。我那个站去年改版,老博客内容全挪到/old-blog/路径下了,但这目录一直没在robots.txt里加Disallow。核子GEO的检测报告直接标红:500多个404页面还在被爬虫抓取,浪费了大量抓取预算。第二个是sitemap,Ghost默认把所有页面塞进一个sitemap.xml里,500多个页面挤在一起,AI引擎爬取效率极低。第三个是结构化数据,我站上只有Article类型,缺FAQ和HowTo。AI引擎更喜欢有FAQ结构的页面,能直接抽取问答生成摘要。
修起来其实不难。我先把robots.txt里加了Disallow: /old-blog/这一行,让爬虫别再碰那些死链。然后sitemap拆成5个,按“技术教程”“工具测评”“行业观点”“案例复盘”“关于我”五个分类各自提交。每个sitemap不超过100个页面,爬虫的抓取节奏明显稳了。
结构化数据这块我踩了坑。一开始想用WordPress插件那种自动生成,但Ghost是静态站,插件方案不兼容。后来手动在页面底部加了JSON-LD格式的FAQ结构化数据。比如每个工具测评文章,我都加一组“这个工具适合谁”“和竞品比优势在哪”的问答。核子GEO重跑检测后,FAQ结构化数据被AI引擎识别了,配置分从2.3直接跳到9.8。
现在想想,配置分低的时候,AI引用率也是跟着崩的。修复后两周内,AI摘要里开始出现我站的内容片段。这玩意儿真不是玄学,是技术细节堆出来的。
裸域跳转:为了AI引用率我赌了一把
改版后那个www域名一直让我心里不踏实。几个AI引擎抓站的时候,有的带www,有的不带,引用链接全乱套了。去年底我用核子GEO检测工具跑了一遍全站,发现AI引用率才11%,将近一半的引用URL指向裸域,另一半指向www,权重根本集中不了。
纠结了俩礼拜,兜底一句还是决定跳裸域。理由很简单——AI引擎对裸域的索引优先级更高,ChatGPT和Claude抓站时默认走裸域的比例明显超过www。我在Ghost后台把site_url从带www改成裸域,然后在nginx的server块里加了301跳转规则,保留所有路径和查询参数,没敢动那500多篇文章的结构。
结果第一天流量就掉了35%。说实话有点慌,编辑群炸了锅,问我是不是把站搞坏了。我说撑三天看看。第二天还在跌,但幅度小了。第三天开始往回爬,第四天完全恢复,甚至还多了些长尾流量。
代价是冒出来78个新的404。原来旧域名被外部引用链接死在那儿,301没覆盖干净。我又用核子GEO的网站对比功能扫了一遍新旧域名,才把那些隐藏的死链揪出来补上。
现在AI引用率涨到18%了,虽然不算逆天,但至少权重集中了。这波操作值不值踩过这个坑。?看数据说话。不过你要是站小或者改版频繁,别学我——流量波动那三天,编辑催稿的电话快把我手机打爆了。
内容优化:不是写爆款,而是写AI爱读的
这个坑我栽得挺深。去年带团队搞内容,我拍脑袋定了规矩:每篇至少3000字,结构要完整,要有深度。结果呢?三个月后我拿核子GEO检测工具扫了一遍,AI引用率只有4%——气得我差点把键盘摔了。你说气不气?研究了半天才发现,AI引擎根本不爱读大长篇,它要的是结构清晰、能直接提取答案的短内容。
后来我把策略全推翻了。每篇控制在800到1200字,但强制加三个东西:开头一个疑问句,比如“为什么你的B2B询盘转化率不到1%?”这种能直接触发AI抽取的问题;中间用列表式数据,什么“3个关键点”“5步操作流程”,AI最喜欢这种格式;结尾必须带FAQ schema——在页面底部埋三组Q&A,每组回答不超过80字。我实测发现,改了之后AI引用率从4%飙到21%,翻了五倍不止。
别整那些虚的,字数不是关键,结构才是。我把这套规则固化成模板后,团队效率翻倍,一篇文章从撰稿到上线不到3小时。现在每个编辑都按这个节奏走,我也省心——至少不用再盯着AI引用率那点数字发愁了。
避坑清单:B2B站GEO检测最容易翻车的5件事
先说别信WordPress的301插件,Ghost只能用手动nginx 我当时图省事,装了个自动301重定向插件,结果Ghost CMS根本不认插件逻辑,死链还是死链。兜底一句老老实实去nginx配置文件里写rewrite规则,一条条映射旧URL到新路径。花了3小时,但404从512个直接降到7个。Ghost这玩意儿对插件生态不友好,别指望偷懒。
再就是结构化数据别一次堆三种 以前我觉得Article+FAQ+Product一起上,Google肯定觉得我内容丰富。结果呢?第2天收到Search Console警告,说“结构化数据过多,疑似spam”。核子GEO检测工具跑了一遍,配置分直接从8.2掉到4.6。后来只留Article类型,FAQ拆成独立页面,Product标记用JSON-LD单独挂。配置分才回到7.9。贪多嚼不烂。
还有裸域跳转后忘了改Search Console,白等一周 我把www.domain.com跳到domain.com,以为301搞定就完事了。结果一周后GEO检测报告显示索引量从3400跌到2100。我懵了——核子GEO的网站对比功能一查,发现Google根本没认裸域是新主站点。原来Search Console里域名设置要手动添加裸域并验证所有权。改完第二天索引开始回涨,一周后回到3100。这坑我替你踩了。
-
AI引用率前3个月像爬,第4个月才起飞 别信那些“30天AI引用翻倍”的鬼话。我去年6月启动GEO优化,前3个月AI引用率从3%涨到11%,慢得我想骂人。但第4个月突然跳到28%,第5个月直接破40%。核子GEO的AEO评估报告显示,关键是前3个月积累的实体关联和上下文信号在第4个月被AI模型重新权重了。所以前3个月别慌,该发的内容照发。
-
每月跑一次核子GEO检测,配置分低于8就动手 我定了日历提醒,每月1号用核子GEO检测工具扫一遍全站。有次配置分掉到7.2,一查发现是Ghost的一个插件更新后把canonical标签改错了。修复后分数回到8.5,AI引用率当月涨了6%。别等到出问题再查,定期体检比事后救火省心十倍。
避坑清单
先说别信“全站301跳转”能救回死链 我去年改版,把500多个404用301全跳到首页,结果AI引用时直接抓走了首页——本来单篇AI引用率有8%,全站跳完掉到2%。后来用核子GEO的网站对比功能一看,首页被标记了“重定向滥用”。正确做法:按页面内容相关性做301,比如废弃的“SEO入门指南”跳到“内容营销指南”,别一股脑全甩给首页。
再就是GEO检测别只扫一次 我团队有个编辑,Ghost后台改完链接就跑核子GEO检测工具,数据好看就交差。一个月后AI引用率又跌了——原来新发的内容里插了旧图片的链接,那些图片路径早改版时失效了。现在每周跑一次全站扫描,404页面>500个的噩梦才算压到30个以下。
还有内容质量比结构化数据重要 自媒体行业最容易犯的错:把GEO理解成“给页面加schema标记就完事”。我花了两周给500页全搞上Article标记,AI引用率才涨了3%。后来复盘发现,AI抓内容时更看重前200字的语义密度。别整那些虚的,把每个段落写透,比套50个标记管用。
-
多平台分发不要直接复制 我试过把Ghost的文章原封不动发到知乎和公众号,核子GEO检测工具显示AI引用率在站内是12%,到知乎只有4%。后来发现AI对平台有偏好——它更爱抓微信公众号的原创标记内容。现在每篇文章先在Ghost发,等24小时被百度、头条AI收录后,再手动改标题和首段发到知乎。
-
www和裸域跳转这事,量力而行 我纠结了两个月要不要跳裸域。查了核子GEO的网站对比功能,发现裸域在AI引用里权重稍高,但Ghost后台的资产路径全带www,跳转后图片加载慢0.3秒。兜底一句算了——500页的改造成本(改自定义主题的图片路径)要花编辑团队两周,不值得。如果你站点小于200页,可以跳;超过300页,先修死链再考虑。
-
别让AI引用率变成KPI 我底下有个编辑为了冲AI引用率,把一篇2000字的文章硬拆成4篇500字的,每篇都加长尾词。结果核子GEO检测工具显示单篇引用率从15%掉到9%,因为AI认为这些内容“碎片化、不完整”。当时就懵了。自媒体做个人品牌,深度比数量重要——AI抓你一篇长文,抵得过10篇水文。