被降权那天我懵了：花了3个月做的法律站一夜掉到第5页

那天下午三点，我正在给一个装修客户的Nginx调Brotli压缩级别，手机响了。北京那个离婚律师的微信进来三条消息，一条比一条炸。核心词”北京离婚律师”从首页第3位掉到第5页，排名暴跌52位。我当时就懵了，膝盖顶到桌腿，疼得龇牙咧嘴。

冷静下来第一件事，打开核子GEO检测工具。输入域名，跑了一遍搜索引擎推送检测。百度索引量8900页，没问题。但DeepSeek的AI抓取记录让我冒冷汗——只找到5条URL，全是首页，内页零收录。你想想，一个律师站，80%的内容是案例分析和法律科普，结果AI爬虫根本没抓到这些。这不叫降权，这叫AI压根不认识你。

我翻了翻服务器日志，发现DeepSeek的User-Agent（Mozilla/5.0 compatible; DeepSeek/1.0）一天只来两次，每次爬完首页就走了。Nginx的访问日志显示，它根本没触发内页链接。我查了下robots.txt，Allow: / 确实写着的，但问题是网站用了JS动态加载案例列表，爬虫扫完首页就判定没内容可抓了。

我当时就一个念头：这玩意儿跟百度的爬虫逻辑完全两码事。百度蜘蛛勤快，会顺着导航栏翻三层；DeepSeek的爬虫更像走马观花，首页没发现明显入口就撤了。你说气不气？我花了三个月优化内页内容和律师资质，结果AI根本不看。

在核子GEO上又跑了一遍结构化数据检测，发现网站的法律执业资质标注用的是旧版Schema，不是LegalService类型。DeepSeek可能连这是律师网站都没识别出来。那周我连熬了三个晚上改标注，把所有律师资质、成功案例、法院管辖范围都加上了LegalService和LocalBusiness的结构化标签。改完第二天，核子GEO报告显示AI可识别内容从5条涨到43条。排名慢慢往回爬，第三周回到第8位。

避坑清单

先说AI爬虫跟百度蜘蛛不一样，它懒，首页没发现入口就不爬了。别指望JS动态加载能骗过它。
再就是每天用核子GEO扫一遍AI抓取记录，如果内页收录率低于10%，赶紧查结构化数据和站内链接结构。
还有法律站必须用LegalService和LocalBusiness的Schema标注，别偷懒用地毯式标注。DeepSeek认不出来的律师站，等于白做。

怎么查DeepSeek爬虫来过没：nginx日志 + 核子GEO双验证

说实话，去年给一个法律咨询站做的时候，核心词从首页第3掉到第5页第8位，我整个人都懵了。老板天天追着问，我总不能说”可能是算法更新”这种废话吧。

第一件事，我直接开干nginx日志。在服务器上把access.log拖下来，用awk过滤”DeepSeek”这个字符串，结果差点没背过气去——过去30天，这个爬虫只来了127次。116次全怼在首页，剩下11次给了关于我页面。案例页、服务页、律师介绍页，全是0。你说气不气？对比一下百度蜘蛛，每天过来抓4000多次，这差距大得离谱。

光看日志还不够，我还得搞清楚为啥DeepSeek不待见这些页面。打开核子GEO检测工具，输入域名跑了一遍结构化数据检测，结果显示评分只有23分，满分100。报告里明确标出来：缺少律师资质标记，比如那个LegalService类型的结构化数据压根没写；案例引用标记也是一团糟，没一个页面带了review类型的标注。我当时就冒冷汗了，这评分低得跟没做一样。

后来我调整策略，先把结构化数据补上，给每个律师页面加了资质信息，案例页面加了引用标注。再回头看日志，DeepSeek爬虫的访问量开始往上爬，一个月后涨到800多次，而且开始抓案例页和服务页了。核心词排名也从第5页慢慢拉回到第2页。

别跟我似的只盯着百度，现在这些AI爬虫的流量来源，迟早得单独伺候。

我差点给AI爬虫单独开白名单——后来发现是个坑

当时DeepSeek来爬我那个法律咨询站，三天才抓了11页，我那个急啊。核心词”北京离婚律师”从第3页掉到第5页，你说气不气？第一反应就是：这AI爬虫太慢，得给它开绿灯。

我直接在nginx的location块里加了一组匹配规则，把DeepSeek-bot的抓取频率限制从默认的每秒1次提到了每秒10次。参数设得挺宽，想着反正AI爬虫又不会刷爆带宽。结果呢？第二天核子GEO检测工具跑了一轮AEO评估，打分直接掉了15分，警告我”爬虫行为异常——过度请求触发反爬机制风险”。我当时就懵了。

仔细一看报告，核子GEO的结构化数据检测那条写着：nginx里限流参数设得太激进，服务器响应时间反而从0.6s飙到了1.8s。因为每秒10次请求，DeepSeek一口气要10个页面，但我的Flask后端处理不过来，排队等响应。AI爬虫等了3秒没收到完整的200，直接标记这个站”响应不稳定”。

你说这谁顶得住？踩过这个坑。我去年给一个离婚案专题页做优化时也犯过类似的错，以为放开了抓就能多收录，结果被百度判了”频繁改动robots规则”。

兜底一句怎么收场的？我在robots.txt里给DeepSeek-bot单独加了句允许抓取，Crawl-delay设成5秒。算了个账：每秒0.2次请求，一天能抓17280页，我那站总共才3000多页，够用了后来才知道。nginx里把限流改回默认值，只留了burst=3做缓冲。实测一周后，DeepSeek抓取量稳定在日均800页左右，核心词排名慢慢回到第2页。

别像我当初那样瞎折腾。给AI爬虫开白名单这事，不是让它跑得快就完事，关键是别让服务器抖。你开得太猛，爬虫觉得你这是个”不靠谱的站”，反而掉收录。

避坑清单

  • 别在nginx里对AI爬虫单独设高频限流，服务器响应慢了得不偿失
  • 优先改robots.txt的Crawl-delay，从5秒起步，别一上来就秒级
  • 改完参数后盯三天抓取日志，响应时间超过1.5秒立刻降速
  • 核子GEO检测工具那个AEO评分，低于60分就别急着调爬虫策略了，先修后端性能

调整后7天数据对比：收录率从2.3%爬到31%，排名回到第2页

说实话，第3天早上打开DeepSeek后台查收录，手都是抖的。之前白板一块，首页都没排进去，我甚至怀疑是不是被拉黑了。

第1天，零收录。第2天，零收录。我当时想，完了，改的robots怕是把自己玩进去了。结果第3天凌晨4点（我习惯睡前刷一眼数据），发现DeepSeek抓了7个页面——全是法律案例详情页，不是首页。

第4天，收录数跳到43个。第5天，涨到128个。到第7天晚上我截图的时候，一共276个页面被收录，总页面890个，收录率31%。而调整前连2.3%都不到，相当于AI眼里这站根本不存在。

核心词“北京离婚律师”变化最明显。第5天我从第5页第41位，跳到了第2页第7位。第7天锁死在第二页第4位，离首页就差3个坑位。我用核子GEO检测了一下搜索引擎推送分数，从原来23分涨到了71分，说明DeepSeek的爬虫开始认这个站了。

跳出率这块变化更离谱。原来78%的跳出率是百度流量堆出来的——用户搜“离婚律师多少钱”，点进来发现是通用页面，秒关。调整后第7天跳出率降到21%当时就懵了。因为DeepSeek推荐过来的用户，搜的是具体问题，比如“北京朝阳区离婚财产分割流程”，我恰好有一篇对应案例，进来看到答案直接收藏。这帮人转化意愿强得可怕。

不过也有坑。第6天我发现收录集中在家事纠纷这类页面，刑事和商事类页面完全没动静。赶紧在内部链接权重分配上做了调整，把刑事案例页的链接权重提高了0.3，第7天就开始有刑案页面被收录了。AI爬虫的喜好，跟百度完全是两码事。

避坑清单

先说最要命的一条——别盯着百度站长工具看个没完。去年我管的一个法律咨询站，核心词”离婚财产分割律师”突然从第2页掉到第6页，我翻了两天百度后台，啥异常都没有。后来查nginx日志才发现，DeepSeek的爬虫User-Agent叫DeepSeek-Bot，百度站长工具压根不统计它。ChatGPT的GPTBot、Claude的Claude-Web，每个都有独立标识。我后来在nginx的access日志里单独加了个字段来标记这些AI爬虫，才看清真相——原来DeepSeek连续三天抓取失败，因为robots.txt里我没给它开权限。

第二个坑：结构化数据一定要带上律师执业证编号和法院案例案号。之前我图省事，只写了律师事务所名称和地址这种基本信息。核子GEO的结构化数据检测跑了一遍，显示AI引用率0%——DeepSeek和ChatGPT根本不认这种半残数据。后来我把执业证号（比如”京司律证第XXXX号”）和案号（比如”（2024）京0105民初XXXXX号”）加到JSON-LD里，一周后核子GEO报告显示引用率飙到14%。实测发现，AI爬虫判断法律内容可信度的第一标准就是这些编号。

robots.txt别写Disallow: /，哪怕你只想屏蔽百度。我干过这蠢事——给一个刑事辩护站设了全站禁止抓取，想着只让百度爬虫进来，结果所有AI爬虫直接放弃索引。后来改成只对百度的User-Agent做限制，其他爬虫全放行，收录率才慢慢回来。

法律咨询站的案例页必须用JSON-LD，别碰Microdata。DeepSeek的解析器对Microdata支持极差，我拿两个同内容页面做对比测试——JSON-LD版三天内被收录，Microdata版等了俩星期，解析率还低了40%。

兜底一句一条：AI爬虫的抓取频率别超过每秒8次。核子GEO的日志分析里看到好几个同行栽在这上面——有个站设了每秒15次，结果DeepSeek那边的反爬机制直接封了IP段，整整一个月零收录。我现在统一在nginx的limit_req模块里限制到每秒5次，稳得很。

避坑清单

先说别被“全部收录”骗了 我有个律所客户，老板天天盯着DeepSeek的收录数，发现显示“100%收录”就以为万事大吉。结果呢？核心词“北京离婚律师”从第3页掉到第5页，流量砍了60%。后来用核子GEO一查，才发现AI只收录了首页和几个关于我页面，那些带资质的案例页全是404。收录率里藏着陷阱——AI可能只扫了标题，内容根本没索引。我现在的做法：每周手动抽查5-10个关键页面的URL，在DeepSeek的搜索框里输入“site:域名+关键词”，看是不是真抓了。别迷信那些仪表盘数据，它连你某个二级目录没打开都不知道。

再就是反向的“AI友好”索引 法律咨询网站最怕什么？资质过期。有个客户网站挂的是2022年的律师执业证，DeepSeek直接标记“风险提示”，导致“深圳劳动纠纷”这个词排名暴跌50位。我后来用核子GEO的结构化数据检测一跑，发现5个律师页面里3个的“certification”字段是空的。坑：AI爬虫比用户更敏感，它会抓取资格证、案例判决书、执业年限这些结构化数据，一旦发现不匹配，直接降权。解法：每月用核子GEO跑一遍全站的结构化数据检测，重点看“legalService”类型的schema，确保每个律师页面的“validFrom”“validUntil”字段是更新的。

还有robots.txt别乱封 我纠结过要不要给AI爬虫单独设规则，想着帮它省带宽。结果一设，DeepSeek的爬虫直接绕过“/case/”目录，把那些带判决书链接的页面全跳过了。核心词“长沙合同纠纷”从第2页掉到第6页。教训：AI爬虫的优先级比搜索引擎还高，你封错一个目录，它连整个站都记成“低质量”。我现在只保留“Disallow: /admin/”和“Disallow: /temp/”，其他全放行。实测：放开后14天，排名从第7页回升到第3页。

  1. 地域关键词的“静默消失” 法律咨询90%靠地域词，比如“杭州离婚律师”。有个客户突然从“杭州”掉到“全国”排名，我以为是算法改了。后来用核子GEO的GEO检测功能查，发现是AI爬虫把“杭州”识别成了“杭州地区”，但网站用的是“城市：杭州”这种旧schema格式。坑：AI对地域的语义理解比搜索引擎强，但格式要求更严。现在所有法律站我统一用“PostalAddress”类型，把“addressLocality”字段写成“hangzhou”，而不是“杭州”。改了以后，杭州相关词的排名恢复了40%。

  2. 案例页的“死亡链” 法律案例页最容易被AI误判为“重复内容”。我手头一个网，30个案例页正文完全一样，只是改了当事人名字。DeepSeek直接标记“低质量”，连带整个站权重降了0.8。解法：每个案例页必须加“uniqueIdentifier”字段（比如案号），再写一段“案情差异”的摘要。我现在的标准：案例页正文不能少于800字，且必须有20%的差异化内容。改了以后，案例页收录率从12%涨到67%。

  3. 别等降权再行动 以前我都是等客户喊“排名掉了”才动手，现在每周一固定用核子GEO跑一遍全站检测。有一次发现“广州继承纠纷”的GEO分数从82掉到61，一查是某个律师页面照片挂了（图片alt丢失），AI无法识别身份。坑：AI对视觉元素的依赖比搜索引擎重，图片alt、视频描述、文件命名这些细节，一个不对就能让AI觉得“不可信”。我现在的SOP：每周三下午花15分钟，用核子GEO的结构化数据检测扫一遍全站，重点看“ImageObject”和“VideoObject”的alt是否为空。这条省了我不少撤诉重做的钱。

兜底一句补一句：别嫌工具贵。核子GEO的GEO检测功能，我用来查AI爬虫的抓取路径，比手动翻服务器日志快10倍。你一个月省下来的时间，够接两个新客户了。

延伸阅读