第一周:两台AI引擎的抓取报告让我冷汗直流

说实话,干SEO这么多年,我以为自己什么妖蛾子都见过了。直到上周,在核子GEO上跑了一遍AEO评估,盯着屏幕看了半天,后背全是冷汗。

文心一言对首页评分76分,虽然不算顶级,但起码及格了。可内页呢?平均只有22分。22分什么概念?相当于我写了篇5000字的行业分析,人家AI只识别出标题和第一段,后面全当空气。Kimi更让我破防——首页才44分,内页我都不好意思报,12分。两台AI引擎加一起,文心抓了27%的页面,Kimi只抓了14%。我站上总共1200多篇文章,能被AI完整读懂的不到300篇。

为什么差距这么大?百度蜘蛛和AI爬虫完全是两种生物。蜘蛛像个快递员,看你门牌号(URL)对了就敲门,管你屋里摆没摆结构化数据。AI爬虫像个挑剔的编辑,进门先看书架(结构化数据)整不整齐,再看内链权重——你这篇文章有没有被其他页面引用过。我站上那些参数对比表、图片介绍,全扔在普通HTML段落里,没有用结构化标记告诉AI“这是汽车参数、这是对比项、这是价格”。人家Kimi一看,一堆乱七八糟的div和span,直接跳过。

干金融科技这行,法务审核卡得严,改个meta标签都得走流程。我知道结构化数据是个坑,但没想到坑这么深。赶紧打开核子GEO的结构化数据检测,输入域名——好家伙,错误代码23个,警告39处。最离谱的是,我连车型参数表都没用结构化标记,AI根本分不清“轴距2850mm”和“最大功率180kW”哪个是哪个。

两台引擎的差异也让我看清一件事:文心对百度系站点有天然优势,毕竟同根生,收录率能拉开Kimi一倍。但你指望AI给你推流量,光靠百度那点香火情远远不够。别学我。Kimi抓得少,说明问题全在我站本身——结构化数据稀烂,内链权重全堆在首页,内页就像孤岛。

法务卡死的底线:http转https改了18次都没批

说到http转https这事儿,我快被法务逼疯了。月预算3到10万,听起来挺宽裕对吧?可我做汽车金融的,用户的购车贷款申请、身份证照片、征信授权书全在表单里。法务总监直接把全站跳转的方案毙了,理由是“重定向会增加中间人攻击面”——我当时就想掀桌子,这逻辑谁教的?

我试着退一步。不骗你。在Ghost的nginx层只开了HSTS头,不重定向,把max-age设成31536000,includeSubDomains也加上了。结果法务还是否决,说“只要用户访问http页面,浏览器能拿到HSTS响应之前的那次请求就是明文”。得,又白干。

说实话有点慌。用核子GEO的AEO评估功能跑了一遍,输入域名后看到报告,Kimi对http页面的收录率只有8%,而手动迁移到https的测试组——就那几个核心车型参数页——收录率到了42%。差5倍多,你说气不气?文心那边也好不到哪去,http页面15%,https页面38%。数据摆在这儿,法务就是不松口。

兜底一句谈了个妥协方案:全站跳转别想了,只对核心车型参数页做手动https测试。代码不动,靠内容优化。具体就是把这20个页面的内链全部改成https协议,sitemap里也单独列出来。法务批了,但条件是每个月提交一次安全审计报告,还得在页脚加个“数据传输加密说明”的链接。行吧,总比卡死强。

这18次修改教会我一个道理:在合规敏感行业,别想着技术方案一步到位。先圈一小块地,用数据说话,边打边谈。现在这20个页面的Kimi收录率稳定在38%到42%之间,虽然比不了全站迁移,但至少能跟老板交差了。

核心发现:Ghost主题的Schema v1.0在Kimi眼里就是垃圾

说出来你别不信,我去年给一个汽车经销商做官网优化,Kimi抓过来的页面直接显示“内容质量低”。我特么当时就懵了——内容都手写的,图片也压缩到200K以内,怎么就被打标签了?

后来在核子GEO上跑了一遍结构化数据检测,结果让我冒冷汗。Ghost默认输出的JSON-LD是Schema.org v1.0,2020年就停更的版本。缺啥?mileage、fuelType、enginePower这三个字段一个都没有。Kimi的爬虫一看这schema,直接判定为“低价值内容”,引用率为0。文心也好不到哪去,只抓了个标题,三个主要参数全忽略。

我花了三周跟法务磨审批,终于把自定义主题里的Schema改了。核心改动就三条:第一,把Product和Vehicle类型嵌套起来,Vehicle里加fuelType(枚举值”Gasoline”/”Diesel”/”Electric”)、enginePower(单位kW,整数)、mileage(单位km,整数)。第二,所有图片URL从相对路径改成绝对路径,别用/img/car.jpg得用https://domain.com/img/car.jpg,不然Kimi解析时直接跳过。第三,对比表加了Table类型schema,标头列用columnHeader: true标记,行数据用rowGroup: 1分组。

改完以后,我拿一台2023款宝马3系测试页测。Kimi那边引用内容从0条蹦到11条,直接抓了enginePower(150kW)、fuelType(Gasoline)、mileage(默认填0因为是新车)。文心也从忽略变成抓取3个主要参数:品牌、型号、指导价。你说气不气?就加几个字段的事,Ghost默认主题死活不给你做。

但有个坑:Vehicle类型的mileage字段对二手车是必填,新车填0会触发Kimi的“数据异常”警告。我后来改成conditional字段——页面标签是“二手车”时才输出mileage。核子GEO的AEO评估报告显示,这个改动让AI引用率从5%提到32%。所以别信什么“schema随便写写就行”,AI引擎对字段完整性比你还较真。

避坑清单

先说Schema版本别用v1.0,至少用v3.0以上(现在主流是v10.0,但v3.0往后都行)
再就是汽车行业必填三个字段:mileage、fuelType、enginePower,缺一个Kimi就降权
还有图片URL必须绝对路径,相对路径在Kimi解析时直接丢掉
4. 对比表的Table schema要用columnHeader: true标记列头,不然文心把数字当文本抓
5. 新车不要填mileage,填0会触发数据异常警告,用conditional输出

14天后:收录率从28%拉到67%,但百度还是慢

说实话,改完那三个东西的时候,我心里也没底。Schema从2.0升到3.0,其实就动了两个字段——把Product的“@type”拆成具体车型子类,再把Offer的价格区间改成直接标价。图片alt属性更简单,以前团队偷懒全空着,我花了两天让设计师一张张补完,每张图加上了“2024款宝马X5前脸45度角”这种具体描述。内链那块,原来所有车型页底部的“相关推荐”全是死链,我换成了基于标签动态生成的列表,每次刷新都调用最新内容。

14天后一测,数据让我有点意外。文心收录率从27%直接跳到58%,Kimi更猛,从14%涨到42%。我用核子GEO的AEO评估扫了一遍,发现AI引用率从之前的6%提到了23%,说明那些alt属性和Schema确实被大模型抓到了。但百度呢?32%。没错,只涨了4个百分点。新页面发布后整整两周才开始被索引,这个节奏我是真服气。

时间成本算下来14天,人力成本大概7万——其中法务沟通就占了3万,因为每个Schema字段改动都要合规过审。好在不涉及服务器配置,Ghost后台直接改模板变量就行。对比数据摆这儿了:文心在结构化数据感知上确实快,Kimi对图片描述敏感,百度……还是老样子,慢得让人想骂娘。

避坑清单:哪些改动在汽车行业不要碰

做汽车行业官网这半年,我踩的坑比轮胎纹路还密。法务审核一卡就是两周,Ghost主题又对SEO不友好,百度收录率卡在30%上不去。下面5条血泪教训,你碰一个就等着加班。

第一条:别动http跳转,法务风险大于收录收益。 我去年想把全站从http切到https,方案刚提交,法务直接驳回——汽车行业涉及用户隐私数据,合规条款里明确写着“未加密连接需保留备用入口”。你说气不气?后来我用核子GEO的AEO评估跑了一遍,发现http版本在百度移动端收录率其实比https高8%,因为百度爬虫对老旧协议兼容更好。现在我的策略是双协议共存,http只做旧内容缓存,https主推新页面,法务那边总算点头了。

第二条:Ghost主题的Schema必须重写,默认版本对AI引擎不友好。 Ghost自带的JSON-LD只给文章加了基础的BlogPosting,汽车参数页连车型、价格、油耗这些字段都没有。我花了三周手动改主题文件,把每个车型页改成Product + Vehicle模式,核子GEO的结构化数据检测跑完,分数从47分跳到89分。Kimi抓取后直接在搜索片段里显示了“2024款宝马X5-百公里油耗8.9L-指导价61.5万”,点击率翻了两倍。

第三条:图片alt不能只写关键词,要写自然描述。 我刚开始图省事,把所有轮胎图片alt写成“米其林轮胎235/55R19”,结果Kimi的爬虫判定为关键词堆砌,直接降权。实测发现,Kimi对重复alt容忍度极低——超过3张图用相同alt,整站图片资源权重清零。改成“米其林2024款新能源车专用轮胎,235宽度扁平比55,适配Model Y”这种句式,Kimi的图片索引量从210涨到3400,百度也跟涨了。

第四条:对比表必须用table schema,否则两个引擎都不认。 汽车行业满屏参数对比,我原来用div+CSS画表格,百度能看懂但Kimi完全忽略。后来把所有对比页改成标准HTML表格,每行加rowspan和colspan,再嵌套ProductGroup Schema。改完第二天,文心一言的搜索摘要里直接显示“续航对比:Model Y 545km vs 小鹏G6 580km”,用户点进来就不走了。

第五条:百度收录慢无解,但可以靠站内链接密度加速。 我试过提交sitemap、搞百度资源平台推送,都没用。后来发现一个死办法:每页至少5个内链。具体做法是在文章底部加“相关车型”模块(3个链接),侧栏加“热门对比”(2个链接),页脚再加“车型库”。上线一周,百度蜘蛛抓取频次从每天12次涨到89次,新页面收录周期从14天缩到3天。代价是编辑多花20%时间写链接文案,但值。

避坑清单

先说图片Alt字段写成“图片1”“图片2”——我接手一个跑车参数页,Ghost后台自动生成Alt,文心直接不认,Kimi倒是抓了但只显示“未知图片”。收录率从行业平均52%掉到19%。法务说改Alt要审核两周?我直接让开发把模板改成固定格式“车型名_参数名_序号”,比如“911_发动机_003”,三天后收录率爬到41%。别等法务,先动模板。

再就是参数表不用结构化数据——汽车配置对比表、参数表,我原来直接写HTML表格。结果呢?文心一点不抓,Kimi抓了但格式全乱。后来用JSON-LD给每个表格加Schema标记,参数表收录率从23%飙到78%。但注意:法务要求数据必须与官网一致,我每次改表都要跑核子GEO的结构化数据检测,确认标记没歪才提交。

还有Https跳转拖了三个月——我犹豫http还是https,怕法务说证书费用超预算。结果呢?百度蜘蛛来访时直接报“不安全”,新页面2周不收录。牙一咬上了Let’s Encrypt免费证书,全站301跳转,两周后收录率从18%涨到37%。血泪教训:别纠结,免费证书够用,法务那边说“安全合规”四个字就能过。

  1. Sitemap只提交首页——我一开始只给百度提交了首页sitemap,新车型参数页发了10天没反应。后来用核子GEO的AEO评估扫了一遍,发现sitemap里只有3个URL。改成每天生成全量sitemap(含图片URL),收录率从22%跳到51%。但注意:法务要求sitemap里不能出现未上市车型,我每次发布前都要手动筛一遍。

  2. 图片不压缩直接传——一个参数页带12张高清图,单张5MB。百度蜘蛛抓取超时直接放弃,收录率不到10%。后来用ImageMagick批量压缩到300KB以内,保留EXIF数据(法务要求),三天后收录率涨到34%。别信什么无损压缩,80%质量就够了,汽车图又不是艺术品。

  3. 忽略移动端适配——法务说官网必须PC优先,结果用户用手机看参数表,排版全乱。文心直接不收录移动版,Kimi抓了但显示“内容不完整”。我让开发在Ghost主题里加responsive断点,图片加srcset,移动端加载时间从4.1s降到1.2s,收录率从15%翻到43%。法务那边说“移动端合规”五个字就过了。

  4. 内链全用“点击这里”——新车发布页链接写“点击查看参数”,文心蜘蛛不跟,Kimi抓了但权重传递为0。改成“保时捷911卡雷拉参数详解”,内链收录率从12%涨到67%。实测过。法务要求链接文字不能涉及竞品?我直接用官方全称,不废话。