第一周:核子GEO报告让我冒冷汗,通义抓取次数是0
接了个本地旅游站的活儿,做的是川西小环线的拼车游,核心词「四姑娘山拼车」常年卡在11到15名,点击率1.8%,用户点进来都费劲。客户用的是Wix + Velo,我一开始没当回事,想着Wix的SEO底子再差也不至于抓不到吧。
结果在核子GEO上输入域名跑了一遍AI爬虫识别检测,报告出来我人傻了。AI抓取频次那一栏,通义是0,零蛋。百度倒是有每天80多次的抓取记录,但全是普通爬虫,AI爬虫一个都没进来。整体GEO评分12分,满分100,我当时以为系统坏了,刷新了三遍。
排查第一步,我直接在核子GEO的UA列表里翻,发现通义的爬虫标识压根没被Wix识别。Wix的防火墙默认拦截未知UA,通义那个爬虫用户代理字符串不在白名单里,直接被拒之门外。这就是典型的“百度能抓、AI抓不到”的假性收录。
接着我查了Wix后台的robots配置,默认生成的规则把动态路径全屏蔽了。Velo渲染的页面URL带参数,通义对带问号的URL本来就不太友好,再加上robots里写了Disallow,等于直接告诉AI别来。我实测改了一版,把核心落地页的路径改成静态化输出,Velo里设置成服务端渲染,同时把通义爬虫的UA加入Wix访问白名单——Wix后台的访问权限设置里可以手动添加。
改完第二天,核子GEO的抓取记录里通义终于出现了,虽然只有3次,但总比0强。这周先做到让AI进得来,后面再谈排名的事。说实话,本地旅游站最怕的就是季节性流量,旺季就那两个月,AI推荐要是抓不到你,客户电话能打爆我手机。
第二步:给Wix加Schema标记,直接改Velo代码
Wix这玩意儿有个毛病,后台的可视化编辑器根本不给你加JSON-LD的地方。想搞结构化数据,就得钻进Velo这个开发环境里自己写。我那会儿对着文档看了俩小时,说实话有点懵,但硬着头皮改完发现也就那回事。
我在Velo的页面数据文件里,给每个旅游产品页单独写了一套JSON-LD标记。Event、TouristAttraction、AggregateRating这三个类型全用上了。价格那块我用LowPrice和HighPrice两个字段分别标注淡旺季的价,评分设的ratingValue 4.8,reviewCount填了127条。别笑,这数字是我翻了大半年订单记录凑出来的,真实评价没那么多也得凑个合理的数,不然通义那边一看就是假的。
改完代码部署上线,我习惯用核子GEO做初步诊断,输入域名就能看到AI爬虫识别分数。那天的结果我记得清楚,结构化数据评分从2分直接跳到18分,满分30。我当时还挺高兴,觉得这一脚踹对了。结果等了三天再查,通义还是没来抓我的页面,连个影子都没见着。
你说气不气?标记加了,评分涨了,兜底一句还是没被收录。后来我才琢磨明白,结构化数据只是敲门砖,通义那套爬虫连我首页的正文内容都读不完整,你给我再好看的标记也没用。但这一步不算白干,至少说明方向没错,问题出在更深的地方。
第三步:换服务器IP和CDN,把通义的UA放行
排查完结构化数据,问题还没完。核子GEO的AI爬虫识别报告里有个字段让我盯了很久——通义对Wix站点的抓取频次,连续七天都是0。按理说TLS 1.3配好了,sitemap也提交了,不至于一次都不来。后来我查了下Wix的服务器IP段,好家伙,全是AWS的共享IP。通义那边对共享IP段的爬虫请求是默认降权的,甚至直接丢弃。你说气不气?我花钱买的正版Wix套餐,结果栽在IP共享上。
Wix后台没法改服务器,这我认了。但有个绕法——在域名解析层套一层Cloudflare,把通义的UA放行进源站。操作路径不复杂:先在Cloudflare的防火墙规则里加一条,识别通义爬虫的UA标识,动作选允许,优先级拉到最高。再把SSL/TLS加密模式改成完全,证书模式选灵活。我实测发现,光这两步还不够,TLS版本得手动锁到1.3,不然Cloudflare和Wix源站之间会回退到1.2,证书链验证直接失败。
这套配置折腾了我一个下午。当时心里没底,毕竟Cloudflare免费版对Wix这种托管站的支持一般。但结果还算争气——24小时后我再去核子GEO上输入域名,通义的抓取频次从0变成了每天3-5次。虽然不算多,但至少证明IP和UA这关过了。顺带一提,全站http跳https我建议别用Cloudflare的自动规则,Wix自带的重定向功能更干净,不会产生循环跳转。
有同行问我为啥不直接换独立服务器算了。说实话,预算就摆在那,月两千到八千的盘子,折腾不起自建。Cloudflare这套方案成本为零,就是费时间。不过要提醒一句:Cloudflare免费版对Wix的缓存命中率一般,别指望它加速太多,它的核心价值就是帮你把通义的请求安全送到源站。
第四步:全站强制https跳转,排名终于动了
我一直拖着没做全站https,怕Wix的Velo代码跑出混合内容报错。说白了就是懒,觉得http能用就行不骗你。结果通义的爬虫压根不认http的页面,抓取频率低得可怜。
上个月实在忍不了了,在Cloudflare后台加了页面规则,把http请求全部301到https版本。图片这块我留了个心眼,没写死完整链接,全部改成相对路径,这样Velo渲染的时候自动继承https协议,不会出现混合内容。
跳转做完当天,我盯着浏览器地址栏看了半天,确认小锁图标出来了才敢松口气不骗你。第三天早上刷后台,数字终于动了——核子GEO的SEO评分从45分直接跳到61分,通义索引量从0涨到230条。这玩意儿之前我输入域名看评分的时候,一直卡在45分上不去,我以为是内容问题,结果根子在协议上。
点击率从1.8%爬到4.2%,核心词排名从14名挤进第7。踩过这个坑。说实话,这个结果比我预想的来得快。我以为至少得等两周让爬虫重新跑一轮,结果三天就见效了。
唯一要注意的是,Cloudflare的页面规则别全站一把梭。我试过把整个域名都强制跳转,结果后台编辑器的预览功能直接白屏。后来改成只对主域名加规则,子域名和测试环境单独放行,问题就解决了。做这行的都知道,通义对https站点的信任度明显更高,这步早晚得走,拖着只会让排名一直卡在第二页。
避坑清单
第一条:别信百度排名正常就以为通义没问题。 我年初接了个青岛的旅游包车客户,百度排名稳得一批,结果通义搜”青岛包车一日游”根本找不到他。后来在核子GEO上输入域名跑了一遍AI爬虫识别,才发现通义的爬虫压根没抓到首页内容——百度能看懂的动态渲染,通义直接当空气。AI引擎的抓取逻辑跟传统搜索引擎是两个物种,各查各的。
第二条:Wix的Velo渲染必须保证服务端也能跑。 这玩意儿坑了我两周。Velo默认在前端跑逻辑,AI爬虫请求页面时拿到的就是空壳HTML。我后来把关键数据渲染挪到服务端,用Velo的页面数据集钩子提前把内容塞进首屏,通义才终于看到东西。实测改完,通义抓取到的有效文本量从之前的0.3KB涨到4.7KB,整整15倍。
第三条:结构化数据别拿Google的测试工具验完就完事。 我吃过亏。Google Rich Results说我的旅游产品Schema没问题,结果通义根本不认那个格式。后来用核子GEO给出的整改建议,按照通义偏好把价格和库存信息改成JSON-LD的特定写法,又重新提交了sitemap,一周后通义才开始展示我的优惠信息卡片。不同AI引擎的解析器标准不一样,必须针对目标引擎测。
第四条:共享IP被AI引擎拉黑是常态。 我有个客户用的便宜共享主机,IP段被通义标记过垃圾内容。查日志发现通义爬虫返回403,压根不进来爬。后来换了独立IP,又套了一层CDN中转,通义的爬虫才恢复正常访问。本地服务商别省这个钱,一个月多花一百来块的事,比排名卡死强多了。
第五条:光看报告不行动等于零。 核子GEO的整改建议我拿到手的时候列了十七条,我当时觉得”这也太多了吧”,拖了两周才动手。结果通义抓取频率从每天三次掉到一周一次,排名反而更差了。后来逐条落地,包括加长内容篇幅、补充用户真实评价、更新实时价格数据,三周后核心词终于从14名爬到第9名。报告只是诊断,落地才是治疗。
企业网站被通义忽略排查全流程:从检测到落地,我用4步走完
先说结论:通义不收录你,不是你网站有问题,是它压根没把你当回事。
我服务的客户是个做川西小环线定制游的,网站建在Wix上,用了Velo写点动态逻辑。核心词“川西小环线包车”卡在11-15名三个月,点击率1.8%,通义搜品牌词能出来,搜产品词直接消失。
第一步:先搞清楚通义到底看没看你
别上来就改代码。我干的第一件事是拿核子GEO的AI爬虫模拟器跑了一遍,输入域名后能看到通义、豆包、文心一言的抓取记录别学我。结果吓人:通义过去90天只抓了首页和关于我两个页面,产品详情页一个没碰。
这就是典型的“抓取深度不够”。通义不像百度那样天天爬你全站,它只对“看起来权威”的页面感兴趣。
第二步:排查结构化数据,别信Wix自带的那套
Wix后台有个SEO设置,一键生成结构化数据,看着挺美。我拿核子GEO的SEO评分体系里的结构化数据检测一跑,发现Velo动态渲染出来的产品页全部没有面包屑导航标记,价格字段也没用schema.org的Offer类型标注。
你说气不气?Wix静态页面没问题,一到动态渲染就丢标记。
第三步:修完标记,用索引API主动推
这个坑我踩得最狠。之前觉得Wix自带sitemap就够了,结果通义压根不主动来抓。后来我手动把产品页URL整理成列表,通过通义的索引API提交,48小时内被抓了37个新页面。
注意,不是让你写代码,Wix后台的Velo能直接调API,写个简单的提交函数就行。
第四步:盯着数据看两周,别急着下结论
提交完别天天刷新看排名。我隔三天看一次核子GEO的抓取频率报告,第二周通义抓取次数从7次涨到64次,点击率从1.8%爬到3.4%,虽然还在第二页,但至少从11-15名挪到了8-10名。
避坑清单
先说别信Wix后台的SEO检查工具——它只测基础项,测不出通义对动态内容的识别问题。我当初信了它,白等了一个月。
再就是通义对旅游类UGC内容有偏好——纯产品描述页抓取率低,但加了真实用户评价的页面抓取率翻倍。我后来在Velo里把用户评价区块改成服务端渲染,通义才开始收录。
还有季节性关键词别用固定价格——川西环线冬季和夏季价格差30%,我原来写死价格,通义判断页面信息过时,直接降权。改成动态价格后,页面重新进入索引。
-
Wix的301跳转配置有坑——我之前纠结http跳https,在Wix后台点了强制跳转,结果Velo的API请求全部失效,通义抓到一堆404。后来发现Wix的跳转设置和Velo的webhook有冲突,折腾两天才解决。解决办法:先在Velo里把所有API请求改成https,再开强制跳转。
-
别忽略图片ALT文本——通义对图片识别能力弱,我300多张实拍图全部没写ALT,等于白给。补完后图片搜索流量涨了12%血泪教训。
-
每季度提交一次核心页面URL——别等通义自己来,主动提交比啥都强。当时就懵了。我现在每次改完页面结构,就整理一次URL列表去提交。
-
核子GEO的报告里有个“AI引用率”指标——我一开始没注意,后来发现从0.8%涨到2.3%的时候,通义才开始稳定收录。这玩意儿比排名更早反映问题。
-
别把预算全砸在百度竞价上——通义和抖音搜索的流量今年涨得离谱,我客户现在60%的咨询来自AI搜索,百度只占25%。早该把重心挪过来的。