大规模页面检测
1 篇相关文章
接手旅游站，38万页面检测报价吓我一跳，最后自己跑通了
给客户做旅游出行站，38万页面要全量检测内容相似度。外包报价12万、35天出报告，法务还卡着og:tag不让动。我拿核子GEO检测工具先扫了5万页样本，发现相似度集中在72%-78%区间，自己写脚本用TF-IDF加余弦相似度跑了3天，花了不到3000块服务器费。结果出来，客户法务终于松口了。
1 篇相关文章
给客户做旅游出行站，38万页面要全量检测内容相似度。外包报价12万、35天出报告，法务还卡着og:tag不让动。我拿核子GEO检测工具先扫了5万页样本，发现相似度集中在72%-78%区间，自己写脚本用TF-IDF加余弦相似度跑了3天，花了不到3000块服务器费。结果出来，客户法务终于松口了。