共享蜘蛛喜欢爬行的链接。目前发现的就是tag
希望各位可以观察一下 百度蜘蛛喜欢爬行什么样的链接。
我前几天蜘蛛很少。在网站里面增加了随机tag 发现蜘蛛增加500多都是爬行tag链接的。。。说明tag非常有效提升蜘蛛。
我的链接样式： tag12345.html tags123.html 早期我做站 也有tags/123.html 好像也有效。。希望大家发现的类似链接分享出来 方便大家提升蜘蛛的热爱。
3A源码 3A源码 3A源码 3A源码
共以下 2 个回答
我觉得原理就因为tag在网站结构金字塔的上层，所以才喜欢
可以试试直接把文章页链接改成tag/xx.html，或者采集大量的内容不展现，只展现聚合页（并且将聚合页列表形式模板改为问答形式模板）给蜘蛛抓，不过我没试过，但一直有这个想法。