近期始终有兄弟问关于百度蜘蛛的技巧、下面整理了百度平常的蜘蛛分享给大众、期盼能够帮忙大众!
1、123开头IP段蜘蛛
123.125.66.* 表率百度蜘蛛预备抓取。
123.125.68.* 每日这个IP段蜘蛛来的最多,其余IP段较少的话示意网站被降权或进入沙盒。
123.125.71.* 低权重蜘蛛,抓取内页收录的,然则权重较低,文案内页不会火速被放出来。
123.181.108.77 低权重蜘蛛,抓取内页收录的,然则权重较低,文案内页不会火速被放出来。
121.14.89.* 此蜘蛛为考察蜘蛛,此IP段蜘蛛来光临基本上是网站没排名!(以上笔者从未见到过)
2、网站反常Ip段:
203.208.60.*:此ip段为反常蜘蛛,一般因为网站服务器问题或其他违规行径会导致它来爬取
210.72.225.*,此ip段为平常巡逻蜘蛛,只要网站无问题,无违规操作就行。(以上笔者从未见到过)
3、220和116开头IP段蜘蛛
220.181.68.*:每日这个IP段只增不减特别有大概进沙盒或K站。
220.181.7.*:表率百度蜘蛛IP拜访,预备抓取你工具。
220.181.108.*,此ip段为权重蜘蛛,倘若此蜘蛛频繁光临,那样网站收录会有加强。倘若频繁光临网站却不收录,那样要重视是不是网站质量不高,内容是不是很差。
220.181.108.95:这个是百度抓取首页的公用IP,如是220.181.108段的话,网站会每日隔夜快照。
220.181.108.92:同上98%抓取首页,大概还会抓取其他(不指的是内页)220.181段属于权重IP段此段爬过的文案或首页基本24小时放出来。
220.181.108.91:属于综合的,要紧抓取首页和内页或其他,属于权重IP段,爬过的文案或首页基本24小时放出来。
220.181.108.75:重点抓取更新文案的内页到达90%,8%抓取首页,2%其他。权重IP段,爬过的文案或首页基本24小时放出来。
116.179开头的百度蜘蛛、与220开头的蜘蛛功能类似、目测属于权重蜘蛛。
4、其余百度蜘蛛
159.226.50.*
180.76.5.*
220.181.158.107
百度照片蜘蛛
123.15.**.**
百度渲染蜘蛛
111. *(如下图)
百度竞价蜘蛛
61.135.165.134
117.34.74.66
118.122.188.194
119.63.196.9
125.39.78.185
|