每个做SEO的站长们都应该基本分析网站日志的能力。因为通过网站的日志可以分析出搜索引擎蜘蛛的动态，用户访问的动态，以及发现网站哪些链接存在异常。网站日志的分析和诊断就像给网站看病一样，我们通过网站日志的分析，可以更加清楚的知道网站的健康状况，可以利于这些数据让我们更好的做网站SEO优化。下面就和大家说下日志分析的一些事项：常见的蜘蛛名称：Baiduspider;Baiduspider-Image;Googlebot;Googlebot-Image;360Spider;sogouspider。一...

更新时间：2023-04-11 11:30:52

网站做的越大，蜘蛛越多。可是有时候会发现：网站被各种搜索引擎的蜘蛛抓的服务器都快崩溃了，严重的占用了服务器的资源。这个时候要怎么办呢？百度蜘蛛：Baiduspider谷歌蜘蛛：Googlebot360蜘蛛：360SpiderSOSO蜘蛛：Sosospider神马蜘蛛：YisouSpider微软必应：BingBot在国内，我们不要把这几个蜘蛛使用robots.txt屏蔽就可以了，至于其他的，都可以把它们干掉，基本不会为网站带来任何的实际流量！来源：A5营销...

更新时间：2023-04-10 17:05:20

360Spider的ip，我们已经公开在这里辣~：http://www.so.com/help/spider_ip.html360Spider的UA（UA是蜘蛛访问的时候，在服务器中留下的访问签名信息，凡是下面这个UA，就代表是360Spider来过了）：Mozilla/5.0(WindowsNT6.1;WOW64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/50.0.2661.102Safari/537.36;360Spider36...

更新时间：2023-04-10 16:50:26