lovejk8 发表于 2011-5-7 13:05:28

lnmp的蜘蛛问题

一键安装LNMP
用的伪原创，做了301，网站运转正常，不带WWW有可以正常跳，规则：

server
{
server_name 120j9.com;

rewrite ^(.*) http://www.120j9.com$1 permanent;

}

分析日志：
……
"GET /ask/38226.html HTTP/1.1" 301 185 "-" "Baiduspider+(+http://www.baidu.com/search/spider.htm)"
123.125.71.53 - - "GET /ask/38224.html HTTP/1.1" 301 185 "-" "Baiduspider+(+http://www.baidu.com/search/spider.htm)"
123.125.71.58 - - "GET /ask/38231.html HTTP/1.1" 301 185 "-" "Baiduspider+(+http://www.baidu.com/search/spider.htm)"
123.125.71.47 - - "GET /ask/38236.html HTTP/1.1" 301 185 "-" "Baiduspider+(+http://www.baidu.com/search/spider.htm)"
123.125.71.46 - - "GET /ask/38228.html HTTP/1.1" 301 185 "-" "Baiduspider+(+http://www.baidu.com/search/spider.htm)"
123.125.71.55 - - "GET /ask/38243.html HTTP/1.1" 301 185 "-" "Baiduspider+(+http://www.baidu.com/search/spider.htm)"
123.125.71.56 - -
……
全都是这样的，   301 185
怎么蜘蛛全是从不带WWW的进入呢？大量这个的会不会有影响？怎么见不到一个200呢？

lovejk8 发表于 2011-5-9 09:20:00

老大进来说下，每天百度蜘蛛1500+
全是301 185，一个200都没有，会惩罚吗？哪儿出问题了啊？

hualove 发表于 2011-5-10 16:09:19

没事的，过段时间蜘蛛就会跑去 带WWW的

lovejk8 发表于 2011-5-12 17:49:13

回复 3# 的帖子

好的，不过有20多天了，还没回来呢
页: [1]
查看完整版本: lnmp的蜘蛛问题