本来一个好好的站,PR值突然从3降到1了,莫名其妙~~
后来反思了下,觉得有些道理,年前想着给惠邦肉鸭弄网站,再三考虑决定用WP试试,毕竟Woedpress很强大嘛,主要是插件那块,
可以做到很多想实现的效果。
倒出现在的网站的数据,在转换后倒入WP,放到站上,但是一个细节忽略了!
那个是独立的站,百度等蜘蛛的爬行想来就来了,我没禁止。。。。
可悲的的是,年后想着移植WP主题,网站上还可以建一个虚拟目录,正好闲着域名在备案,丰富的二级域名正好可以用上。
得。。。blog.shnan.net直接绑定到空间
zblog原版数据上传上去,换主题,主题的部分页面已经在本地做好,拿到服务器只是做改进。
杯具啊。。。。
又没有禁止百度蜘蛛爬网站!!!
某日看到一朋友说PR值上升了,咱也去查询下。
PR=1???
**************************以下是如何禁止百度等搜索引擎蜘蛛的爬行***************************
绝度禁止所有搜索的收录,不让蜘蛛去爬你的站!
新建robots.txt 写入以下: User-agent: * Disallow: / 保存编码为ANSI |
要么干脆就去下载百度的人家写好的禁止蜘蛛的文件,如下链接
http://bar.baidu.com/robots/robots.txt
附:
robots.txt语法教程
用几个最常见的情况,直接举例说明:
1. 允许所有SE收录本站:robots.txt为空就可以,什么都不要写。
2. 禁止所有SE收录网站的某些目录:
User-agent: *
Disallow: /目录名1/
Disallow: /目录名2/
Disallow: /目录名3/
3. 禁止某个SE收录本站,例如禁止百度:
User-agent: Baiduspider
Disallow: /
4. 禁止所有SE收录本站:
User-agent: *
Disallow: /
5. 加入sitemap.xml路径,例如:Sitemap: http://www.seotest.cn/sitemap.xml
本文转载自互联网,如有侵权,联系删除
发表评论
我也遇到同样的问题了,哎!
我都不记得我站现在放的ROBOTS.TXT是啥时候放进去的了~但是之前就想考虑到这个问题~我用的第二种写法~
够悲剧
我一般都是用谷歌站长工具生成robots.txt的
汗……你这把谷歌也禁掉了……[REVERT=水墨 于 2011-3-7 13:27:57 回复]那个站就是不想任何一只蜘蛛爬进来![/REVERT]
智者千虑。
PR也浮云。
学习了 来看阿奎那