首页 » 瞎搞 » 正文

禁止百度蜘蛛收录网站

admin 14年前 (2011-02-25) 瞎搞 2602 views 7

扫一扫用手机浏览

本来一个好好的站,PR值突然从3降到1了,莫名其妙~~

后来反思了下,觉得有些道理,年前想着给惠邦肉鸭弄网站,再三考虑决定用WP试试,毕竟Woedpress很强大嘛,主要是插件那块,

可以做到很多想实现的效果。

倒出现在的网站的数据,在转换后倒入WP,放到站上,但是一个细节忽略了!

那个是独立的站,百度等蜘蛛的爬行想来就来了,我没禁止。。。。

可悲的的是,年后想着移植WP主题,网站上还可以建一个虚拟目录,正好闲着域名在备案,丰富的二级域名正好可以用上。

得。。。blog.shnan.net直接绑定到空间

zblog原版数据上传上去,换主题,主题的部分页面已经在本地做好,拿到服务器只是做改进。

杯具啊。。。。

又没有禁止百度蜘蛛爬网站!!!

某日看到一朋友说PR值上升了,咱也去查询下。

PR=1???

哥被谷歌和谐了

**************************以下是如何禁止百度等搜索引擎蜘蛛的爬行***************************

绝度禁止所有搜索的收录,不让蜘蛛去爬你的站!

新建robots.txt

写入以下:

User-agent: * Disallow: / 

保存编码为ANSI

要么干脆就去下载百度的人家写好的禁止蜘蛛的文件,如下链接

http://bar.baidu.com/robots/robots.txt 

 

这个是我的站上的。放晚了!

附:

robots.txt语法教程
  用几个最常见的情况,直接举例说明:
  1. 允许所有SE收录本站:robots.txt为空就可以,什么都不要写。
  2. 禁止所有SE收录网站的某些目录:
  User-agent: *
  Disallow: /目录名1/
  Disallow: /目录名2/
  Disallow: /目录名3/
  3. 禁止某个SE收录本站,例如禁止百度:
  User-agent: Baiduspider
  Disallow: /
  4. 禁止所有SE收录本站:
  User-agent: *
  Disallow: /
  5. 加入sitemap.xml路径,例如:Sitemap: http://www.seotest.cn/sitemap.xml
 

及:百度搜索帮助中心-禁止搜索引擎收录的方法

本文转载自互联网,如有侵权,联系删除

发表评论