网站首页 网站运营 正文
广告位 后台主题配置管理 |
有没有想过,如果我们某个站点不让百度和google收录,那怎么办?搜索引擎已经和我们达成一个约定,如果我们按约定那样做了,它们就不要收录。这个写约定的的文件命名为:robots.txt。robots.txt是一个最简单的.txt文件,用以告诉搜索引擎哪些网页可以收录,哪些不允许收录。关于robots.txt一般站长需要注意以下几点:如果你的站点对所有搜索引擎公开,则不用做这个文件或者robots.txt为空就行。必须命名为:robots.txt,都是小写,robot后面加"s"。robots.txt必须放置在一个站点的根目录下。如:通过http://www.itzhp.com/robots.txt 可以成功访问到,则说明本站的放置正确。一般情况下,robots.txt里只写着两个函数:User-agent和 Disallow。观察这个页面并修改为自己的:http://www.itzhp.com/robots.txt有几个禁止,就得有几个Disallow函数,并分行描述。至少要有一个Disallow函数,如果都允许收录,则写: Disallow: ,如果都不允许收录,则写:Disallow: / (注:只是差一个斜杆)。补充说明:User-agent: * 星号说明允许所有搜索引擎收录Disallow: /ibm/ 说明 http://www.itzhp.com/ibm/这个页面禁止搜索引擎抓取。Disallow: /nb/ 说明类似这样的页面http://www.itzhp.com/nb/ 禁止搜索引擎抓取。
请在这里放置你的在线分享代码- 上一篇: 为什么PR值在浏览器插件显示为0?
- 下一篇: robots.txt文件对网站是必要的么?
广告位 后台主题配置管理 |
猜你喜欢
- 2014-08-07 探讨360搜索引擎的独特优化方法
- 2014-05-21 做文章页面质量 需关注搜索引擎相关算法
- 2014-05-05 新站如何快速通过搜索引擎考核期?
- 2014-04-29 网站被搜索引擎K的原因总结
- 2014-04-15 主流搜索引擎小功能的优化指南
- 2014-04-08 百度新算法即将“颠覆性改变”?
- 2014-03-29 百度信誉评级与未来网络优化
- 2014-03-28 网站是否受用户以及搜索引擎青睐的技巧
- 2014-03-04 带你读懂百度《百度搜索引擎优化指南》
- 2014-02-24 百度搜索结果页链接地址即将升级
你 发表评论:
欢迎- 2022-10-30收藏多年整理的各类资源网站全都分享出来
- 2022-10-29收集最全的各大银行信用卡限额交易设置方法
- 2022-10-29从root的Vivo手机中删除Bloatware
- 2022-10-28Vivo Mediatek机型LK(ABOOT)文件Android Verify Boot校验的困惑和一点研究
- 2022-10-20小米/红米手机彻底关闭系统更新提醒方案,免ROOT免ADB!
- 2022-10-12彻底删除小米手机MIUI系统级广告
- 2022-09-26nps内网映射专用客户端和服务端自动安装文件
- 2022-09-2614个比较经典的开发信模板
- 13613℃通达2015oa超级密码修改与清空方法
- 10269℃如何注册一个适合谷歌seo的域名
- 9626℃第三届中国衡商联盟(深圳)高峰论坛会邀请函
- 7454℃建站3天 日ip 300
- 7360℃衡商联盟写给天下自媒体的一封信:2016年,你很有可能会坐立难安!
- 7049℃谁敢横刀立马,唯我衡商兄弟连!-衡商精英群招募
- 6882℃1111半价免单(10日19点整理)
- 6879℃写给天下工厂的一封信:大象都倒下了,小心你也被干掉!
- 4288℃b2b网站营销要注意的细节问题
本文暂时没有评论,来添加一个吧(●'◡'●)