齐鲁SEO——山东seo分享交流平台

当前位置: > 推广技巧 >

rotots.txt文件的定义和用途

时间:2013-05-26 23:53标签:rotots.txt 作者:网络 点击:
【导读】:rotots.txt文件,是每一个搜索引擎蜘蛛到你的网站之后要寻找和访问的第一个文件,rotots.txt是你对搜索引擎制定的一个如何索引你的网站的规则。通过该文件,搜索引擎就可以知道在你的网站中哪些文件是可以被索引的,哪些文件是被拒绝索引的。我们就可以很方......

 

  文件,是每一个搜索引擎蜘蛛到你的网站之后要寻找和访问的第一个文件,rotots.txt是你对搜索引擎制定的一个如何索引你的网站的规则。通过该文件,搜索引擎就可以知道在你的网站中哪些文件是可以被索引的,哪些文件是被拒绝索引的。我们就可以很方便地控制搜索引擎索引网站内容了。
  在很多网站中,站长们都忽略了使用rotots.txt文件。因为很多站长都认为,自己的网站没有什么秘密可言,而且自己也太会使用robots.txt的语法,因此一旦写错了会带来更多的麻烦,还不如不用。
  其实这样的做法是不对。如果蜘蛛在某个网站上访问了一个不存在的URL,那么就会记录下一条404错误,而rotots.txt作为蜘蛛访问网站的第一个文件,一旦搜索引擎找不到这个文件,也会在它的索引服务器上记录下一条404信息。如果这样的404信息过多,那么搜索引擎蜘蛛就会认为网站价值较低,从而降低对该网站的“印象分”,这就是我们经常会听到的“降低权重”。建立rotots.txt文件还是必需的,哪怕这个rotots.txt文件是一个空白的文本文档都可以。上传一个空白的rotots.txt文件,至少不会导致一条404信息的产生。
 
文章由"SEO教程网"整理提供,转载请注明出处!
------分隔线----------------------------
精彩推荐
  • 新手必须知道的seo知识

    导航 请确保你的网站导航都是以html的形式链接。所有页面之间应该有广泛的互联,如果...

    标签:SEO
  • 搜索引擎原理:页面与页面之间

    想做好最终的排名,需要先处理好页面与页面的竞争,无论是站外、还是站内,都是这样我...

    标签:原理,搜索引擎
  • 谈谈企业网站推广操作SEO的重

    很多行业发展至今,已经处在一个高度竞争的阶段了,现几年,逐步演变成网络电子商务领...

    标签:推广,网站,优化
  • 关键词密度的标准

    熟悉或者经常逛SEO论坛的同学肯定接触到关键词密度这个概念。关于关键词密度这个东西...

    标签:关键词,密度
  • 利用热门事件推广网站

    每天的热门事件层出不穷,因为互联网的方便,给了更多的人更快速的了解世界,了解人们...

    标签:网站,优化,推广
可能喜欢