robots.txt文件

• 张焕振：怎么正确撰写robots文件

  很多时候，我们的站点内会有大量的相似、重复页面，如果这些页面被搜索引擎收录，被搜索引擎发现一个站点有大量的重复，对于网站的排名会很不利。在这是我们就要用到robots文件，用它来屏…

  老文章 2012年12月6日