标签：robots

admin 18年前（2009-02-10） 0浏览

发表者：发表者： 马超， 石仁赫 转载自谷歌中文网站管理员博客 这可是GOOGLE的，相信你通过学习其中的知识能对你网站的排名及收录有很大的帮助。 robots.txt 文件对抓取网络的搜索引擎漫游器（称为漫游器）进行限制。这些漫游器是自动的，在它们...