域名转让--18824536076

 　　对于百度搜索引擎来说，蜘蛛黑洞特指网站通过极低的成本制造出大量参数过多，及内容雷同但具体参数不同的动态URL ，就像一个无限循环的“黑洞”将spider困住，Baiduspider浪费了大量资源抓取的却是无效网页。　　比如很多网站都有筛选功能，通过筛选功能产生的网页经常会被搜索引擎大量抓取，而这其中很大一部分检索价值不高，如“500-1000之

More...

 　　谷歌站长平台新升级robots.txt测试工具，这对于SEOer来说是一个好消息，对于网站优化又有了新的好工具。该工具在抓取栏目下级菜单，robots.txt测试工具会直观的展现网站的robots.txt，并会高亮显示导致谷歌无法抓取网页的一些错误，如果某个网页不被抓取，也可以用这个工具测试一下，如果robots.txt文件中有阻止抓取这个网页的设置，在这里也会被高亮显示出来，而且

More...

robots.txt文件是搜索引擎中访问网站的时候要查看的第一个文件。robots.txt文件告诉蜘蛛程序在服务器上什么文件是可以被查看的。本文将为你介绍最常用的四种robots.txt文件格式。1. 允许所有的搜索引擎访问网站的任何部分User-agent: *Disallow: (或者也可以建一个空文件 "/robots.txt") 2. 禁止所有搜索引擎访问网站的任何部分

More...