海南中立科技 旗下网站:海南精英网|海微商|天涯数码
网站首页home 网站建设web Const 系统开发System Dev 微信开发wx Dev 网站推广Website SEO 网站超市Website SM 客户案例Client case 网站模板Web template 关于我们About us
网站推广优化
网站营销方案 网站优化服务 关键词优化 网站优化案例 网站维护推广 优化整合服务 SEO网站优化 百度搜索优化 谷歌搜索优化
联系我们
QQ服务群:28519571 工作时间:86-0898-31568080 传真号码:86-0898-31568085 24小时服务:0138-07590485
 您现在的位置: 首页 >> 网站推广优化 >> 网站维护推广 推广经验杂谈
百度蜘蛛最懒,谷歌收录最快
中立科技 | 2011-09-20 05:52:37 | 阅读:2516

我给新建的一个垃圾站安放了监测搜索引擎蜘蛛爬行记录的代码,通过2天的监测发现百度蜘蛛最懒,谷歌收录最快。
  
  大家可以查阅这里监测搜索引擎蜘蛛爬行记录的数据:http://www.cnwebshow.com/robotslogs.txt。自从07月29日监测开始,谷歌蜘蛛、雅虎蜘蛛、MSN蜘蛛、百度蜘蛛都有爬行的记录,(事先我已向各大主要搜索引擎提交了这个网站的),但是百度蜘蛛自从07月29日爬行后,就再也没有来过,而其它几大搜索引擎的蜘蛛都来过许多次。由此可见百度蜘蛛最懒了。
  
  另外,我分别在几大搜索引擎中通过site:www.cnwebshow.com的方法查询网站的收录情况,谷歌已经收录了9个页面,百度只收录了首页,其它几个搜索引擎收录的页面数不等。据此可见谷歌收录最快,百度收录速度最慢。
  
  看来,与国外著名的搜索引擎相比,百度在运行效率方面确实有一定差距。但新建站的朋友也不必着急,了解这个规律以后,专心充实网站内容,各大搜索引擎迟早会来光顾的。
  
  最后,我将监测搜索引擎蜘蛛爬行记录的代码,与大家分享一下,请看http://www.cnwebshow.com/uploads/sebot.txt。
  
  这个文件的代码挺简单:各大搜索引擎的蜘蛛爬行程序都有自己的标识符,例如谷歌的是googlebot,百度的是baiduspider,它们可以通过查询_SERVER变量中的HTTP_USER_AGENT参数来获取,再结合HTTP_REFERER记录下URL的来源,最后用nowtime()函数取得当前的系统时间,就形成了一条简单的擎蜘蛛爬行记录。
  
  看不明白的朋友可以跳过,其实代码不是我写的,许多年前网上就有人共享出来了,我们重点学会如何使用就可以了。
  
  请大家把我上面贴出来的sebot.txt文件另存为sebot.php,当然你可以任意给它取个名字,例如123.php或者aaa.php都行,只要保证扩展名是php,让它能够正常执行即可;然后上传到你的网站程序的模板目录中(例如Wordpress的是/wp-content/themes/ThemesName目录);最后在你的模板文件中调用它,例如在Wordpress博客中,你可以在footer.php文件中添加代码。
  
  接下来就是等待搜索引擎蜘蛛到你的网站来爬行了,爬行的结果记录在网站根目录的robotslogs.txt中,你直接打开http://www.CNWEBSHOW.com/robotslogs.txt就能看到了。当然你也可以修改robots.php文件的第50行,把robotslogs.txt换成任意你想要的名字。
  
  通过一段时间的监测,你就可以发现搜索引擎蜘蛛在你的网站上爬行的频率了,一般来说,蜘蛛爬行得越勤快越好,我有个垃圾站,谷歌的蜘蛛一天会来爬行几十次。另外,如果你的robotslogs.txt记录的内容太多了的话,你可以清空它重新开始记录。

海南网络公司|海口网站建设|海南网站优化|海南网站设计|海南网络推广|海南网页设计|南通网站建设|海南网站建设|海南企业微信|海南微信营销|海南微信电商|海南微信建站|海南精英网|天涯数码|海南中立科技|海南网站建设|海南网站制作|海口网站建设|三亚网站建设|儋州网站建设|五指山网站建设|文昌网站建设|琼海网站建设|万宁网站建设|东方网站建设|定安网站建设|屯昌网站建设|澄迈网站建设|临高网站建设|白沙网站建设|昌江网站建设|乐东网站建设|陵水网站建设|保亭网站建设|琼中网站建设
合作伙伴 企业发展 企业文化 联系我们 在线订购 网站地图 返回首页
海南中立科技有限公司2018版权所有 24小时服务热线:13807590485   欢迎来电咨询
地址:海南省.海口市.海甸二东路环惠大厦6楼(南宝路明都大厦107#) 公司电话:0898-31568080 31568060 QQ:85398489
全国合作联盟分布:海南海口 四川成都 湖北武汉 湖南长沙 安徽合肥 广东深圳 山西太原 西藏拉萨
技术服务: E_mail:zlkj_2008@126.com 服务订购:E_mail:server@web0898.net 在线客服邀请 备案/经营许可号:琼ICP备10201086号-9
推广关键字:海南网站建设,海南网站制作,海南网站开发,海南微信开发,海南微信公众号开发,海南微信公众号代运营,海南模板网站制作,海南网页设计,海南网络公司

在线客服 业务咨询 备案咨询
扫描直接联系