首页 > 系统管理 > 更新awstats的robots

更新awstats的robots

2009年1月26日

有了google analytics之后,awstats的作用相对降低了,不过在统计search engine的抓取时还是非常有效的。这个方面主要可以参考车东的博客中搜索引擎配置更新,不过今天我也发现了一个问题,网易的搜索是YodaoBot,而实际我们在日志里看到的只有YoudaoBot和YodaoBot-Image,貌似现在youdao主要的更新都在这里了,于是修改robots.pm如下:

856 'yodaobot',
857 'youdaobot',

1506 'yodaobot','<a href="http://www.yodao.com/help/webmaster/spider/" title="YodaoBot">OutfoxBot/YodaoBot</a>',
1507 'yuodaobot','<a href="http://www.yodao.com/help/webmaster/spider/" title="YuodaoBot">OutfoxBot/YuodaoBot</a>',

VN:F [1.9.22_1171]
Rating: 0.0/10 (0 votes cast)
VN:F [1.9.22_1171]
Rating: 0 (from 0 votes)

系统管理 ,

  1. 本文目前尚无任何评论.
  1. 本文目前尚无任何 trackbacks 和 pingbacks.

This blog is kept spam free by WP-SpamFree.