最近鸟叔在统计后台发现，有大量蜘蛛潜入鸟叔博客进行高频率爬取，通过查看据说是华为搜索引擎爬虫蜘蛛，代号“AspiegelBot”。

从6月21号开始爬取，截止到今天评价每天ip爬取数平均在200ip，已经和百度相差无几，我说最近网站ip为啥急剧增加，原来51啦的统计数据将蜘蛛ip也加上了。 [Read More…]