日新博客

今天查看网站日志的时候，发现大量的Barkrowler抓取记录，我们个人博客不需要这些蜘蛛抓取，基本上只需要百度蜘蛛抓取，所以必须要屏蔽掉。 一般日志中会出现...