蜘蛛

反爬虫蜘蛛攻略：Apache/Nginx/PHP禁止某些User Agent抓取网站