Blog Archives

Tag: 防采集

识别User Agent屏蔽一些Web爬虫防采集

自从做网站以来,大量自动抓取我们内容的爬虫一直是个问题,防范采集是个长期任务,这篇是我5年前的博客文章:《Ap […]