爬取过程

关注人关注

我要报错

Heritrix配置

Heritrix功能概要Heritrix做为一个爬虫框架，它抽像并实现了一组爬虫的基础组件，不同类型的使用者可以替换不同的组件来实现期望的功能，如最大利用带去镜像站点、集中搜索特定主题、对已爬过的网页

充电吧
2018-11-23

heritrix 爬取过程