接口 us.codecraft.webmagic.scheduler.component.DuplicateRemover
的使用

使用DuplicateRemover的程序包

程序包	说明
us.codecraft.webmagic.scheduler	Scheduler is the part of url management.
us.codecraft.webmagic.scheduler.component	Component of scheduler.

us.codecraft.webmagic.scheduler中DuplicateRemover的使用

返回DuplicateRemover的us.codecraft.webmagic.scheduler中的方法

限定符和类型	方法和说明
DuplicateRemover	DuplicateRemovedScheduler.getDuplicateRemover()

参数类型为DuplicateRemover的us.codecraft.webmagic.scheduler中的方法

限定符和类型	方法和说明
DuplicateRemovedScheduler	DuplicateRemovedScheduler.setDuplicateRemover(DuplicateRemover duplicatedRemover)

us.codecraft.webmagic.scheduler.component中DuplicateRemover的使用

实现DuplicateRemover的us.codecraft.webmagic.scheduler.component中的类

限定符和类型	类和说明
class	BloomFilterDuplicateRemover BloomFilterDuplicateRemover for huge number of urls.
class	HashSetDuplicateRemover