| 限定符和类型 | 方法和说明 |
|---|---|
List<Seed> |
CoreSeedsXmlHandler.load()
加载core-seeds.xml配置文件内容到内存中
|
| 限定符和类型 | 字段和说明 |
|---|---|
static Map<String,Seed> |
Globals.SEED_CACHE
种子seed缓存,key : seed name key value : seed
|
| 限定符和类型 | 方法和说明 |
|---|---|
void |
Process.init(Seed seed) |
SpiderEngine |
SpiderEngine.setSeed(Seed seed)
设置种子Seed
|
void |
SpiderEngine.startUp(Seed seed,
WorkerStatusOpt workerStatusOpt,
boolean isProbeMaster)
启动一个种子任务
|
| 限定符和类型 | 方法和说明 |
|---|---|
SpiderEngine |
SpiderEngine.setSeeds(List<Seed> seeds)
设置种子Seed列表
|
| 构造器和说明 |
|---|
Launcher(Seed seed,
WorkerStatusOpt workerStatusOpt,
boolean isProbeMaster) |
| 限定符和类型 | 方法和说明 |
|---|---|
void |
DiskDownloader.init(Seed seed) |
| 限定符和类型 | 方法和说明 |
|---|---|
void |
CascadeFetcher.init(Seed seed) |
void |
SingleFetcher.init(Seed seed)
初始化抓取过滤器
|
void |
ListDetailFetcher.init(Seed seed) |
void |
DynamicFieldFetcher.init(Seed seed) |
static void |
FetchResourceSelector.init(Seed seed)
初始化资源选择器缓存
|
void |
SiteFetcher.init(Seed seed) |
| 限定符和类型 | 方法和说明 |
|---|---|
void |
HttpEngine.init(Seed seed)
初始化Http引擎配置
|
void |
SeleniumEngine.init(Seed seed) |
void |
OkHttpClientEngine.init(Seed seed) |
| 限定符和类型 | 方法和说明 |
|---|---|
void |
AutoDelegateParser.init(Seed seed) |
| 限定符和类型 | 方法和说明 |
|---|---|
void |
PageChangeProber.init(Seed seed) |
| 构造器和说明 |
|---|
PageChangeProber(Seed seed) |
| 限定符和类型 | 方法和说明 |
|---|---|
void |
LuceneIndexStorage.init(Seed seed) |
void |
FreeProxyStorage.init(Seed seed) |
void |
DBStorage.init(Seed seed) |
void |
MongodbStorage.init(Seed seed) |
Copyright © 2018. All rights reserved.