类的使用
cn.edu.hfut.dmic.webcollector.model.CrawlDatums

使用CrawlDatums的程序包

程序包	说明
cn.edu.hfut.dmic.webcollector.crawldb
cn.edu.hfut.dmic.webcollector.crawler
cn.edu.hfut.dmic.webcollector.example
cn.edu.hfut.dmic.webcollector.fetcher
cn.edu.hfut.dmic.webcollector.model
cn.edu.hfut.dmic.webcollector.plugin.berkeley
cn.edu.hfut.dmic.webcollector.plugin.ram

cn.edu.hfut.dmic.webcollector.crawldb中CrawlDatums的使用

参数类型为CrawlDatums的cn.edu.hfut.dmic.webcollector.crawldb中的方法

限定符和类型	方法和说明
void	DBManager.inject(CrawlDatums datums)
abstract void	DBManager.inject(CrawlDatums datums, boolean force)
void	SegmentWriter.writeParseSegment(CrawlDatums parseDatums)

cn.edu.hfut.dmic.webcollector.crawler中CrawlDatums的使用

声明为CrawlDatums的cn.edu.hfut.dmic.webcollector.crawler中的字段

限定符和类型	字段和说明
protected CrawlDatums	Crawler.forcedSeeds
protected CrawlDatums	Crawler.seeds

参数类型为CrawlDatums的cn.edu.hfut.dmic.webcollector.crawler中的方法

限定符和类型	方法和说明
void	Crawler.addSeed(CrawlDatums datums) 等同于 addSeed(datums,false)
void	Crawler.addSeed(CrawlDatums datums, boolean force) 添加种子集合
protected void	AutoParseCrawler.afterParse(Page page, CrawlDatums next)
void	AutoParseCrawler.execute(CrawlDatum datum, CrawlDatums next)
protected void	AutoParseCrawler.parseLink(Page page, CrawlDatums next)

cn.edu.hfut.dmic.webcollector.example中CrawlDatums的使用

参数类型为CrawlDatums的cn.edu.hfut.dmic.webcollector.example中的方法

限定符和类型	方法和说明
protected void	DemoDepthCrawler.afterParse(Page page, CrawlDatums next)
void	TutorialCrawler.visit(Page page, CrawlDatums next)
void	DemoTypeCrawler.visit(Page page, CrawlDatums next)
void	DemoPostCrawler.visit(Page page, CrawlDatums next)
void	DemoNextFilter.visit(Page page, CrawlDatums next)
void	DemoMetaCrawler.visit(Page page, CrawlDatums next)
void	DemoHashSetNextFilter.visit(Page page, CrawlDatums next)
void	DemoDepthCrawler.visit(Page page, CrawlDatums next)
void	DemoBingCrawler.visit(Page page, CrawlDatums next)

cn.edu.hfut.dmic.webcollector.fetcher中CrawlDatums的使用

参数类型为CrawlDatums的cn.edu.hfut.dmic.webcollector.fetcher中的方法

限定符和类型	方法和说明
void	Executor.execute(CrawlDatum datum, CrawlDatums next)
void	Visitor.visit(Page page, CrawlDatums next)

cn.edu.hfut.dmic.webcollector.model中CrawlDatums的使用

返回CrawlDatums的cn.edu.hfut.dmic.webcollector.model中的方法

限定符和类型	方法和说明
CrawlDatums	CrawlDatums.add(CrawlDatum datum)
CrawlDatums	CrawlDatums.add(CrawlDatums datums)
CrawlDatums	CrawlDatums.add(Links links)
CrawlDatums	CrawlDatums.add(Links links, String type)
CrawlDatums	CrawlDatums.add(String url)
CrawlDatums	CrawlDatums.add(String url, String type)
CrawlDatums	CrawlDatums.meta(String key, String value)
CrawlDatums	CrawlDatums.putMetaData(String key, String value) 已过时。
CrawlDatums	CrawlDatums.type(String type)

参数类型为CrawlDatums的cn.edu.hfut.dmic.webcollector.model中的方法

限定符和类型	方法和说明
CrawlDatums	CrawlDatums.add(CrawlDatums datums)

参数类型为CrawlDatums的cn.edu.hfut.dmic.webcollector.model中的构造器

构造器和说明
CrawlDatums(CrawlDatums datums)

cn.edu.hfut.dmic.webcollector.plugin.berkeley中CrawlDatums的使用

参数类型为CrawlDatums的cn.edu.hfut.dmic.webcollector.plugin.berkeley中的方法

限定符和类型	方法和说明
void	BerkeleyDBManager.inject(CrawlDatums datums, boolean force)
void	BerkeleyDBManager.writeParseSegment(CrawlDatums parseDatums)

cn.edu.hfut.dmic.webcollector.plugin.ram中CrawlDatums的使用

参数类型为CrawlDatums的cn.edu.hfut.dmic.webcollector.plugin.ram中的方法

限定符和类型	方法和说明
void	RamDBManager.inject(CrawlDatums datums, boolean force)
void	RamDBManager.writeParseSegment(CrawlDatums parseDatums)