com.yishuifengxiao.common.crawler.listener

Interface CrawlerListener

All Known Implementing Classes:

SimpleCrawlerListener

public interface CrawlerListener

风铃虫处理事件监听器
监听风铃虫处理过程中的各种消息时间
注意此监听器是同步的，请勿在此进行任务可能会导致风铃虫阻塞的操作

Version:

1.0.0

Author:

yishui

Method Summary

Modifier and Type	Method and Description
void	exitOnBlock(Task task) 任务因为被目标服务器封杀而退出
void	exitOnFinish(Task task) 任务因为已经完成而退出
void	onDownError(Task task, Page page, Exception e) 下载页面失败的消息
void	onDownSuccess(Task task, Page page) 下载页面成功的消息
void	onExtractError(Task task, Page page, Exception e) 解析页面失败的消息
void	onExtractSuccess(Task task, Page page) 解析页面成功的消息
void	onNullRquest(Task task) 获取的调度命令的请求的url为空时触发

Method Detail

onNullRquest

void onNullRquest(Task task)

获取的调度命令的请求的url为空时触发

Parameters:

task - 当前任务信息

onDownError

void onDownError(Task task,
                 Page page,
                 Exception e)

下载页面失败的消息

Parameters:

task - 当前任务信息

page - 原始的页面信息

e - 失败的原因

onDownSuccess

void onDownSuccess(Task task,
                   Page page)

下载页面成功的消息

Parameters:

task - 当前任务信息

page - 原始的页面信息

onExtractError

void onExtractError(Task task,
                    Page page,
                    Exception e)

解析页面失败的消息

Parameters:

task - 当前任务信息

page - 原始的页面信息

e - 失败的原因

onExtractSuccess

void onExtractSuccess(Task task,
                      Page page)

解析页面成功的消息

Parameters:

task - 当前任务信息

page - 原始的页面信息

exitOnBlock

void exitOnBlock(Task task)

任务因为被目标服务器封杀而退出

Parameters:

task - 当前任务信息

exitOnFinish

void exitOnFinish(Task task)

任务因为已经完成而退出

Parameters:

task - 当前任务信息