运行爬虫
Crawlab有两种运行爬虫的方式:
- 手动触发
- 定时任务触发
手动触发
- 在
爬虫列表
中操作
列点击运行
按钮,或者 - 在
爬虫详情
中概览
标签下点击运行
按钮,或者
然后,Crawlab会提示任务已经派发到队列中去了,然后你可以在爬虫详情
左侧看到新创建的任务。点击创建时间
可以导航至任务详情
。
定时任务触发
定时任务触发
是比较常用的功能,对于增量抓取
或对实时性有要求的任务很重要。这在定时任务中会详细介绍。
Crawlab有两种运行爬虫的方式:
爬虫列表
中操作
列点击运行
按钮,或者爬虫详情
中概览
标签下点击运行
按钮,或者然后,Crawlab会提示任务已经派发到队列中去了,然后你可以在爬虫详情
左侧看到新创建的任务。点击创建时间
可以导航至任务详情
。
定时任务触发
是比较常用的功能,对于增量抓取
或对实时性有要求的任务很重要。这在定时任务中会详细介绍。