星时空平台,江山如此多枭地图,商标免费查询
方法:
process_request(self,request,spider):
返回为none:继续请求
返回为request对象,把request对象交给调度器,进行后续请求
返回为response对象,不再请求,response交给引擎然后给爬虫
process_response(self,request,response,spider):
返回为request对象,交给调度器继续请求
返回为response对象,交给下一个process_response处理
process_exception(request,exception,spider):
返回为none,调用其他process_exception方法继续处理,直到所有中间件调用完毕,调用默认的异常处理
返回为response对象,异常纠正,交给下一个process_response处理
返回为request对象,交给调度器继续请求
方法:
process_spider_input(self,response,spider):
返回none,交给下一个process_spider_input处理
process_spider_output(self,response,result,spider):
该方法必须返回包含requset或item对象的可迭代对象iterable
process_spider_exception(response,exception,spider):
返回为none,交给其他process_spider_exception继续处理
返回一个包含responser或item对象的可迭代对象(iterable),交给其process_spider_output方法
process_start_request(start_request,spider):
接受一个可迭代对象(start_request参数)且必须返回一个包含request对象的可迭代对象
如对本文有疑问,请在下面进行留言讨论,广大热心网友会与你互动!! 点击进行留言回复
python求numpy中array按列非零元素的平均值案例
网友评论