middlewares.py 文件源码

python
阅读 22 收藏 0 点赞 0 评论 0

项目:FirstSpider 作者: yipwinghong 项目源码 文件源码
def process_request(self, request, spider):
        if spider.name == 'jobbole':
            spider.browser.get(request.url)
            time.sleep(3)
            print("??: {0}".format(request.url))
            return HtmlResponse(
                url=spider.browser.current_url,
                body=spider.browser.page_source,
                encoding="utf-8",
                request=request
            )
评论列表
文章目录


问题


面经


文章

微信
公众号

扫码关注公众号