robots.py 文件源码

python
阅读 23 收藏 0 点赞 0 评论 0

项目:cocrawler 作者: cocrawler 项目源码 文件源码
def __init__(self, robotname, session, datalayer):
        self.robotname = robotname
        self.session = session
        self.datalayer = datalayer
        self.max_tries = config.read('Robots', 'MaxTries')
        self.in_progress = set()
        self.magic = magic.Magic(flags=magic.MAGIC_MIME_TYPE)
        self.robotslog = config.read('Logging', 'Robotslog')
        if self.robotslog:
            self.robotslogfd = open(self.robotslog, 'a')
        else:
            self.robotslogfd = None
评论列表
文章目录


问题


面经


文章

微信
公众号

扫码关注公众号