Beispiel #1
0
    def __init__(self, *a, **kw):
        AizouCrawlSpider.__init__(self, *a, **kw)

        import argparse

        parser = argparse.ArgumentParser()
        parser.add_argument('--skip', type=int, default=0)
        parser.add_argument('--limit', type=int)
        parser.add_argument('--city', type=int, nargs='*')

        self.args, leftovers = parser.parse_known_args()
Beispiel #2
0
    def __init__(self, *a, **kw):
        AizouCrawlSpider.__init__(self, *a, **kw)

        import argparse

        parser = argparse.ArgumentParser()
        parser.add_argument('--skip', type=int, default=0)
        parser.add_argument('--limit', type=int)
        parser.add_argument('--city', type=int, nargs='*')

        self.args, leftovers = parser.parse_known_args()
Beispiel #3
0
    def __init__(self, *a, **kw):
        AizouCrawlSpider.__init__(self, *a, **kw)

        import argparse

        parser = argparse.ArgumentParser()
        parser.add_argument('--skip', type=int, default=0)
        parser.add_argument('--limit', type=int)
        parser.add_argument('--min-width', type=int, default=0)
        parser.add_argument('--min-height', type=int, default=0)
        parser.add_argument('--query', type=str)

        self.args, leftovers = parser.parse_known_args()

        section = conf.global_conf.get('qiniu', {})
        self.ak = section['ak']
        self.sk = section['sk']
Beispiel #4
0
 def __init__(self, *a, **kw):
     AizouCrawlSpider.__init__(self, *a, **kw)
     Ly.__init__(self, *a, **kw)
     self.date = (datetime.datetime.utcnow() + datetime.timedelta(hours=8)).strftime('%Y-%m-%d')
Beispiel #5
0
 def __init__(self, *args, **kwargs):
     AizouCrawlSpider.__init__(self, *args, **kwargs)
Beispiel #6
0
 def __init__(self, *a, **kw):
     AizouCrawlSpider.__init__(self, *a, **kw)
     Ly.__init__(self, *a, **kw)
     self.date = (datetime.datetime.utcnow() +
                  datetime.timedelta(hours=8)).strftime('%Y-%m-%d')