Python AizouCrawlSpiderの例

コード例 #1

ファイル: qunar.py プロジェクト: Lvxingpai/Andaman

    def __init__(self, *a, **kw):
        AizouCrawlSpider.__init__(self, *a, **kw)

        import argparse

        parser = argparse.ArgumentParser()
        parser.add_argument('--skip', type=int, default=0)
        parser.add_argument('--limit', type=int)
        parser.add_argument('--city', type=int, nargs='*')

        self.args, leftovers = parser.parse_known_args()

コード例 #2

ファイル: qunar.py プロジェクト: ennea8/Andaman

    def __init__(self, *a, **kw):
        AizouCrawlSpider.__init__(self, *a, **kw)

        import argparse

        parser = argparse.ArgumentParser()
        parser.add_argument('--skip', type=int, default=0)
        parser.add_argument('--limit', type=int)
        parser.add_argument('--city', type=int, nargs='*')

        self.args, leftovers = parser.parse_known_args()

コード例 #3

    def __init__(self, *a, **kw):
        AizouCrawlSpider.__init__(self, *a, **kw)

        import argparse

        parser = argparse.ArgumentParser()
        parser.add_argument('--skip', type=int, default=0)
        parser.add_argument('--limit', type=int)
        parser.add_argument('--min-width', type=int, default=0)
        parser.add_argument('--min-height', type=int, default=0)
        parser.add_argument('--query', type=str)

        self.args, leftovers = parser.parse_known_args()

        section = conf.global_conf.get('qiniu', {})
        self.ak = section['ak']
        self.sk = section['sk']

コード例 #4

ファイル: ly_viewspot_info.py プロジェクト: Lvxingpai/Andaman

 def __init__(self, *a, **kw):
     AizouCrawlSpider.__init__(self, *a, **kw)
     Ly.__init__(self, *a, **kw)
     self.date = (datetime.datetime.utcnow() + datetime.timedelta(hours=8)).strftime('%Y-%m-%d')

コード例 #5

 def __init__(self, *args, **kwargs):
     AizouCrawlSpider.__init__(self, *args, **kwargs)

コード例 #6

 def __init__(self, *a, **kw):
     AizouCrawlSpider.__init__(self, *a, **kw)
     Ly.__init__(self, *a, **kw)
     self.date = (datetime.datetime.utcnow() +
                  datetime.timedelta(hours=8)).strftime('%Y-%m-%d')