Esempi in Python per main

Esempio n. 1

File: script_crawl.py Progetto: abael/grab

 def test_crawl(self):
     TestSpider.url = self.server.get_url()
     self.server.response['data'] = b'1'
     SPIDER_REGISTRY.clear()
     crawl.main('test_spider', settings_module='test.files.crawl_settings',
                disable_report=True)
     self.assertEquals(TestSpider.points, [b'1'])

Esempio n. 2

 def test_crawl(self):
     TestSpider.url = self.server.get_url()
     self.server.response['data'] = b'1'
     SPIDER_REGISTRY.clear()
     crawl.main('test_spider',
                settings_module='test.files.crawl_settings',
                disable_report=True)
     self.assertEquals(TestSpider.points, [b'1'])

Esempio n. 3

 def test_crawl_save_lists(self):
     FailSpider.url = self.server.get_url()
     self.server.response['data'] = b'1'
     SPIDER_REGISTRY.clear()
     crawl.main('fail_spider', settings_module='test.files.crawl_settings')

Esempio n. 4

File: script_crawl.py Progetto: gwynnbleidd1984/grab

 def test_crawl_save_lists(self):
     FailSpider.url = self.server.get_url()
     self.server.response['data'] = b'1'
     SPIDER_REGISTRY.clear()
     crawl.main('fail_spider', settings_module='test.files.crawl_settings')