コード例 #1
0
ファイル: spider_main.py プロジェクト: jocelyn24/craw 
 def __init__(self):
     self.urls = url_manager.UrlManager()
     self.downloader = html_downloader.HtmlDownloader()
     self.parser = html_parser.HtmlParser()
     self.outputer = html_outputer.HtmlOutputer()
コード例 #2
0
ファイル: http_main.py プロジェクト: menglingqiang/CrawBaidu 
 def __init__(self):
     self.urlmanager = url_manager.UrlManager()
     self.parse = http_parse.HttpParse()
     self.download = http_download.Download()
     self.writer = http_writer.HttpWriter()