コード例 #1
0
ファイル: spider_main.py プロジェクト: flyyuyuan/pythonlearn
 def __init__(self, isuse, connection):
     self.config = config
     self.connection = connection
     self.urls = url_manager.UrlManager(connection, isuse)
     self.downloader = html_downloader.HtmlDownloader()
     self.parser = html_parser.HtmlParse()
     self.outputer = html_outputer.HtmlOutputer()
     self.imgdownloader = img_downloader.ImgDownloader()
コード例 #2
0
 def __init__(self):
     # url管理器
     self.urls = url_manager.UrlManager()
     # 下载器
     self.downloader = html_downloader.HtmlDownloader()
     # 解析器
     self.parser = html_parser.HtmlParse()
     # 输出器        
     self.outputer = html_outputer.HtmlOutputer()
コード例 #3
0
ファイル: spider_main.py プロジェクト: Alpsy/Alspy
 def __init__(self):
     self.urls = url_manager.Urlmanager()  # url管理器对象
     self.download = html_download.HtmlDownloader()  # 网页下载器对象
     self.parser = html_parser.HtmlParse()  # 网页解析器对象
     self.output = html_output.HtmlOutput()  # 网页输出对象
コード例 #4
0
ファイル: main.py プロジェクト: LYgithub/Spiders
#